MySQLdb
-
크롤링한 데이터를 MySQL Docker 컨테이너에 저장하기Project/DEVOOK 2022. 1. 31. 23:52
2022.01.31 - [Project/📚DEVOOK] - Selenium을 사용한 동적 페이지 크롤러 구현 앞서 수집한 데이터를 바탕으로 전처리 및 벡터화 작업을 진행해야 하기 때문에 크롤링한 데이터들을 데이터베이스에 저장하였다. 여러 컴퓨터 환경 및 AWS EC2 서버에서 편리하게 사용하기 위해 Docker Compose로 MySQL 컨테이너를 구성하였다. ✔️모델링 간단하게 url, title, description, category 필드를 가지는 테이블 1개로 구성하였다. ✔️docker-compose.yml 파일 구성 # docker-compose-dev.yml version: "3" services: db: image: mysql container_name: devook-db ports: - ..