반응형 공부기록/파이썬15 Scrapy & MongoDB(크롤링한 데이터 MongoDB에 저장하는 방법 & MongoDB 선택한 이유) 1. MongoDB 파이썬 드라이버 설치크롤링 프로젝트의 가상환경에 pymongo 패키지를 설치합니다 pip install pymongo2. MongoDB 설정MongoDB 서버가 실행 중이어야 합니다. 로컬 머신에 MongoDB가 설치되어 있지 않은 경우, 공식 MongoDB 웹사이트에서 MongoDB Community Edition을 다운로드하고 설치합니다.MongoDB 서버가 실행 중인 호스트 및 포트 정보를 기억해두어야 합니다.3. Scrapy 설정 파일 수정Scrapy 프로젝트의 settings.py 파일을 열고 다음과 같이 설정을 추가합니다MONGODB_URI = 'mongodb://localhost:27017/' # MongoDB 서버 호스트 및 포트 정보 입력 MONGODB_DATABASE.. 2023. 6. 28. scrapy로 크롤링 시작하기(크롤링할 도메인이 여러 개일 경우) 이미 phython 가상 환경을 생성하신 분들은 2번부터 참고해주세요. 1. 가상 환경(Virtual Environment) 설정 명령 프롬프트(cmd)를 열고 프로젝트를 생성할 디렉토리로 이동한다. 가상 환경을 생성하고 활성화한다. 아래의 명령을 실행한다. python -m venv myenv cd ./myenv\Scripts ./activate.bat 2. Scrapy 설치 가상환경을 활성화한 상태에서 다음 명령을 실행하여 Scrapy를 설치한다: pip install scrapy 3. Scrapy 프로젝트 생성 원하는 디렉토리로 이동하여 Scrapy 프로젝트를 생성한다. 터미널 또는 명령 프롬프트(cmd)에서 다음 명령을 실행한다: scrapy startproject myproject myproje.. 2023. 6. 27. django 처음 시작하기(윈도우, vscode) 1. 파이썬 설치https://www.python.org/ Welcome to Python.orgThe official home of the Python Programming Languagewww.python.org여기서 다운로드 페이지에 들어가서 각자 운영체제에 맞는 설치파일 다운로드를 한다.2. 가상 환경(Virtual Environment) 설정명령 프롬프트(cmd)를 열고 프로젝트를 생성할 디렉토리로 이동합니다.가상 환경을 생성하고 활성화합니다. 아래의 명령을 실행합니다: python -m venv myenv cd ./myenv\Scripts ./activate.bat3. Django 설치가상 환경에서 Django를 설치합니다. 명령 프롬프트에 아래의 명령을 입력합니다: pip install dj.. 2023. 6. 26. 이전 1 2 3 4 다음 728x90 반응형
