파이참에서 스크래피(scrapy) 사용하기

1. 아무 파일 만들기

 

2. scrapy 모듈 설치

ctrl + alt + s를 눌러 scrapy 모듈을 다운 받아준다.

 

3. scrapy import 하기

scrapy 모듈을 다운 받았으면 scrapy 모듈을 import 해준다.

import scrapy

 

4. 프로젝트 init 하기

scrapy 모듈은 다른 모듈과 달리 설치한다고 바로 쓸 수 있는 것이 아니었다.

다음으로 프로젝트를 init 해주어야 한다.

프로젝트 init을 위해 다음과 같은 코드를 작성해주어야 한다.

import scrapy

from scrapy import cmdline
cmdline.execute("scrapy startproject park".split())

 다음과 같이 입력하고 실행(ctrl+shift+ F10)을 누르면

다음과 같은 결과를 얻을 수 있고

다음과 같이 자동으로 디렉터리 및 파이썬 파일이 생성된다.