02. 아나콘다(Anaconda)를 이용한 웹크롤링 개발환경 설정

1. 개발환경

- Python Version : 2.7

- 크롤링 라이브러리 : BeautifulSoup4, Scrapy

- 기타 : 아나콘다(Anaconda)를 이용한 가상환경(virtual environment) 설정

2. 아나콘다 설치

① https://www.continuum.io/downloads 사이트에서 운영체제에 맞는 아나콘다를 설치

② 가상환경(Virtual environment) 만들기

- Windows : 설치 후 Anaconda prompt를 실행한다.

- Mac OS : 설치 후 Terminal을 실행한다.

- Terminal/prompt 창에 아래의 명령어를 통해 웹 크롤링 개발환경을 설정할 가상환경을 생성한다. (저는 crawler라는 이름의 가상환경을 만들었습니다.)

# 가상환경 생성하기
conda create -n [가상환경이름] python=2.7

③ 생성한 가상환경에서 웹 크롤링에 필요한 패키지 설치하기

- 아래의 명령어를 통해 생성한 가상환경으로 이동한다.

# Windows 경우 conda prompt 창에서 
activate [가상환경이름]

# Mac OS 경우 Terminal에서
source activate [가상환경이름]

- 아래의 conda 명령어를 통해 필요한 패키지를 설치한다.

# BeautifulSoup4 설치
conda install beautifulsoup4

# Scrapy 설치
conda install scrapy