Scrapy 튜토리얼 설치

Scrapy는 Python 기반의 웹 크롤러 프레임워크로, 인터넷에서 정보를 크롤링할 수 있으며 데이터를 얻는 좋은 방법입니다. 그래서 꼭 설치해서 살펴보고 싶었습니다.

공식 홈페이지 설치 소개 페이지로 이동

설치 방법은 세 가지가 있는데 하나는 pip, 하나는 소스 코드 컴파일, 하나는 conda입니다

이전 지식에 따르면 pip는 이미 Python에 통합되어 있습니다. 패키지 관리 도구는 가장 간단하고 명확하지만 공식 웹사이트 소개 인터페이스의 한 문장을 무시합니다

때때로 운영 체제에 따라 일부 Scrapy 종속성에 대한 컴파일 문제를 해결해야 할 수도 있습니다

결과적으로 많은 오류가 발생합니다 컴파일 단계에서 보고된 문제를 하나씩 해결해 보세요.

그러다가 포기하고 소스코드부터 컴파일하니 컴파일 오류가 많이 나더라구요.

선택의 여지가 없어서 콘다를 보러 가서 60MB 정도 되는 미니콘다를 다운받았습니다. 주의 깊게 연구한 결과, 결과는 정말 멋졌습니다.

아마도 Python은 패키지를 다운로드한 후 컴파일해야 한다는 사실을 알아차렸을 것입니다. 컴파일은 자체 OS의 환경 구성에 의존해야 하기 때문에 종종 오류가 발생합니다.

miniconda는 Python이 이미 설치되어 있는 통합 환경입니다. 이는 miniconda를 다운로드하고 설치하는 것과 같습니다. 즉, 기본 Python 핵심 프로그램을 다운로드한 다음 conda 명령을 사용하여 기능 확장을 위해 conda로 컴파일된 패키지를 다운로드할 수 있습니다. 즉, scrapy 패키지와 lxml, Twisted 및 이에 의존하는 기타 컴파일된 패키지가 컴파일되었습니다. 그런 다음 다운로드하여 직접 사용하십시오.

위 내용은 Scrapy 튜토리얼 설치의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!