최대 깊이 제한에 도달했을 때 인쇄를 무시하는 방법 go colly

PHP 편집기 Strawberry는 오늘 go colly 크롤러 프레임워크를 사용할 때 인쇄가 최대 깊이 제한에 도달하는 문제를 무시하는 데 도움이 될 수 있는 방법을 소개합니다. 웹 페이지 데이터를 크롤링하는 과정에서 우리는 일반적으로 구조가 깊게 중첩되어 콜리 프레임워크의 기본 인쇄 깊이 제한이 모든 데이터를 완전히 표시하지 못하는 상황에 직면합니다. colly 프레임워크의 디버깅 옵션을 설정하면 이 문제를 쉽게 해결하고 보다 포괄적인 데이터 표시를 얻을 수 있습니다. 다음으로 구체적인 단계에 대해 알아보겠습니다!

질문 내용

저는 go colly 크롤러를 가지고 있고 많은 웹사이트를 크롤링하려고 합니다. 내 터미널에서는 다음과 같이 많이 인쇄됩니다.

으아악

이렇게 하면 내가 인쇄한 일부 인쇄물을 읽기가 어렵습니다. 터미널에서 이것을 인쇄하는 것을 무시할 수 있는 방법이 있는지 궁금합니다. 감사합니다

솔루션

达到最大深度限制은 colly.errmaxlength입니다. 프로젝트에 다음과 같은 코드가 있어야 합니다.

으아악

이 오류를 기록하지 않으려면 간단한 확인을 추가하여 제외하세요.

으아악

또 다른 옵션은 출력을 파일로 리디렉션하는 것입니다.

으아악

또는 tee를 사용하여 출력을 파일 및 stdout에 복사합니다.

으아악

위 내용은 최대 깊이 제한에 도달했을 때 인쇄를 무시하는 방법 go colly의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!