網路爬蟲(又被稱為網頁蜘蛛,網路機器人,在FOAF社群中間,更經常的稱為網頁追逐者),是一種按照一定的規則,自動地抓取萬維網資訊的程式或腳本。
1.需要安裝的環境,主要是Python環境和資料庫環境。
mongodb
redis
mysql
#2.常用的一些函式庫
urillb
re
requests
selenium
phantomjs
lxml
beautifulsoup4
pyquery
#pymysql
#pymongo
redis
flask
django
jupyter
以上是python爬蟲需要安裝哪些函式庫的詳細內容。更多資訊請關注PHP中文網其他相關文章!