Rumah > Soal Jawab > teks badan
本人前端一枚
想做一个demo练手,需要得到爬取数据的本领,请问从哪里开始学习呢?
场景:爬取商品价格的数据,得到双十一前后的价格趋势变化,我可以如何入手呢?
我是JavaScript使用者,尽量使用node,如果Python学习成本比较高,求推荐教程和爬取数据的方法
PHP中文网2017-04-18 09:58:30
Rantai alat perangkak:
Gunakan superagent untuk memulakan permintaan http Selepas mendapat respons, gunakan cheerio untuk menghuraikan teks Kemudian anda boleh menggunakan sintaks yang serupa dengan jQuery untuk mengendalikan Dom.
Mongodb boleh digunakan untuk penyimpanan data, dan mongoose boleh digunakan sebagai alat ORM yang sepadan.
Contoh kod
https://github.com/zhanyouwei...
PHP中文网2017-04-18 09:58:30
Bukankah kos pembelajaran Python diketahui paling rendah? ? Mudah untuk bermula dengan perangkak Python Terdapat banyak tutorial dalam talian
高洛峰2017-04-18 09:58:30
Bermula dengan Node dengan tegas, anda boleh merujuk kepada pengalaman baru saya https://github.com/hanzichi/f...
PHP中文网2017-04-18 09:58:30
Kos pembelajaran Python tidak terlalu tinggi, izinkan saya bercakap tentang pengalaman saya
Pada mulanya saya menggunakan urllib, atau urllib2, dan mendapati bahawa saya sangat teruja untuk merangkak data
Kemudian saya melihat halaman di mana Sambungan Ditutup , saya belajar tentang httplib2
dan kemudian melihat permintaan
dan kini saya melihat scrapy
Merangkak ialah metafizik Saya rasa matlamat soalan itu bagus untuk menyemak arah aliran harga, tetapi saya rasa kita boleh menetapkan matlamat kecil dahulu dan merangkak Ensiklopedia Baidu~