Fragen zum Python-Crawler

Question

Ich verwende Post, um Webformulardaten zu crawlen. Die Website lautet wie folgt: http://www.ipe.org.cn/Industr... Eines davon ist der Verstoßtyp <Eingabe type="checkbox " name="violation" data-role="all" geprüft="" value="0">, die Webseite wurde auf „geprüft“ gesetzt und hat einen Standardwert, und ich möchte nur die Daten mit Verletzung=1, nein Wissen, was zu tun ist
Das zweite Problem besteht in der Auswahl von Land, Provinz, Stadt<select class="select" name="select" id="country_0" onchange="setProvince_0();"> ;Ich kann es nicht direkt verwenden. Name und Wert wählen die gewünschten Formulardaten aus

Knie nieder und bitte alle Meister um Antworten

Answer 1

他是有API用来返回数据的，你可以抓取一下，点击筛选之后的数据流。大概是这个api，http://www.ipe.org.cn/data_as...，post方式，里面有一个参数叫itemType就是你想要的违规类型。
然后对应的国家，省份，城市等信息都在api中有体现，自己跟一下就知道了。然后根据需求，构造请求你需要的数据，剩下的就是解析了。。。。