Pakar perangkak ular sawa yang dihormati, lihat dan lihat cara menangani anti-merangkak di tapak web ini.

Question

https://www.everysaving.co.uk
Merangkak data laman web ini melalui python, tetapi data tidak boleh dikembalikan! Saya menambah pengepala dan IP proksi untuk merangkak, tetapi saya harap anda semua boleh mencubanya. . .

Answer 1

Laman web akses ejen boleh dilihat pada gambar di bawah:

Melalui https://www.17ce.com/, saya mendapati hampir semua tanah besar China disekat, dan status HTTP mengembalikan 403.
Tahap dasar keselamatan tapak web ini agak tinggi adalah disyorkan untuk menggunakan VPN atau pelayan proksi tanpa nama tinggi di Eropah dan Amerika Syarikat untuk mengurangkan kekerapan merangkak.

Answer 2

fiddler menangkap paket, anda boleh menghantar apa sahaja yang dihantar pelayar

Answer 3

Alamat anda tidak boleh diakses terus melalui pelayar Adakah ia disekat?

Answer 4

Saya tidak boleh mengaksesnya jika saya mengkliknya secara terus Saya mengujinya menggunakan proksi di Singapura dan ia boleh dibuka

.