python - 一般公司做爬虫采集的话常用什么语言

Question

一般公司做爬虫采集的话常用什么语言 在京东搜点书全是有关java的

Answer 1

Python+1

Answer 2

記事を推奨します
ブログ クローラー テクノロジーを共有します

Answer 3

台湾鉄道の0時切符を作ってみました 最初はPHPで作っていたのですが、毎日0時に切符を掴むものがたくさんあることがわかったので作りました。同時実行と同時実行を実行するには、nodejs を使用して php を呼び出し、同時実行の問題を解決しました。粗雑ではありますが、機能します。 。 。以前は 20 枚のチケットを作成するのに 5 分かかっていましたが、現在は 20 枚のチケットを作成するのに 30 秒以上しかかかりません。 。 。

Answer 4

私は PHP を使用して多くのクローラーを作成しており、データ処理は非常に得意ですが、PHP 自体はクローラーのようなものには適していません。 Python は試してみる価値があるかもしれませんが、試したことはありません

Answer 5

なぜこれほど多くの人がnode.jsを推奨するのでしょうか?数年前にnode.jsがなかったときはクローラーもなかったのでしょうか?

Answer 6

パイソン

強力なサポート

Answer 7

最も単純なものは JavaScript です。これは完全にスクリプト化されており、Archer Cloud クローラー フレームワークを使用することをお勧めします。

Answer 8

JavaScript を使用してクローラーを作成し、クラウド内で作成して実行することもできます。ソースコードのアドレス:
https://github.com/ShenJianSh...

Answer 9

作者によれば、Go 言語で書かれたクローラーを見たことがありますが、その効率は非常に高いとのことです

Answer 10

Nodejs、Java、C#、VB、PHP、Python、Ruby、Perl