LexstwebSpider 1.0

ライセンス: 無料 ‎ファイルサイズ: 548.75 KB
‎ユーザー評価: 3.0/5 - ‎1 ‎投票

無料のウェブクローラは、検索エンジンビルダー -lexst-SEA と一緒に使用する場合、100億ページのインデックスを作成できます。インターネットとインターネットの両方のためのマルチスレッドと分散された無料のウェブクローラ。スパイダーがページをクロールする頻度を制御したり、ページをローカルに保存したり、検索エンジンの申請者に送信したりできます。

バージョン履歴

  • バージョン Spider1.0 に転記 2009-06-23

プログラムの詳細