Robots.txt 2.0

ライセンス: 無料トライアル ‎ファイルサイズ: 2.94 MB
‎ユーザー評価: 4.2/5 - ‎6 ‎投票

に関しては Robots.txt

ロボット.txtはロボット除外ファイルとログアナライザソフトウェアのビジュアルエディタです。これにより、ユーザーは、検索エンジンのスパイダーに指示するために必要な.txtのファイルを迅速かつ簡単に作成することができ、Webサイトのどの部分がインデックス化されず、一般のWebパブリックによって検索可能にされず、それらの指示に従わないクモを特定することができます。プログラムは、ユーザーが自分のFTPまたはローカルネットワークサーバーにログオンし、検索可能にする必要がない文書やディレクトリを選択する方法を提供します。このプログラムを使用すると、業界標準のロボット.txtファイルを視覚的に生成することができます。悪意のある、不要なクモを識別し、あなたのサイトからそれらを禁止します。検索エンジンのクローラを多言語サイトの適切なページに直接移動する。出入り口ページ管理用にロボット.txtファイルを使用する。クモを Web サイトの機密性の高い領域やプライベート領域から守る。正しくフォーマットされたロボット.txtファイルをロボットから切り替えないFTPサーバーに直接アップロード.txtクモの訪問を追跡します。作成スパイダーは、HTML、Excel CSV および XML 形式でレポートを訪問します。無料プログラムの更新とアップグレードは、時間に制限なし。操作する Web サイトの数に制限はありません