Free Tools
【ご利用前に必ず免責事項をご確認ください】
robots.txt 生成
robots.txt 生成ツール
※検索エンジンのクローラーに対して、サイト内のどの部分をクロールしてよいかを指示するファイルを作成します。
使い方のヒント
- Disallow: 管理画面(/wp-admin/など)や、未完成のページを検索結果に出したくない場合に指定します。
- 設置場所: 生成されたテキストを
robots.txtという名前で保存し、ドメインのルートディレクトリ(例: https://example.com/robots.txt)にアップロードしてください。 - 注意: robots.txtは「命令」ではなく「お願い」です。悪意のあるクローラーはこれを無視することがあります。
技術仕様
- Directives Constructionユーザー入力に基づき、User-agent、Disallow、Sitemapの各ディレクティブをRFC 9309(robots.txt標準)に準拠した形式で組み立てます。
- Dynamic List ManagementJavaScriptを用いて、複数のDisallowパスを動的に配列で管理・一括出力します。
- Client-side Generationすべての処理はブラウザ上で実行されます。サイトの構造(パス情報)が外部サーバーに送信されることはありません。
免責事項
- ・本ツールの利用によって生じた損害やトラブルについて、弊社は一切の責任を負いかねますので、あらかじめご了承ください。
- ・本ツールは、Web制作やシステム管理の効率化を目的として提供しております。
- ・入力されたデータはブラウザ内で処理され、弊社サーバーへ送信・保存されることはありません。
- ・予告なくツールの仕様変更や提供の中止を行う場合があります。
このようなツール開発・業務効率化をご検討の方へ
ご相談はこちら無償ソフト公開活動へのご支援
NetEnumをはじめ、NetEnumMobile、オンラインソフト、FreeTools など、
弊社では20年以上にわたり各種ソフトを無償で公開してまいりました。
これまでのご利用へのお気持ちや、公開継続へのご支援をいただけますと大変励みになります。
業務利用されている方からのご支援も歓迎しております。
※ ご支援は特定ソフトの更新や機能追加をお約束するものではなく、
無償ソフト公開活動全体の維持・運営に活用させていただきます。
※ Stripeの安全な決済ページへ移動します(決済画面の表示名は仕様上「ECサイト」となりますが、当社のStripeアカウントによる決済です)