基本的な robots.txt ファイルを作成します。
クロールルールを定義するために user-agent、許可パス、禁止パスを入力してください。
robots.txt
User-agent: * Allow: /
このツールでできること
使い方
利用シーン
FAQ
必要な値を入力して、下の結果パネルを確認してください。
関連ツール
URL テキストをエンコード、デコード、チェックします。
見出しからSEO互換のスラッグを生成します。
SERP ビューでタイトルと説明フィールドをプレビューします。