robots.txt の作成
クロールを許可・拒否するパス、AI 学習用クローラーの拒否、サイトマップの場所を選んで robots.txt を作成します。
- 登録不要・無料
- ブラウザ内で処理
- データ送信なし
※ robots.txt はクローラーへの「お願い」で、アクセス制限ではありません。公開したくないページはパスワード保護などで守ってください。
関連ツール
Web制作・SNS sitemap.xml の作成 URL の一覧から XML サイトマップ（sitemap.xml）を作成します。更新日・更新頻度・優先度も指定できます。 Web制作・SNS メタタグ・OGP タグの作成 ページのタイトル・説明文・URL・画像から、title・description・OGP（Facebook・X）のメタタグをまとめて作成します。 Web制作・SNS box-shadow の作成 影のずれ・ぼかし・広がり・色・透明度を指定して、CSS の box-shadow を作成します。ふんわりした影のプリセット付き。 Web制作・SNS CSS clamp() の計算（レスポンシブな文字サイズ） 画面幅に応じて文字サイズなどを滑らかに変える CSS の clamp() を、最小・最大のサイズと画面幅から計算します。