robots.txtで重要なページをブロックしていませんか?

GooglebotおよびAIクローラー12種と同じようにrobots.txtを読み取り、サイトマップや関連するインデックスシグナルも確認します。

使い方

robots.txtの1行の誤りで、サイト全体が検索結果から消えることがあります。多くはステージング環境の設定の消し忘れが原因です。

robots.txtはクロールを制御するもので、インデックスを制御するものではありません。ページを検索結果に表示させたくない場合は、代わりにnoindexを使用してください。

サイトを監査する

無料アカウントなら、サイト全体をクロールし、毎週再チェックして、問題が起きたときに通知します。

無料で始める料金を見る

その他の無料ツール

ウェブサイトSEOチェッカー全ページを毎週監査AIトレーニングhttp、https、www付き、wwwなしのすべてのバージョンが1つのアドレスにリダイレクトされるか、また何回の転送が必要かをチェックします。AIクローラーチェッカーrobots.txtやファイアウォールがブロックしているAIクローラーを確認できます。GPTBot、OAI-SearchBot、ChatGPT-User、ClaudeBot、PerplexityBot、Google-Extendedなどに対応。llms.txtチェッカーサイトがスマートフォンに対応しているかをチェック:ビューポート、レスポンシブ画像、ファビコン、ページの言語。メタタグチェッカーWebサイト、アプリ、AIでの可視性を数秒でチェック。すべてのツールが無料で、アカウント不要で使えます。Open GraphチェッカーページにあるOpen GraphタグとTwitterカードタグ、そして見栄えの良いリンクプレビューに足りないものを確認できます。スキーママークアップチェッカーページの構造化データ(Organization、LocalBusiness、Product、Article、FAQPageなど)を確認します。GoogleとAI検索のために追加すべきものがわかります。リダイレクトチェッカードメインにSPFと強制適用のDMARCポリシーが設定されているかをチェックし、なりすましメールを防ぎます。hreflangチェッカーChatGPT、Perplexity、Claudeがあなたのサイトを読み取り、理解し、引用できるかをチェックします。クローラーのアクセス、llms.txt、事業者情報のマークアップなど。無料、登録不要。Core Web VitalsチェッカーChromeから取得した実ユーザーのCore Web Vitals(LCP、INP、CLS)、サーバー応答時間、ページサイズ、圧縮の状況を確認できます。無料、登録不要。セキュリティヘッダーチェッカー多言語サイトのhreflangタグをチェック:有効な言語コード、自己参照、x-default。無料、登録不要。SPF・DMARCチェッカーrobots.txtがGoogle、AIクローラー、サイトマップをブロックしていないかをチェックします。無料、登録不要。モバイルフレンドリーテストタイトルタグ、メタディスクリプション、正規URL、SNSタグをチェックし、Googleでの表示イメージを確認できます。無料、登録不要。App Store 順位チェッカー任意のキーワードのリアルタイム上位アプリとあなたのアプリの順位を、50か国で確認できます。AI可視性チェッカーChatGPT はあなたのブランドをおすすめしていますか?お客様と同じ聞き方で尋ねてみましょう。Googleビジネスプロフィール監査Googleマップの掲載情報、口コミ、地図上の順位を上位3社の競合と比較して評価します。アプリ名ジェネレーターアプリ名のAI提案。それぞれ.comの取得可否つき。ブランド名チェッカーあらゆる名前のドメイン、ユーザー名、App Storeでの重複、商標リンクを確認。Google 順位チェッカー国とデバイス別の、Google 上位100件のリアルタイム結果でのあなたの順位。