Vercel、Fastly、またはサーバーからクローラーログを送信
どのホストでもAIクローラーの訪問を確認できます。各訪問はクローラーの公開IPアドレスと照合され、偽のボットは別に集計されます。
約5分
必要なもの
- Webサイトのプロジェクト
- VercelまたはFastlyの設定、もしくはサーバーのアクセスログへのアクセス権
- 1
Searviaでエンドポイントを作成
プロジェクト › AIクローラー
ウェブサイトのプロジェクト › AIクローラー › ログソースを開き、VercelまたはFastlyを選択します。Searviaがこのサイト専用の非公開アドレスを表示します。
- 2
Vercel
vercel.com
VercelでTeam Settings › Drains(Log Drains)を開き、Searviaのアドレスでドレインを追加して、JSONとプロキシ(エッジ)ログを選択します。Vercelが表示する認証コードと署名シークレットをSearviaに貼り付けると、リクエストが署名されます。
- 3
Fastly
manage.fastly.com
Fastlyでサービス › Logging › HTTPSを開き、SearviaのアドレスをURLとして貼り付け、メソッドをPOSTに設定し、Searviaに表示される形式(リクエストごとに1行のJSON)を指定します。
- 4
またはログファイルをアップロード
任意のサーバーから、nginxまたはApacheのアクセスログ(combined形式)かCloudFront標準ログをアップロードします。そのままでも.gzでも可、最大50MB。
- 5
レポートを見る
認証済みの訪問、偽の訪問、クローラーが受け取ったステータスコード、404や5xxエラーに遭遇したページを確認できます。エラーのあるページはAutopilotにも表示されます。
利用できる内容
どのホストでも、実際にサイトを読み取っているAIクローラーと、失敗しているページを確認できる証拠になります。
- 既知の検索クローラーとAIクローラーからのリクエストのみを保持し、それ以外の訪問者のデータはすぐに破棄されます。
MCPでも利用可能:manage_site_health action=add_log_sourcemanage_site_health action=upload_crawler_log