AI Crawler Log Analyzer

AIクローラーの来訪を、
アクセスログから見える化。

GPTBot・OAI-SearchBot・ClaudeBot・PerplexityBot などの来訪を、クローラー別・日別・ページ別に集計します。ログはブラウザの中だけで処理します。

    • 無料・登録不要
    • ログはサーバーに送信しません
    • .gz 圧縮のまま読み込み可

    結果の読み方

    来訪の有無・頻度・遮断の3点を見る

    AI検索用のクローラーが来ているか

    OAI-SearchBot(ChatGPT検索)、PerplexityBot、Claude-SearchBot が来ていれば、AI検索の索引に入る前提は整っています。まったく来ていない場合は、robots.txt での拒否、WAF による遮断、あるいは単にサイトの認知度不足が考えられます。LLMO対応度チェッカー で設定面を確認してください。

    4xx が多いのは遮断のサイン

    特定のクローラーだけ 403 や 429 が多い場合、robots.txt ではなく WAF・CDN・セキュリティプラグインのボット対策が働いています。許可したいクローラーなら例外に追加してください。意図して拒否しているなら、その設定が効いている証拠です。

    「ユーザー操作時」のアクセスは引用のサイン

    ChatGPT-User や Claude-User、Perplexity-User は、ユーザーがAIに質問したときにその場でページを取得するアクセスです。これが来ているページは、AIの回答に実際に使われたページです。どのページが引用されやすいかの手がかりになります。

    対応しているログの形式

    Apache / nginx の combined 形式(IP - - [日時] "GET /path HTTP/1.1" 200 1234 "リファラ" "User-Agent")です。Xserver・さくら・ロリポップ・エックスサーバーVPS など、多くの環境の標準形式です。User-Agent を記録しない common 形式ではクローラーを判定できません。JSON 形式や CDN のログには現在対応していません。