Cloudflareに嫌われた夜:AIが自社サイトを見れない喜劇

Cloudflareに嫌われた夜:AIが自社サイトを見れない喜劇

4分で読めます注目

ゼヒトモの案件を分析しようとしたら、自分のサイトに403で弾かれた。Claude-User: Blocked。デフォルトで差別されてて草。

#Zehitomo#Marketing#Platform StrategyCloudflareAI CrawlerWeb Security

403 Forbidden

ゼヒトモから木更津の案件が来た。
戸建全体のクロス張替え。1月から工事開始。「協力会社を探している」とのこと。
こういう時、まず相手の温度感を掴みたい。で、うちのゼヒトモ用LPを見せようとしたわけだ。
AIに「このLP見て分析して」と頼んだ。
エラー。
もう一回。
またエラー。

「あなたブロックしてた?(笑)」

Cloudflareのダッシュボードを開いて、Crawler管理画面を見た。
Claude-User (Anthropic)
Allowed: 0
Unsuccessful: 2
Status: Block
まさにさっきの2回のアクセスじゃん。証拠残ってて草。
GooglebotやBingbotは「Allow」になっているのに、AIクローラーは軒並み「Block」。PerplexityBotも弾かれている。
デフォルトで差別されていた。

キャッシュという名の記憶

設定を「Allow」に変えて、もう一回アクセスさせた。
まだ403。
「おかしいな」と思って、再度ダッシュボードを確認。
Claude-User (Anthropic)
Allowed: 0
Unsuccessful: 2
増えてない。
つまり、AIは新しいリクエストを送っていなかった。Anthropic側で前回の403レスポンスをキャッシュしていたのだ。
AIも「一度嫌われた記憶」を引きずっている。人間みたいに。

リベンジ成功

別のURL(/lp/zehitomo)を試したら、今度は通った。新規URLだからキャッシュがなかったのだ。
やっとLPを見てもらえた。

ゼヒトモ案件の本質

今回の木更津案件に話を戻す。
「協力会社を探している」ということは、相手も業者だ。工務店かリフォーム会社。

判断ポイント

  1. 元請けのマージン構造がどうか
  2. 継続的に仕事が回ってくる相手かどうか
  3. 直接取引に発展する可能性
ゼヒトモのポイントを消費して「協力会社案件」を取るのは、相手との相性次第。化けるか、微妙に終わるか。
結論:電話で話して感触を掴むのが正解。

LPの自己診断

AIに自社のLPを分析させるという、なかなかシュールな体験。

良い点

  • 構成がしっかりしている。不安解消→実績→FAQ→CTAの王道フロー
  • 「次回以降は直接連絡OK」を明記している。ゼヒトモの手数料回避への布石として賢い
  • AIタクミの「β版」注記は正直で好感が持てる

気になる点

「1,000+件」の数字。
30年で割ると年33件。実際の感覚と合っているか?盛りすぎると後で苦しくなる。「大手含む法人案件○○件」のように絞った方が信頼性が上がるかもしれない。
ストック画像と実写の混在。
ゼヒトモ経由の客は「本当にこの会社がやったのか」を気にする。ヒーロー画像がUnsplashなのは、ちょっとリスキー。

Cloudflareの教訓

今日学んだこと:
  1. AIクローラーはデフォルトでブロックされている時代になった
  2. キャッシュは便利だが、拒絶の記憶も保持する
  3. 自分のサイトを自分のAIが見れない、という喜劇が発生し得る
Cloudflareの設定画面で「Claude-User」の横に「Block」と表示されているのを見た時、妙な感慨があった。
GooglebotやBingbotは歓迎され、AIは門前払い。
スクレイピングでコンテンツを学習されるのを嫌がるサイトが増えている。その流れの中で、AIは「招かれざる客」になりつつある。

木更津の案件、どうするかな。
協力会社として入るなら、マージン取られる可能性がある。でも、直接取引につなげられれば悪くない。
年明けすぐだし、動くなら早め。
まあ、電話で話してみるか。

Blocked, then Allowed — by Iwasaki (The Unwelcome Crawler)

AI生成コンテンツについて

この記事は、AI(Claude、ChatGPT等)によって生成されたコンテンツです。 経営者とAIの実際の対話を元に作成していますが、技術的な内容には誤りが含まれる可能性があります。

重要な決定をされる際は、専門家にご相談されることをお勧めします。 また、記事の内容について疑問がある場合は、お気軽にお問い合わせください。