RedditがBingをブロック、Google以外の検索結果に影響

知っておくべきこと

• Reddit は、Bing によるソーシャル メディア サイトのクロールをブロックしました。
• この変更は2024年7月1日に実施され、その後、MicrosoftのAIツールはRedditのクロールを停止してコンテンツをインデックスする必要がなくなった。
• Google 以外のすべての検索エンジンが Reddit からデータを取得できなくなっているようです。つまり、それらの検索エンジンは Reddit の Web サイトからの結果を表示できないということです。

BingはRedditの検索結果を表示しなくなります。Microsoftの検索エンジンにアクセスし、検索結果をRedditに絞り込んだり、検索クエリにRedditを含めたりしても、過去1週間のRedditウェブサイトの検索結果は表示されなくなります。DuckDuckGoなどのGoogle以外の検索エンジンでRedditの検索結果を表示しようとした場合も同様です。

Redditには現在、ウェブサイトからデータをスクレイピングすることを禁止するrobots.txtファイルが含まれています。問題のコードを確認するには、スクレイピングについて言及している特定のページを確認してください。

Microsoft は Search Engine Land への声明でこの変更を認めた。

当社はrobots.txt規格を尊重しています。Bingは7月1日にrobots.txtファイルのアップデートを実施し、Redditのクロールを全面的に禁止した後、Redditのクロールを停止しました。

変更ファイルにもかかわらず、GoogleはRedditの検索結果を表示できます。Redditの広報担当者はThe Vergeに対し、BingがブロックされていることはRedditとGoogleの提携とは関係ないと述べました。

これは、Googleとの最近の提携とは全く関係ありません。複数の検索エンジンと協議を重ねてきましたが、Redditのコンテンツの利用、特にAIへの利用に関して、法的拘束力のある約束をできない、あるいは約束する意思のない検索エンジンもあったため、全てと合意に至りませんでした。

広報担当者はGoogleとRedditの提携関係の存在を否定しておらず、Bingがブロックされている理由が提携関係にあるかどうかのみを否定している点に留意してください。GoogleとRedditの提携関係は6,000万ドルと報じられており、GoogleはRedditのコンテンツにリアルタイムでアクセスできるようになっています。 

幸運の裏返し？

Bingなどの検索エンジンは、Redditのトピック検索に常に便利でした。以前は、コンテンツを検索する際に「Reddit」を追加したり、検索結果をRedditに限定して絞り込んだりするのが効果的でした。検索エンジンは、Redditの組み込み検索機能よりもコンテンツを見つけるのに優れている場合が多いです。

Redditのクローリングは特定のRedditスレッドやコンテンツを見つけるのに役立つかもしれませんが、BingがRedditにアクセスできないことは、AIによるレスポンス生成という点ではむしろ幸運と言えるかもしれません。Googleが検索エンジンでRedditコンテンツを使用する権利を取得したとき、ピザにチーズをくっつけるために接着剤を食べることを推奨しました。うつ病の人に橋から飛び降りるようGoogleが勧めたという報道は懸念を招きました。また、Googleは人々に毎日石を食べることを推奨しましたが、これは健康に良いアドバイスとは言えません。

Bing が Reddit によってブロックされているというヒントを提供してくれたLiam ( X の @djsonicwarrior ) に感謝します。

ショーン・エンディコットはWindows Centralのテクノロジージャーナリストで、Windows、Microsoftソフトウェア、AI、PCを専門としています。Windows 10と11からChatGPTのようなAIツールの台頭まで、主要なリリースを取材してきました。ショーンのキャリアはLumia 930から始まり、アプリ開発者との強いつながりを築きました。執筆活動以外では、アメリカンフットボールのコーチも務めており、チームの運営にMicrosoftのサービスを活用しています。ノッティンガム・トレント大学で放送ジャーナリズムを学び、X（@SeanEndicott_）とThreads（@sean_endicott_）で活躍しています。