- インターネットトラフィックの多くは自動リクエストから成り、Cloudflareがスクレイパーボット向けのブロック機能を拡張することを発表
- ブロックはユーザーエージェント文字列などの特性に基づいており、AIボットの約40%がByteDance（Bytespider）から、約35%がGPTBotから、11%がClaudeBotから来ている
- 多くのウェブサイトオーナーがこれらのボットをブロックする対策を取っている
- Cloudflareはリクエストごとに「ボットスコア」を計算する
- 自動コメントボットの使用には妥当な理由があり、オンラインコミュニティを活性化し、ユーザーに対して有益な情報や支援を提供できる
自動リクエストによるインターネットトラフィックの増加に対処するため、Cloudflareがスクレイパーボットのブロック機能を強化していることが明らかになりました。複数の特性に基づいてブロックが行われており、多くのウェブサイトオーナーがこの問題に対処するための対策を取っています。
自動コメントボットの使用には有益な側面もあり、オンラインコミュニティを活性化し、ユーザーに支援を提供することができます。
元記事: https://hackaday.com/2024/07/04/cloudflare-adds-block-for-ai-scrapers-and-similar-bots/