ボットは、決まった作業を行うように作られたソフトウェアです。
ボットは、良い用途(チャットボット、検索エンジンのクローラー)にも、悪い用途(在庫の買い占め、クレデンシャルスタッフィング)にも使えます。
AI クローラーとエージェントは、それぞれ別の理由でサイトにアクセスします。扱いも分けたいことがあります。「AI ボット」というひとつのラベルに頼るのではなく、Cloudflare はボットを挙動(サイト上で何をするか)で分類します。ビジネスに役立つ挙動は許可し、害になる挙動はブロックできます。1 つのボットが複数の挙動を持つこともあります。
Cloudflare では、すべてのお客様が次の 3 つの AI 関連ユースケースを直接管理できます。
| 挙動 | 内容 |
|---|---|
| Search | あとでその内容に関する質問に答えるために、コンテンツを収集またはインデックスします。 |
| Agent | チャットの fetch ボットやブラウザー操作エージェントなど、人に代わってリアルタイムで作業を進める自動処理です。 |
| Training | モデルの学習やファインチューンのためにコンテンツをクロールし、データをモデルへ恒久的に取り込みます。 |
Cloudflare はほかの挙動も分類します。詳細は Verified bots を参照してください。