機器人警察：強制執行您的 robots.txt 原則，並在機器人到達您的網站前加以阻止

https://blog.cloudflare.com/zh-tw/ai-audit-enforcing-robots-txt/