AI爬虫实测：44%请求来自AI，38%是伪装 2026-11-05 | 分类：AIWO | 浏览:803 11月3日一篇基于真实服务器日志的实测文章，把AI爬虫拆成三种角色：采训练数据、建自家搜索索引、替用户读一个页面。作者统计自家站点 2026年10月29日至11月2日 的 3,785 次请求，其中 1,661 次（44%）带AI爬虫UA；GPTBot 五天抓了384页，比 Googlebot（133页）还多；而 1,6...
