跳到正文
Hacker News · AI 高分帖· sammy0910·· 3 天前AI 评分20

发帖到 HN 后,我的网站被 AI 机器人流量淹没

I posted to HN, and then my website was flooded with AI bot traffic

AI 导读

开发者将自建 RSS 阅读器 sprinklz.io 发到 HN 后网站持续变慢,排查发现近一半流量来自同一个伪装成"监听网站变化并生成 AI 摘要简报"的爬虫,该爬虫每分钟查询网站多次。作者还识别出 Claude bot、OpenAI bot 等已知爬虫及漏洞扫描器,随后添加 robots.txt、限流并优化基础设施。

来源:Hacker News · AI 高分帖 · sammystraus.com