程序员Aaron开发Nepenthes反制AI爬虫:互联网自由保卫战

60次阅读
没有评论

共计 790 个字符,预计需要花费 2 分钟才能阅读完成。

在科技圈掀起波澜的程序员 Aaron 最近开发了一款名为 Nepenthes 的创新工具,专门用于反制 AI 爬虫。这款工具的诞生源于 Aaron 对 Facebook 爬虫频繁访问其网站的无奈——访问量竟突破 3000 万次!

事实上,AI 公司无视 robots.txt 协议的现象早已屡见不鲜。去年 Anthropic 的 ClaudeBot 就因此遭到强烈批评,Reddit 的 CEO 也曾公开表达不满。Aaron 的 Nepenthes 正是对这种行为的强力回应。

程序员 Aaron 开发 Nepenthes 反制 AI 爬虫:互联网自由保卫战

Nepenthes 的工作原理相当巧妙:它通过构建一个 ’ 无限迷宫 ’ 来困住 AI 爬虫。这一创意源自反垃圾邮件技术中的 tarpitting 方法,只是现在被应用到了 AI 爬虫领域。一旦爬虫陷入陷阱,Nepenthes 就会向其输送大量杂乱数据,据说这些数据能够 ’ 毒害 ’AI 模型。

Nepenthes 一经推出就引发热议。程序员 Nagy 在此基础上开发了升级版 Iocaine,据称能够拦截 94% 的爬虫流量。这让人联想到《公主新娘》中的 ’ 人类已知的最致命毒药 ’,如今却变成了 ’AI 已知的最致命毒药 ’。

然而,这种反制措施并非没有代价。运行这些陷阱会消耗大量服务器资源,而且 AI 公司迟早会找到应对之策。OpenAI 已经在研究对策。但正如 Aaron 所说,既然 AI 训练本身就很耗电,让它们多花点钱似乎也不为过。

这一现象折射出互联网生态的深刻变化。曾经自由开放的互联网,如今被 AI 公司当作免费的数据矿场。Aaron 感叹道:’ 我热爱的互联网早已不复存在。’ 虽然 Nepenthes 可能无法改变现状,但它为那些不愿被 AI 公司无偿利用的人提供了一个选择。

这不仅仅是技术问题,更是一个社会问题。正如 Geuter 所言,AI 正在从 ’ 为我们 ’ 变成 ’ 对我们 ’。当科技公司只顾扩张 AI 帝国而忽视用户利益时,这种反抗终将出现。Nepenthes 或许只是一个开始,但它提醒我们:在 AI 时代,我们仍有选择说不的权利。

正文完
 0
admin-gah
版权声明:本文于2025-01-30转载自Ars Technica,共计790字。
转载提示:此文章非本站原创文章,若需转载请联系原作者获得转载授权。
评论(没有评论)
验证码