Reddit限制搜索引擎访问:仅允许Google抓取内容

101次阅读
没有评论

共计 600 个字符,预计需要花费 2 分钟才能阅读完成。

Reddit 最近调整了其策略,现在仅允许 Google 搜索引擎抓取其内容,而其他搜索引擎如 Bing、DuckDuckGo 等则被屏蔽。这一变化源于 Reddit 对 AI“滥用”内容的担忧。

Reddit 限制搜索引擎访问:仅允许 Google 抓取内容

今年二月,Google 与 Reddit 达成了一项价值约 6000 万美元的协议,使用 Reddit 的数据来训练 Google 的 AI 模型,并在搜索结果中更突出地显示 Reddit 的内容。自此以后,Reddit 在 Google 搜索中的显示频率显著增加。

然而,Reddit 最近更新了其 robots.txt 文件,阻止了所有非 Google 的搜索引擎抓取其网站内容。这一变化首先由 404 Media 报道,指出 Reddit 此举是为了防止其内容被“滥用”。

Reddit 在 robots.txt 文件中表示,他们相信开放的互联网,但不相信公共内容的滥用。这一政策变化是在发现有商业实体大量抓取 Reddit 内容并任意使用之后做出的。

尽管 Reddit 表示愿意与其他搜索引擎合作,但由于对内容使用的限制,包括在 AI 训练中的使用,尚未与所有搜索引擎达成协议。目前,Bing、DuckDuckGo 等搜索引擎无法显示 Reddit 的最新内容,而 Kagi 搜索引擎则因为从 Google 购买了部分搜索索引,仍能显示 Reddit 的数据。

这一策略调整对用户和搜索引擎都产生了影响,用户可能无法通过其他搜索引擎获取最新的 Reddit 内容,而搜索引擎则需要寻找新的方法来优化其搜索结果。

正文完
 0
admin-gah
版权声明:本文于2024-07-27转载自9to5google.com,共计600字。
转载提示:此文章非本站原创文章,若需转载请联系原作者获得转载授权。
评论(没有评论)
验证码