Reddit CEO 表示微软抓取数据须付费 搜索流量不再仅靠内容爬取

Reddit 首席执行官史蒂夫・霍夫曼要求微软等公司为其网站数据付费，并已与谷歌和 OpenAI 签订付费协议。微软、Anthropic 和 Perplexity 拒绝谈判，Reddit 采取了限制数据抓取的措施。霍夫曼表示，付费协议对于确保数据合理使用至关重要，并指出微软等公司认为互联网内容可以免费使用的观点有失偏颇。Reddit 近几个月加强了打击未经授权网络爬虫的措施，更新 robots.txt 文件屏蔽部分搜索引擎爬虫，导致在 Bing 等搜索引擎上消失。微软方面表示尊重 Reddit 的决定，但认为这一做法对其他搜索引擎不公平。