某基础设施巨头与AI搜索应用公司的网络爬虫争议

某基础设施巨头与AI搜索应用公司Perplexity就后者的网络爬虫实践发生激烈争议，引发了对AI应用未经授权抓取数据的担忧。

8月4日，某基础设施巨头发布博客文章，指控Perplexity采用欺骗性网络爬虫实践——即自动化系统浏览和索引网站内容，并声称该AI公司通过伪装身份绕过明确选择阻止此类爬虫的网站。

然而，Perplexity不同意这一指控，并声称某基础设施巨头误解了问题。他们认为，大规模爬虫与用户用于从网站检索信息的AI代理并不相同。

某基础设施巨头在向AIM提供的声明中重申其立场（文章后续内容需订阅阅读）。