# 热门搜索 #
搜索
AI搜索花式翻车,谷歌居然又栽在了数据清洗上
8527点击    2024-05-27 22:37

此前在5月15日举行的I/O开发者大会上,谷歌CEO纳德拉向外界正式介绍了AI搜索功能AI Overviews(AI概览)。在谷歌Gemini大模型de 驱动下,AI Overviews能够在谷歌搜索的页面顶部总结提炼用户查询内容的概要。


在许多业内人士看来,AI Overviews无疑是谷歌搜索引擎上线25年以来最大的一次革新,以至于谷歌方面敢于宣称该功能将重新定义搜索体验。



01


但遗憾的是,抢先体验了AI Overviews的美国用户对于“重新定义搜索体验”持不同意见。


例如The Verge的记者Kylie Robison就在文章中讽刺了AI Overviews的翻车。她在文中举了一个例子,就是当用户查询如何将芝士和披萨饼胚粘在一起的时候,AI Overviews的回答是,“加点胶水”。尽管胶水确实可以解决粘连问题,但这极有可能是Gemini出现了“幻觉”(Hallucination)所导致的结果。


AI大模型会出现“幻觉”,这如今几乎是人尽皆知的事情,谷歌公司发言人Meghann Farnsworth似乎也是按照Gemini因“幻觉”翻车来解释的。


他表示,“这些错误来自通常非常罕见的查询,不能代表大多数人的体验”。但神通广大的网友很快给出了AI Overviews会回答“在披萨上涂胶水”的理由,因为这个回答实际上来源于一个名为“fucksmith”的Reddit用户在11年前发的帖子。



02


AI Overviews会采纳Reddit用户的帖子来作为回答并不奇怪,因为谷歌与Reddit在AI搜索上是有合作的。


AI Overviews的前身是Search Generative Experience(SGE),它是谷歌推出的一种实验性版本的搜索引擎。在美国谷歌选择了Reddit作为合作伙伴,为用户提供更精准、及时的搜索解答。其实使用Reddit的数据并不奇怪,可问题是谷歌为什么会采信这种明显出现常识错误的数据。


所以最有可能的解释,是谷歌在数据清洗上出现了纰漏,以至于让“有毒”的数据进入了Gemini的数据集。如果事实果真如此,那么在某种意义上就证明了谷歌为了在AI赛道追赶OpenAI,已经急功近利到走火入魔的地步。因为在此之前,谷歌在大模型的数据清洗上已经翻车过一次。


去年年末、也就是Gemini上线不久后,就有国内网友发现用中文向Gemini Pro提问时,Gemini Pro会直接表示自己是百度的文心一言。紧接着在更多的网友提问下,Gemini Pro一会认为自己是小爱同学,一会又承认自己是悟道大模型开发团队北京智源做的。



对此,当时业内人士的主流观点,是谷歌在训练数据上大概率使用了百度文心一言的输出结果,以此来蒸馏自家的Gemini Pro。要知道,OpenAI已经证实了大模型的“幻觉”问题和数据质量息息相关,数据投毒攻击(Data Poisoning Attack)也已经是一个AI领域不可回避的问题。


根据研究人员在HITCon安全会议上的演讲显示,只需要“污染”不到0.7%数据就可以完全绕过防御,进而全面降低大模型输出内容的准确率。


用谎言去验证谎言得到的一定是谎言,如果数据集中的参数本身就有问题,那么得到的回答自然就会是错漏百出。因此数据清洗一直以来都是AI厂商最为重要的工作之一,几乎所有的大模型都会加入数个纠错和屏蔽措施,避免数据库遭受有毒信息的污染。



更为关键的是,谷歌可是做搜索引擎起家的,而搜索引擎的核心技术就包括了数据清洗,将爬虫抓取的数据中存在的缺失值、异常值(离群点)、重复值去除,就都是数据清洗的一部分。结果他们在AI业务上却接二连三地因为数据清洗问题翻车,这显然不是个正常的现象。


03


反常背后必然有原因,在许多海外网友看来,谷歌从AI赛道领跑者的位置滑落,进而不得不追赶OpenAI的现实,可能导致了他们变得如此急躁。


过去一年间,AI初创企业Perplexity就被视为是谷歌的挑战者,而这家公司被投资者看中的原因也很简单,因为它做的是AI搜索。并且就在此次I/O开发者大会举行前,OpenAI也被曝出将要做AI搜索来挑战谷歌,因此AI Overviews更像是谷歌对于Perplexity和OpenAI的回击。或者说在此次I/O开发者大会上,谷歌无论如何都得展现出自己对AI搜索的态度,即便没有AI Overviews、也得有AI abstract。



只不过急功近利必然是有代价的,用户使用搜索引擎是希望寻求答案,可AI Overviews给出的答案却是偏颇的,这无疑就是在动摇大众对于谷歌搜索的信任。作为这家公司最为核心的产品,谷歌搜索应该是稳健的,但现在谷歌却把一个实验性质的功能直接推向数以十亿计的用户,这不是急功近利又是什么?


本文来自微信公众号“三易生活”(ID:IT-3eLife),作者:三易菌


关键词: AI搜索 , AI , 谷歌 , 数据集 , 模型训练
AITNT资源拓展
根据文章内容,系统为您匹配了更有价值的资源信息。内容由AI生成,仅供参考
1
AI爬虫

【开源免费】ScrapeGraphAI是一个爬虫Python库,它利用大型语言模型和直接图逻辑来增强爬虫能力,让原来复杂繁琐的规则定义被AI取代,让爬虫可以更智能地理解和解析网页内容,减少了对复杂规则的依赖。

项目地址:https://github.com/ScrapeGraphAI/Scrapegraph-ai

2
AI搜索

【开源免费】MindSearch是一个模仿人类思考方式的AI搜索引擎框架,其性能可与 Perplexity和ChatGPT-Web相媲美。

项目地址:https://github.com/InternLM/MindSearch

在线使用:https://mindsearch.openxlab.org.cn/


【开源免费】Morphic是一个由AI驱动的搜索引擎。该项目开源免费,搜索结果包含文本,图片,视频等各种AI搜索所需要的必备功能。相对于其他开源AI搜索项目,测试搜索结果最好。

项目地址:https://github.com/miurla/morphic/tree/main

在线使用:https://www.morphic.sh/