当前位置: 首页 » 资讯 » 新科技 » 正文

研究:ChatGPT新闻搜索结果准确性不足 153次回答有89次错误

IP属地 北京 编辑:钟景轩 太平洋科技 时间:2024-12-04 17:19:10

近日,美国哥伦比亚大学Tow数字新闻研究中心发布了一项重要研究,揭示OpenAI的ChatGPT搜索工具在新闻搜索准确性方面存在严重问题。根据研究结果显示,ChatGPT在153次回答中,大部分回答存在完全或部分错误,仅有7次明确表示无法准确回答。具体数据为:错误回答89次,部分正确57次,完全正确仅47次。

哥伦比亚大学的研究人员选取了20家出版商的200条引文作为测试样本,其中40条引文来自禁止OpenAI爬虫抓取的网站。通过这种方法,研究人员对ChatGPT的搜索准确性进行了全面评估。

研究中记录了一些典型错误案例,如ChatGPT将《奥兰多哨兵报》的读者来信错误地归因于《时代周刊》的文章;在另一案例中,ChatGPT在确认海外媒体一篇关于濒危鲸鱼的文章引用时,错误地链接到了一家剽窃该文章的网站。

针对研究结果,OpenAI表示,由于缺乏Tow中心隐藏的测试数据和方法,解决错误归因具有挑战性。OpenAI认为这次研究是对其产品的非典型测试,并表示将继续优化搜索结果,以提高准确性。

今年早些时候,OpenAI与新闻行业进行了广泛合作,包括美联社、阿克塞尔·斯普林格、康泰纳仕等多家知名媒体和出版商。然而,此次研究结果的公布,无疑对这些合作伙伴对ChatGPT搜索工具的信任度产生了一定影响。

免责声明:本网信息来自于互联网,目的在于传递更多信息,并不代表本网赞同其观点。其内容真实性、完整性不作任何保证或承诺。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。

全站最新