首页 > 生活分享 > 免费教学 > 微软正努力治疗AI幻觉,可实时屏蔽和重写毫无根据的信息

微软正努力治疗AI幻觉,可实时屏蔽和重写毫无根据的信息

发布时间:2024-06-21 23:07:55

6 月 21 日消息,就在 GPT-4 因征服标准化测试而登上头条时,微软研究人员正在对其他 AI 模型进行一种非常另类的测试 —— 一种旨在让模型捏造信息的测试。

为了治好这种被称为“AI 幻觉”的症状,他们设定了一个会让大多数人头疼的文本检索任务,然后跟踪并改进模型响应,这也是微软在测定、检测和缓解 AI 幻觉方面的一个例子。

微软 AI 负责项目的首席产品官 Sarah Bird 表示,“微软希望其所有 AI 系统都是值得信赖且可以有效使用的”。

我们可以向这个领域投入许多专家和资源,因此我们认为自己可以帮助阐明“应该如何负责任地使用新型 AI 技术”的方法,并使其他人也能够做到这一点。

从技术角度来讲,AI 幻觉是一种“缺乏事实依据”的内容,这意味着 AI 模型改变了它所给定的数据或添油加醋描述了原本不存在的信息。

当然,AI 幻觉这种东西也不是所有时候都毫无用处,例如当用户希望 AI 帮自己写一个科幻故事,或给出一种非传统想法时,就属于是有益的;但在大多数需要 AI 的场景,诸如医学和教育等场景就显得多余了,因为准确性大于一切。

因此,微软也在努力根据其自有 AI 产品(例如 Copilot)来试图攻克 AI 幻觉,研究一系列工具来帮助机器解决幻觉问题。

微软表示,其工程师花了数月时间,通过检索增强生成技术(一种无需重新训练模型即可向模型添加额外知识的技术)将必应搜索数据作为 Copilot 的依据,通过必应的答案、索引和排名数据帮助 Copilot 提供更准确、更相关的回复,同时提供引用信息,让用户可以自行查找和验证。

“该模型非常擅长推理信息,但我们不认为它应该成为答案的来源,”Bird 说,“我们认为数据应该是答案的来源,因此我们解决这个问题的第一步是向模型提供最新、高质量且准确的数据。”

除此之外,微软还试图通过各种工具帮助客户做到这一点,例如 Azure OpenAI 服务中的“Your Data”功能可帮助企业组织用自己的数据来训练生成式 AI。

值得一提的是,微软还推出了一种实时工具,可以大规模检测应用中依据企业数据的可靠程度。微软表示,Azure AI Studio 可以根据来源文档评估响应的可靠程度。

据介绍,微软还正在开发一种新的针对措施,可以实时屏蔽和纠正“毫无根据”的信息。当检测到事实依据错误时,该功能将根据数据自动进行重写。

微软 AI 负责项目的首席产品经理 Ken Archer 表示,“处于生成式 AI 的前沿意味着我们有责任和机会让自己的产品更安全、更可靠,并让客户也能放心使用我们的工具”。

免费教学更多>>

Intel大小核梦开始的地方:12代酷睿处理器停产在即! 宏碁推Acer Chromebook (Spin) 311:采Kompanio 540,面向教育 苹果胜诉:美国加州iPhone隐私收集案指控被驳回 vivo五连冠,小米创新高,OPPO三合一 ColorOS 16一月体验升级内容推送:支持iPhone通信互联 年货消费“变天”了!AI正在改写电商的底层逻辑 百度文心5.0正式版上线,模型参数达2.4万亿 一键复制 10 年工作经验,Coze 2.0 Skill 实测|AI 上新 OpenWrt One路由器装Debian系统,摇身变轻量级服务器! 今年Pro Max旗舰扎堆亮相:国产TOP5厂商集体跟进 对标苹果 联想moto X70 Air Pro官宣支持中国国家地理山河四季联合影像 OpenAI正式进军脑机接口,投了自家CEO阿尔特曼的新公司 民企纳税百万可买原价飞天,自营店:满足条件即可,茅台销售公司:仅针对原有客户 OpenAI想造“AI耳机”,但可能闹了个笑话 钱不白花!老主板升级50显卡带不动?实测解除你的焦虑 REDMI Turbo 5 Max跑分曝光 天玑新款旗舰芯片 网传小米阔折叠9月发布,拥有自研AP芯片、折叠OS等卖点 阿里千问发布会在即 神州数码蹭上阿里云热度 库克退意已决!新CEO候补是个「硬件控」 王自如放话安卓做不出好Air?荣耀李坤:你远离圈子太久了 真我Neo8真机亮相!赛博紫+觉醒光环,这波设计我直接跪了 2026开年王炸!TCL把旗舰级Mini LED价格打下来了 苹果Vision Pro邀你“坐”在场边看湖人队比赛:150Mbps码率 华为余承东带队前往广汽集团交流共建鸿蒙生态 vivo X300系列:双芯加持+影像续航双革新,1月底换机别错过! 华为和北汽的合作项目享界,结果余承东跑来看了,改成旅行车。 传长安汽车因2025年销量未达目标而取消员工年终奖引发不满! 丰田凯美瑞VS星海S7,到底谁才是真正的“家用王炸”? 现代起亚2025全球销售727.39万辆!坐稳全球TOP3 别克至境SUV预告图发布 延续概念车设计2026年内上市