AI得了“骗人病”,能治吗?

6个月前 来源:北京日报 观看:68

别被你的AI忽悠了lTn即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!lTn即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……lTn即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。lTn即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?lTn即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。lTn即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。lTn即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。lTn即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。lTn即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。lTn即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。lTn即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。lTn即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。lTn即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。lTn即热新闻——关注每天科技社会生活新变化gihot.com

别被你的AI忽悠了lTn即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!lTn即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……lTn即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。lTn即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?lTn即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。lTn即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。lTn即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。lTn即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。lTn即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。lTn即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。lTn即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。lTn即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。lTn即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。lTn即热新闻——关注每天科技社会生活新变化gihot.com

本文链接:http://www.gihot.com/news-2-1790-0.htmlAI得了“骗人病”,能治吗?

声明:本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇:两个AI,说着说着就“加密”了......

下一篇:第二届中国人形机器人与具身智能产业大会在京举办

为你推荐
  科技日报记者 张佳欣  澳大利亚新南威尔士大学工程师成功演示了一个基于量子力学的“锑猫...
01-21
  1月16日上午,上海市政协十四届三次会议举行“扩内需、稳外需,推动新旧动能平稳转换,促进经济高...
01-21
  据广州铁路警方通报,春运大幕开启,随着客流节节攀升,广州南站安检口查获不少禁止携带上车的行...
01-21
  2月7日,来自辽宁省邮政管理局的监测数据显示,今年春节假期(1月28日至2月4日),辽宁省快递业务揽收量1578....
02-09
长三角的“千亿县”,又扩容了。 近日,合肥长丰县在作2024年政府工作报告时宣布,长丰晋级安徽省第二个“千亿县”。预计全年GDP增长10...
01-21
  “领养条件:成年,经济能力稳定,自己居住或者父母室友房东允许;每个月愿意花三四百元管它吃喝拉撒;支付宝芝麻信用分550分以上;猫咪都是纯种精品健康猫咪,质保180天,终身售后...
01-21
1 月 21 日消息,东风日产今日公布纯电轿车 N7 的全新配色 —— 墨海蓝色。上周,该车已经公布了五种配色,分别为流光银、霜雪白、燕麦米、黑色以及青色,加上此次公布的墨...
01-21
2月4日,赛力斯发布2025年1月产销快报。数据显示,赛力斯新能源汽车1月销量达17906辆。问界M9系列1月交付12483辆,连续10个月蝉联中国豪华市场50万元以上豪华车销量第一,持续引领...
02-05
《求婚告急》播出后受到了观众的喜爱和追捧,剧情讨论热度居高不下。以下是该剧的主要内容。主演为卡戎和孟璐,上线时间为11:00。题材属于女频-虐渣,可在微剧吧...
02-19
《难哄》向朗喜欢钟思乔吗?向朗和钟思乔什么关系?在《难哄》中,向朗不喜欢钟思乔。向朗是温以凡和钟思乔的发小,他与钟思乔只是朋友关系,没有爱情方面的感情。向...
02-19
  近日,全国多地发生   诺如病毒群体感染事件   诺如病毒引起的急性感染性腹泻   已进入发病高峰期   中国疾控中心相关...
01-21
  回望现代医学的发展,我们不得不承认有一些“疾病”是和时代捆绑在一起的,但也有一些,似乎像是...
02-08
编译丨刘玉洁 赵广立 美国密歇根州的贝克学院(Baker College)是一所有百...
01-21
在山东省高密市一篮球训练营,孩子们在进行篮球基本功训练。通讯员 李海涛 摄在山东省高密市一篮球训练营,孩子们在进行篮球基本功训练。通讯员 李海涛 摄  寒假来临,山东省...
01-21
  近日,由元保集团(以下简称“元保”)和清华大学五道口金融学院中国保险与养老金融研究中心联合...
01-22
  本报记者 彭妍  近期,广东南澳农商银行、山西怀仁农商银行等部分中小银行的1年期、2年期存...
02-13
天蝎男是一个内敛而神秘的星座,他们往往不会轻易表露自己的感情。当他们暗恋一个人时,常...
01-22
巨蟹座的男生通常被认为是情感细腻、善解人意的代表。然而,他们也有一些独特的方式来考...
01-22
十大服饰品牌是什么?世界十大服饰品牌:1、唐纳・卡兰唐纳・卡兰(donnakaran)的创始人是一个外表平和貌不惊人的女子,为了使其服饰王国走向多元化,在1984年和丈夫联手创立了自己的...
02-12
lv包包和ysl包包哪个? ysl包包真假鉴定?lv包包和ysl包包哪个?看你买那种了,钱包很一般的两折的大概三千多,大点的自然就会贵很多,平时出门背的包我们国内买的最便宜的是五千多,经典...
02-17
阿里苹果或将联手,为iPhone开发AI功能一则重磅消息,让阿里股价再创阶段新高。2月11日晚间,据The Information援引知情人士消息称,苹果为了应对在中国市场销售下滑的局势,正积极寻...
02-13
2月15日消息,字节跳动日前举办新一期的All Hands全员会,字节CEO梁汝波、CFO高准、人力资源负责人华巍、电商业务负责人康泽宇、AI业务负责人朱文佳、TikTok CEO周受资与全体员...
02-15
3月1日消息,同程旅行日前与海南省政府签署战略合作框架协议,标志着同程旅行在海南省的投资布局力度进一步加大,为海南省建设国际旅游消费中心,打造世界一流旅游目的地提供多维度...
03-01
踏入双春闰月婚庆旺年,婚庆金饰备受关注。但金价的持续走高,让备婚年轻人感到焦虑。“金价那么高,结婚有必要买五金吗”——社交平台...
03-09
AI领域再添新融资。1月22日,AI硬件公司未来智能完成数千万元人民币的Pre-A轮融资,由万物创投领投,初心资本跟投。这是未来智能继2021年种子轮融资、2023年天使轮融资后完成的第...
01-23
在当下的都市生活中,宠物已成为许多年轻人心灵的港湾,它们不仅填充了孤独的时光,更成为了一种新兴的生活方式符号。这股由宠物引发的“它经济”浪潮,正以不可阻挡之势席卷而来,重...
02-09
最近我第一次亲眼看到了 Steam Deck,才意识到这款掌上电脑实际上有多大。当初我已经觉得 PS Vita 的体积和重量不方便携带,SteamDeck对于随时随地有玩游戏来说可...
01-29
近日在四川内江资中,一名小孩往下水道投放鞭炮,瞬间引发剧烈爆炸。 据国内媒体报道称,四川资中县一男孩将鞭炮扔进下水道引发化粪池内沼气爆燃,事故现场多辆停放在...
02-02
距离除夕只剩几天,“回家”成为大街小巷最热门的话题。窗前的红灯笼、热闹的年货市场、街头巷尾的新春歌曲……处处洋溢着喜庆的氛围。“我恭喜你发财,我恭喜你精彩,最好的请过...
02-02
记者当地时间5日获悉,位于美国华盛顿州的西塔科机场当天10时左右发生轻微碰撞事故,一架滑行中的日本航空公司飞机撞到一架停靠的达美航空飞机尾部,碰撞未造成人员受伤。目前事...
02-06
返回

点击右上角微信好友

朋友圈

点击浏览器下方“”分享微信好友Safari浏览器请点击“”按钮

点击右上角QQ

点击浏览器下方“”分享QQ好友Safari浏览器请点击“”按钮