AI得了“骗人病”,能治吗?

7个月前 来源:北京日报 观看:74

别被你的AI忽悠了5Us即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!5Us即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……5Us即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。5Us即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?5Us即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。5Us即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。5Us即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。5Us即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。5Us即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。5Us即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。5Us即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。5Us即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。5Us即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。5Us即热新闻——关注每天科技社会生活新变化gihot.com

别被你的AI忽悠了5Us即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!5Us即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……5Us即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。5Us即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?5Us即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。5Us即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。5Us即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。5Us即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。5Us即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。5Us即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。5Us即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。5Us即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。5Us即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。5Us即热新闻——关注每天科技社会生活新变化gihot.com

本文链接:http://www.gihot.com/news-2-1790-0.htmlAI得了“骗人病”,能治吗?

声明:本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇:两个AI,说着说着就“加密”了......

下一篇:第二届中国人形机器人与具身智能产业大会在京举办

为你推荐
  IT之家1月24日消息,受大规模罢工导致商用飞机生产停滞和交付量受限的影响,波音公司昨晚公布的...
01-24
  春节假期临近,宠物寄养成为宠物主关注焦点。  记者12日走访上海多家宠物店发现,近期宠物寄...
01-21
  辽宁省气象台2月10日16时发布大风蓝色预警:  预计11日白天,沈阳、大连、鞍山北部、抚顺、锦州、阜...
02-11
  1月20日,B站五位博主比拼理财收益的视频火了。  每位博主的初始本金为8万,最近一个月各自分头理财,通过最后的收益角逐出 “理财王”。  一个月下来,五位up主投资均...
01-21
  中新经纬1月17日电 (闫淑鑫)“2025年,数字化技术将加速驱动文化产业进一步发展,数字化技术(如人工智能)在内容创作、传播和消费中的应用将更加广泛。”近日,泰中侨商联合会...
01-21
[本站 国内谍照] 1月18日,我们从相关渠道获取到了一组疑似吉利银河旗下全新轿车的路试谍照。从多处细节来看,该车或将归属星舰系列的全新插混车型,从而与星舰7 EM-i等车...
01-21
1 月 24 日消息,据国家市场监督管理总局消息,近日,国际标准化组织批准由我国牵头的 7 项新能源汽车领域国际标准项目立项,涉及电动汽车整车、动力电池、燃料电池及换电 ...
01-24
《余烬之上》美华姐是干嘛的?美华姐的结局是什么?‌《余烬之上》中的美华姐,即戚美华,是廖思远的养母,经营着一家药铺‌。她性格豪放,喜欢享受生活,交际广泛,对廖思...
02-21
《逃命游戏:无限重启》播出后,许多观众对剧情发展和角色命运产生了浓厚兴趣。该剧由夏婧苒和宋旭主演,于每天上午10点更新,属于复仇题材,在汪汪剧场播出。故事讲...
02-21
这里是《21健讯Daily》,欢迎与21世纪经济报道新健康团队共同关注医药健康行业最新事件!政策动向国家药监局药审中心发布《地中海贫血基因治...
02-10
21世纪经济报道记者林昀肖 北京报道 近日,全国中成药联合采购办公室发布第三批全国中成药采购联盟集中采购中选结果。此次中成药集采由湖...
02-13
  大众网记者 司心鹏 报道  12月25日,济南特殊教育中心与济南市公安局公共交通分局联动会议在自强楼会议室召开。  济南特殊教育中心的学校领导热情接待了来访的警...
01-21
为加强基层党组织建设,推进党建工作与中心工作融合发展,进一步提升应用型人才培养质量,经过辽宁石油化工大...
01-21
  我国农村信用社联合社改革明显提速,2024年12月24日国家金融监督管理总局批复同意筹建江苏农...
01-22
  本报记者 熊悦  金价持续攀高之际,已有商业银行下调黄金账户业务(即“积存金”,以下统称“积...
02-11
水瓶座男生通常聪明、理性、独立,他们喜欢追求自由和创新。他们对于社交活动非常感兴趣...
01-22
巨蟹座的男生通常是非常敏感和细腻的,他们对待暗恋他们的女生会有一些独特的方式。 1....
01-22
独特而时尚的饰品店名字推荐,展现潮流与品位在如今这个时代,拥有一个吸引眼球的饰品店名字是至关重要的。想象一下,当顾客走过你的店铺时,一个精致的名字能够瞬间抓住他们的注意...
02-12
女款小立领衬衫怎样搭配外套?立领西服与立领服饰搭配技巧1、 不同场合下正式场合:成熟儒雅――进退有度的气节推荐搭配:深色立领西服套装(立领白衬衫+深色立领西装)黑色为主的...
02-17
2月12日消息,随着电影《哪吒之魔童闹海》登顶全球影史票房榜,电影衍生的正版图书在天猫掀起热潮。天猫中信出版社官方旗舰店的负责人表示,《哪吒・三界往事》这一原创番外绘本,...
02-13
2月18日消息,华盛昌与北京京东数智工业科技有限公司(以下简称“京东工业”)近日在京东集团上海总部举行战略合作协议签约仪式。华盛昌董事长袁剑敏与京东工业副总裁郭晓博作为...
02-19
中国火锅品牌正在逐步打开中东市场的大门。近年来,刘一手、海底捞、小龙坎、哥老官等在中国各城市常见的连锁火锅品牌,纷纷进入中东...
03-01
史玉东有两重身份,他是全国人大代表,也是蒙牛集团全球研发创新中心研发总监。 来自乳业研发一线的身份,让他对行业有更深刻的了解。...
03-05
【#小鹏汽车在新疆成立销售服务公司# 注册资本1000万】天眼查App显示,近日,乌鲁木齐小鹏汽车销售服务有限公司成立,法定代表人为赵大武,注册资本1000万人民币,经营范围含新能源汽...
01-21
2025年1月21日,深圳市聚心教育科技有限公司今日正式官宣,以5000万人民币估值已顺利完成500万元人民币A轮融资。本轮投资是由采纳资本领投,由金伯乐创投、美城创投、领创ITVC、...
01-23
任天堂宣布对Nintendo Switch Online服务进行涨价,但仅涉及拉丁美洲部分地区。此次价格调整将于今年3月实施。 任天堂今日开始向用户发送有关价格变动的邮件。...
02-01
根据网络安全研究人员 Shalzuth 在博客上发布的一篇报告称,目前 Steam 上最受欢迎的多人游戏之一《漫威争锋》存在着“巨大安全漏洞”。 据称,该漏洞可以让黑...
02-13
极目新闻首席记者 戎钰 “打一星的都是‘黑水’!”“我们只想要公平!”“《蛟龙行动》绝不撤档!”这几天,电影《蛟龙行动》的多位主创纷纷表达了对今年春节档竞争中存在的部分不...
02-02
央视网消息:据网络平台实时数据,截至2月2日13时23分,2025年度电影总票房(含预售)突破85亿元。...
02-02
返回

点击右上角微信好友

朋友圈

点击浏览器下方“”分享微信好友Safari浏览器请点击“”按钮

点击右上角QQ

点击浏览器下方“”分享QQ好友Safari浏览器请点击“”按钮