AI得了“骗人病”,能治吗?

5个月前 来源:北京日报 观看:63

别被你的AI忽悠了Ofj即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!Ofj即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……Ofj即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?Ofj即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

别被你的AI忽悠了Ofj即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!Ofj即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……Ofj即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?Ofj即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。Ofj即热新闻——关注每天科技社会生活新变化gihot.com

本文链接:http://www.gihot.com/news-2-1790-0.htmlAI得了“骗人病”,能治吗?

声明:本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇:两个AI,说着说着就“加密”了......

下一篇:第二届中国人形机器人与具身智能产业大会在京举办

为你推荐
1月7日,哈电集团哈尔滨电气国际工程有限责任公司(以下简称“哈电集团国际公司”)、天津市河西区政府联合举办“三改联动”专题交流会。记者从会上获悉...
01-24
美国马里兰大学医学院外科团队在异种移植领域取得一项重要进展,他们在最新一期《自然·医学》杂志上发布了关于第二例基因编辑猪心脏移植案例...
01-24
  一场降雪,光顾辽沈大地,“兆丰年”的同时,也为归乡人的安全畅行带来了些许麻烦。辽宁交投高速运营公司...
01-27
  为确保财政支农政策落实到位,省财政厅会同省农业农村厅早谋划、早安排、早部署,分析研判各地任务安排...
02-05
新闻记者 潘锡珩通讯员 苏杭 徐媛媛1月21日凌晨0时55分,1168名旅客从广州白云站搭乘G4554次“夜行高铁”踏上返回武汉的归程,虽已是深夜,但旅客们回家的热情满满。这是中国铁路...
01-22
  开年A股第一宗并购!紫金矿业137亿元入主藏格矿业  1月16日,备受市场瞩目的2025年A股并购第一单落锤。  1月16日晚间,藏格矿业(000408.SZ)公告,紫金矿业(601899.SH)同步...
01-21
1 月 24 日消息,如果你正在犹豫是否选择电动汽车(EV)作为下一辆新车,安全性很可能是一个重要的考虑因素。与传统的燃油车(ICE)相比,电动汽车究竟更安全还是更具风险?澳大利...
01-25
春运大幕已经拉开,一汽-大众敏锐发现不少客户仍有买不到票,回家难的需求,暖心发起公益回家之旅活动,号召全国经销商,为大家筹备安心“顺风车”,致力于让每一位归心似箭的人,都能无...
01-27
  1、《树下有片红房子》自2月15日开始在腾讯视频全网独播,腾讯会员首更四集,连更七天,周日到周三每天更新两集,周四和周五每天更新一集。  2、腾讯暂时只出了前七天的追剧...
02-18
  1、《难哄》导演和《偷偷藏不住》不是同一个导演,《难哄》导演是瞿友宁,《偷偷藏不住》的导演是李青蓉。  2、这两部作品虽然都出自同一个作者,也都是在优酷全网独播的,...
02-22
  近日,我国发现一起猴痘病毒Ⅰb亚分支聚集性疫情,传染源为1位外籍人员,有刚果(金)旅居史。发现疫情后,国家及浙江、广东、北京、天津等省(市)迅速启动联防联控机制,开展流调...
01-21
这里是《21健讯Daily》,欢迎与21世纪经济报道新健康团队共同关注医药健康行业最新事件!政策动向安徽将牵头开展全国生物药联盟集采1月14日,安...
01-21
   ——山东大学尼山学堂培养古典学术专门人才的探索  尼山学堂师生在曲阜游学考察。王薪...
01-21
  大家好,我是童学会小记者王馨涵。  当流星划过夜空,除了赞叹他的美丽之外,你是否想过它背后的故事?带着这个好奇心,4月14日,我们来到了九紫宝藏陨石博物馆,探索陨石奥秘。...
01-21
  四家上市险企业绩预增  股债共振推动利润预期改善  □记者 张小洁 北京报道  中国太...
02-05
  2月10日,集运指数(欧线)期货主力合约2504收涨14.22%。期货日报记者注意到,集运指数(欧线)期货主力...
02-11
天秤座的男生一向以温和、善良而受人喜爱。他们对待感情也是如此,总是慎重而细腻。然而...
01-22
摩羯座的人通常比较内敛和保守,他们不太擅长表达自己的情感,因此要让摩羯座主动找你并不...
01-22
休闲衬衫搭配什么裤子和鞋子好看?一、休闲衬衫搭配什么裤子和鞋子好看?休闲衬衫搭配什么裤子 配阔腿牛仔裤 随着复古的阔腿裤回归,阔腿裤的搭配越来越灵活。 最常见的韩范妹子...
02-12
引领潮流:2023年热门时尚服饰与包包选择潮流的魅力时尚,总是充满变幻与惊喜。每一年、每一个季节,都见证着不同的潮流风向。在2023年的时尚舞台上,服饰和包包更是不可忽视的主角...
02-12
2月6日消息,沃尔玛加拿大公司近日宣布,将投资65亿加元(约45亿美元)用于门店和供应链的布局与扩张。该计划包括开设数十家门店,其中首批五家超级购物中心将于2027年前在安大略省和...
02-07
2月20日消息,永辉超市2025年首期全国调改店长专项培训近日落幕。来自全国各地的167名店长学员顺利结业,这一成果标志着永辉超市“2025调改计划”人才培养体系落地,为全国门店调...
02-21
2月21日消息,银联国际日前与阿联酋本地转接网络Al Etihad Payments(AEP)签署合作协议,双方将在阿联酋当地共同推动发卡行发行“银联-Jaywan”双品牌卡,提升当地居民日常消费、跨...
02-22
2月25日消息,携程集团公布2024年第四季度及全年财务业绩。四季度,携程集团净营业收入为127亿元,同比增长23%;净利润为22亿元,2023年同期净利润为13亿元;经调整EBITDA为30亿元,2023...
02-25
近日,华力创科学宣布完成数千万元A+轮融资,本轮融资由金属3D打印领域头部上市公司铂力特独家投资。据披露,本轮融资所募集的资金将专注于深挖高性能光学多模态感知技术,结合金属...
01-24
近日,宿迁时代储能科技有限公司(简称“宿迁时代储能”)完成A+轮数亿元融资。本轮融资由北京绿色能源基金领投,昌平能源智造基金、南京邦盛资本、北京...
02-07
大年初一,《真三国无双:起源》制作人庄知彦在X上发推,用中文“蛇年大吉,恭喜发财!”向中国玩家拜年,发布新年祝福。 他随后用日语再次向国内玩家恭贺新年,祝中国玩...
02-01
TAYUTA CREATE工作室制作并发行,一款恐怖逃生冒险新游《寄生隧道》Steam上线,本作暂不支持中文。 《寄生隧道》:Steam地址 《寄生隧道》游戏中,玩家被困在了传闻...
02-06
问:美国东部时间2月1日,美方宣布对中国输美产品加征10%关税。中方对此有何评论?答:美方以芬太尼问题为由,对中国输美产品加征10%关税,中方对此强烈不满,坚决反对,将采取必要反制措施...
02-02
新华社北京2月2日电 近日,在世界乒乓球职业大联盟(WTT)新加坡大满贯赛正赛开始前,中国乒乓球队、中国乒协围绕世界排名及WTT系列赛事的赛制,与国际乒联、WTT核心团队进行了交流。...
02-03
返回

点击右上角微信好友

朋友圈

点击浏览器下方“”分享微信好友Safari浏览器请点击“”按钮

点击右上角QQ

点击浏览器下方“”分享QQ好友Safari浏览器请点击“”按钮