AI得了“骗人病”,能治吗?

11个月前 来源:北京日报 观看:96

别被你的AI忽悠了AvY即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!AvY即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……AvY即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。AvY即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?AvY即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。AvY即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。AvY即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。AvY即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。AvY即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。AvY即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。AvY即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。AvY即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。AvY即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。AvY即热新闻——关注每天科技社会生活新变化gihot.com

别被你的AI忽悠了AvY即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!AvY即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……AvY即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。AvY即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?AvY即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。AvY即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。AvY即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。AvY即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。AvY即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。AvY即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。AvY即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。AvY即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。AvY即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。AvY即热新闻——关注每天科技社会生活新变化gihot.com

本文链接:http://www.gihot.com/news-2-1790-0.htmlAI得了“骗人病”,能治吗?

声明:本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇:两个AI,说着说着就“加密”了......

下一篇:第二届中国人形机器人与具身智能产业大会在京举办

为你推荐
科学家在治疗致命的神经退行性疾病——朊病毒病方面取得了重要进展。美国麻省理工学院和哈佛大学博德研究所研究人员开发出一种新的基因...
01-21
【新春走基层·我在大国工程现场】开栏的话 冬去春来,四季更替,又到了喜迎新春的时刻。浓浓的年味里,有人分秒必争,以奋斗书写新一年的梦想;有人...
01-24
  根据省气象部门预报,预计1月26至27日辽宁将有一次强降雪、寒潮、大风天气过程,东部地区有大雪,局部暴...
01-24
  26日起,辽宁多地出现强降雪天气,多部门连夜开始除雪作业。...
01-28
新闻记者 曹磊通讯员 王璐 吕巍在手机上登录各大外卖、团购、电商平台,搜索“江城百臻”,就能立即下单,10分钟至30分钟内就能够拿到最地道的武汉地理农产品。1月21日,新闻记者从...
01-21
  海报新闻记者 孙佃潇 北京报道  1月21日,海报新闻记者从交通运输部获悉,春运期间,河北聚焦新能源车出行增多等特点,全面开展充电能力倍增行动,加快充电基础设施建设,切实...
01-22
1 月 23 日消息,据特斯拉中国,特斯拉宣布为车辆交付时间在2025年1月27日。(含)前的车主提供30天增强版自动辅助驾驶(EAP)免费使用权,相应免费使用权将于1月24日起向车主分...
01-24
2 月 2 日消息,星纪魅族集团官方今日发文宣布,截至 2025 年 1 月,Flyme Auto 合作车型总销量超 49.8 万辆。据此前报道,Flyme Auto 2.0 版本车载软件系统将于今年 3 月...
02-02
自从《痞子无间道》播出以来,该剧在抖音、微博和B站等社交媒体平台上以及各大媒体和论坛上引发了广泛的关注和热议。其中,第9集的剧情介绍成为许多观众关注的...
02-19
《难哄》苏浩安结局是什么?在《难哄》中,苏浩安的结局是与钟思乔收获了甜蜜的爱情。苏浩安是桑延的好兄弟,通过温以凡认识了钟思乔,两人一开始是欢喜冤家,见面就...
02-19
  大城市就医紧张,一些大型三甲医院常年“一床难求”,患者住院经常需要漫长等待。能不能“哪里有床住哪里”?   试点医院住院“...
01-21
  冬天适量食用南瓜,不仅能为身体提供丰富的营养,还能为健康加上一道坚实的屏障,南瓜也越来越成为受到人们喜爱的主食之一。南瓜...
01-21
  大众网记者 司心鹏 通讯员 薛现伟 康宁 报道  12月8日,山东省职业院校技能大赛(高职组)“应用软件系统开发”赛项在山东工业职业学院举行,全省共57个参赛队,经过紧张角...
01-21
  大众网记者 司心鹏 报道  12月24日至12月26日,第三届全国职业技能大赛化学实验室技术赛项山东省选拔赛在山东化工技师学院世界技能大赛化学实验室技术项目中国集训...
01-21
  四川省首家省级法人城市商业银行,开年换帅。据“四川妇女儿童中心”公众号消息,省妇联与四川...
01-22
  2024年年底,成都新易盛通信技术股份有限公司(以下简称“新易盛”)发布公告称,收到公司控股股东...
02-06
水瓶女是一个独立、聪明且有点神秘的星座,她们对感情的态度往往让人捉摸不透。如果你想...
01-22
天蝎座的男生通常以冷静、深沉而闻名。当他们遇到问题或者感到困惑时,他们往往需要一段...
01-22
休闲风穿搭技巧? 港风穿搭特点及元素?一、休闲风穿搭技巧?休闲风穿搭以轻松、舒适和时尚为主要特点,既适合日常生活,也适用于休闲场合。以下是一些建议的休闲风穿搭技巧:1. 选择基...
02-07
加拿大户外运动品牌排行榜?1、TheNorthFace北面  品牌创立时间:1966年  北面是1966年创立于美国的全球知名户外运动品牌,专注于为全球户外运动爱好者提供户外服装、背包、...
02-17
2月10日消息,消费者研究与零售监测公司尼尔森IQ(NIQ)近日宣布与京东超市达成战略合作,双方将就快消品类别进行数据合作,共建消费趋势洞察。此外,双方还将启动“扶摇计划”,共同探索...
02-11
势不可挡,未来可期。1、霞湖世家爆火,登顶视频号不得不说,老板亲自下场直播带货,还是有点用的。这不,视频号上一个名为“霞湖世家”的男装品牌,在老板郭长棋的带领下火了,销售额可...
02-14
2月10日消息,美团外卖发布《年轻人春节送礼报告(2025)》,2025年春节期间,美团平台上“春节送礼”搜索量同比增速达165%,外卖餐饮礼券赠送量环比节前增长120%。其中95后消费者占比...
02-11
2月16日消息,为进一步挖掘哈尔滨消费潜力,加快商家数字化转型,促进“尔滨”餐饮业快速发展壮大,2024年12月20日以来,饿了么平台联合哈尔滨相关部门共同发起“在尔滨还能饿了么”...
02-17
【#平安产险成立轩坤股权投资合伙企业# 出资额100亿】天眼查App显示,近日,嘉兴轩坤股权投资合伙企业(有限合伙)成立,执行事务合伙人为平安创赢资本管理有限公司,出资额100亿人民币...
01-21
近年来,随着资本市场不断深化,中小基金公司凭借灵活的经营策略和专业的投资管理能力,逐步挺进基金行业发展的前列。  最新披露的基金四季报数据显示,众多中小基金公司的公...
01-23
《文明7》将于2月11日发售,近日Firaxis Games公布了游戏新领袖“卑弥呼”。卑弥呼将作为“倭的女王”登场,其特点是擅长科学和外交。官方还发布卑弥呼宣传片,一起...
02-03
《天国:拯救2》虽然有一些争议,但这并没有阻止游戏深受广大玩家的喜爱。该作首发24小时销量破百万,仅用了一天时间就收回了4100万美元的成本。 更能说明的是,《天...
02-10
央视网消息:中国地震台网正式测定:02月02日15时17分在西藏日喀则市定日县(北纬28.43度,东经87.52度)发生3.2级地震,震源深度10千米。...
02-02
2月4日,据报道,《封神2》太原路演现场观众情绪失控,导演乌尔善被观众贴脸质问: “为什么封神的口碑两极分化,你想过没有? 我们作为路人一直在给你说好话,你有没有想过自己去解决这...
02-05
返回

点击右上角微信好友

朋友圈

点击浏览器下方“”分享微信好友Safari浏览器请点击“”按钮

点击右上角QQ

点击浏览器下方“”分享QQ好友Safari浏览器请点击“”按钮