AI得了“骗人病”,能治吗?

2个月前 来源:北京日报 观看:20

别被你的AI忽悠了EkI即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!EkI即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……EkI即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。EkI即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?EkI即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。EkI即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。EkI即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。EkI即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。EkI即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。EkI即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。EkI即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。EkI即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。EkI即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。EkI即热新闻——关注每天科技社会生活新变化gihot.com

别被你的AI忽悠了EkI即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!EkI即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……EkI即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。EkI即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?EkI即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。EkI即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。EkI即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。EkI即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。EkI即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。EkI即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。EkI即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。EkI即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。EkI即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。EkI即热新闻——关注每天科技社会生活新变化gihot.com

本文链接:http://www.gihot.com/news-2-1790-0.htmlAI得了“骗人病”,能治吗?

声明:本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇:两个AI,说着说着就“加密”了......

下一篇:第二届中国人形机器人与具身智能产业大会在京举办

为你推荐
中国探月工程嫦娥五号月球样品目前正在北京天文馆展出,“天文馆问月”吸引了众多大小天文迷前往,人们戏称看了展“四舍五入”也算去了趟月球。人们早...
01-21
最新一期《科学》杂志发表论文称,大约350万年前生活在南非的人类祖先——南方古猿,其实是“吃素的”。其饮食几乎完全由植物构成,鲜少或根...
01-23
  国务院新闻办公室8日下午举行春运新闻发布会。据介绍,2024年,全国铁路营业里程超16.2万公里,其...
01-21
  中新社北京2月6日电(记者高凯)据猫眼专业版数据,截至北京时间2月6日13时25分,电影《哪吒之魔...
02-08
记者昨天(21日)从国家发展改革委了解到,我国第八批重大外资项目已经推出。这批标志性外资项目,将在带动我国进出口贸易、促进产业转型升级方面发挥积极作用。新一批重大外资项目...
01-22
现代快报讯(记者韩秋顾潇庄剑翔)“今年的室内温度更暖和了,而且比往年更稳定了。”近日,现代快报记者一进入扬州仪征市浦西一村居民黄先生家中,就明显能感受到与外边温度的差别。...
01-22
[本站 资讯] 近日,广汽集团官方表示,审议通过了《关于GH项目的议案》,并投资设立GH项目公司的事项(暂定名)。公告显示,新公司注册资本为15亿元,计划以该项目公司为载体,与华...
01-21
2 月 4 日消息,赛力斯集团刚刚发布了最新的 2025 年 1 月份产销快报。汇总主要数据如下:赛力斯汽车 1 月产量 17513 辆,同比减少 44.88%;1 月销量 16432 辆,同比减少 47....
02-04
  1、《掌心》电视剧中采莲是在第14集下线的,她的死对叶平安而言是巨大的打击。  2、叶平安等人的计划被礼宗旭提前知道了,为了追回证物,采莲不顾危险追了出去。  3、采...
02-15
《余烬之上》男主是谁啊?余烬之上背后的boss是谁?‌《余烬之上》的男主角是王子奇和孙阳。‌王子奇饰演的廖思远是一个天才破案少年,因童年创伤患上“解离性人...
02-21
21世纪经济报道记者武瑛港 北京报道近期血液净化上市公司健帆生物发布业绩预告,2024年营收为25.95亿元~27.87亿元,与2023年的19.22亿元相比...
02-11
21世纪经济报道记者朱艺艺 李佳英 闫硕 杭州、广州、北京报道“天津老百姓大药房可以订购华为WATCH D2,2988元,医保账号走个人账户”“上海...
02-14
据“北京大学招生办”微信公众号消息,2025年1月14日,北京大学电子信息科学类...
01-21
  教学和布置作业不依赖电子产品,使用电子产品开展教学时长原则上不超过教学总时长的30%……近日,省教...
01-21
  近日,又有一家消费金融公司收到监管罚单。  根据国家金融监督管理总局四川监管局开出的罚...
01-22
  本报记者 冷翠华  见习记者 杨笑寒   截至2月13日,已有135家险企(不含再保险公司)披露了20...
02-14
在星座中,双鱼男被认为是最温柔、体贴的一位。他们对待爱情充满了浪漫和梦幻色彩,总是能...
01-22
天蝎座的男生通常都很深沉、神秘而又充满魅力。如果你想让一个天蝎男爱上你并对你心疼...
01-22
童装拿货术语? 童装术语有哪些?一、童装拿货术语?一手,五手,十手,二十手,一手是五件衣服二、童装术语有哪些?童装术语有:尺码:童装尺码一般以年龄、身高、胸围等作为购买标准。连身衣:...
02-07
魅力与风格并存:男模特如何征服T台走秀当我第一次走上T台,看着千百双眼睛注视着我,那一刻的紧张与兴奋交织在一起。场下的闪光灯、一阵阵掌声、还有设计师们期待的眼光,几乎每一...
02-07
2月10日消息,天眼查显示,2月8日,与辉同行(北京)科技有限公司发生工商变更,原全资股东董宇辉退出股东行列,新增子三省(北京)科技有限公司为股东并全资持股,董宇辉由直接持股变更为间接...
02-11
2月11日消息,天眼查App显示,近日,合肥三只羊网络科技有限公司、广州市美诚食品有限公司等新增一则开庭公告,原告为许某,案由为信息网络买卖合同纠纷,该案将于4月2日在福建南平市建...
02-12
2月14日消息,情人节到来,饿了么联合战略咨询公司OC&C共同发布的《情人节即时零售礼赠趋势与品类机遇洞察》显示,过去三年情人节当天,重点礼赠品类的外卖单量较12日环比增长超过3...
02-15
3月2日消息,京东健康旗下“京医千询”医疗大模型近日启动开源,成为国内医疗行业首个全面开源的垂类大模型。同时,在2月24日更新的MedBench评测榜单上,“京医千询”医疗大模型以...
03-03
【#国家能源集团等在安徽成立新公司# 注册资本2.1亿】天眼查App显示,近日,国能(太湖)新能源有限责任公司成立,法定代表人为赵冠永,注册资本2.1亿人民币,经营范围含太阳能发电技术服...
01-21
近日,中赢供应链管理有限公司(以下简称“中赢科技”)宣布成功完成A轮融资,融资金额高达1000万元人民币。本轮融资由深圳慧财股权投资基金战略投资,标志...
02-07
《异界锁链》监督、《尼尔:机械纪元》设计师田浦贵久似乎已经从白金工作室离职。 上个月,玩家们猜测这位核心创作者可能换了工作,因为他从自己的X(原推特)账号信息...
01-27
春节想打麻将,但又无力招架亲戚们在牌桌上的花式八卦盘问?那就来试试这款主打单人PVE的“i人麻将”吧! 点数无上限、构筑无下限,一起来花式赢积分。在这个春节,i...
01-27
据央视新闻报道,当地时间2月1日,美国联邦选举委员会年底的备案文件显示,埃隆·马斯克在2024年美国大选中的花费超过了2.9亿美元。马斯克 资料图(来源:环球网)文件表明,马斯克在年末...
02-02
央视网消息:据网络平台实时数据,截至2月2日13时23分,2025年度电影总票房(含预售)突破85亿元。...
02-02
返回

点击右上角微信好友

朋友圈

点击浏览器下方“”分享微信好友Safari浏览器请点击“”按钮

点击右上角QQ

点击浏览器下方“”分享QQ好友Safari浏览器请点击“”按钮