AI得了“骗人病”,能治吗?

1年前 来源:北京日报 观看:131

别被你的AI忽悠了KtX即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!KtX即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……KtX即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。KtX即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?KtX即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。KtX即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。KtX即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。KtX即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。KtX即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。KtX即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。KtX即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。KtX即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。KtX即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。KtX即热新闻——关注每天科技社会生活新变化gihot.com

别被你的AI忽悠了KtX即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!KtX即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……KtX即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。KtX即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?KtX即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。KtX即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。KtX即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。KtX即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。KtX即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。KtX即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。KtX即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。KtX即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。KtX即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。KtX即热新闻——关注每天科技社会生活新变化gihot.com

本文链接:http://www.gihot.com/news-2-1790-0.htmlAI得了“骗人病”,能治吗?

声明:本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇:两个AI,说着说着就“加密”了......

下一篇:第二届中国人形机器人与具身智能产业大会在京举办

为你推荐
据物理学家组织网15日报道,美国劳伦斯·利弗莫尔国家实验室(LLNL)科学家将国家点火装置(NIF)所发射的高功率激光与超轻金属泡沫巧妙结合,创造出迄...
01-21
韩国电气研究所下一代电池研究中心的科学家,成功攻克锂硫电池在能量密度和循环寿命方面的关键技术瓶颈,研制出一款具有高能量密度和长循环寿命的大面...
01-23
  1月26日起,我省迎来强降雪寒潮大风天气。省住房城乡建设厅根据气象部门预报信息,提前印发通知,要求各...
01-28
  春节期间,崇礼富龙滑雪场,热闹、喜庆。皑皑白雪之中,洋溢着异域风情的建筑群,仿佛是一个梦幻般...
02-08
新闻通讯员 木子春运承载着亿万游子对家乡的眷恋与期盼,春节的脚步近了,归心似箭的人们纷纷踏上返乡之路。据交通运输等部门预计,今年春运全社会跨区域人员流动量将达到90亿人...
01-22
  中新经纬1月17日电 (袁媛)2025年,全球经济面临增长动力不强的挑战。面对外部环境的深刻变化,中国亟需通过创新驱动新旧动能转换,以确保未来的可持续增长。  科技创新成为...
01-21
1 月 21 日消息,据 BYDOTA 消息,比亚迪面向 25 款海豹汽车内测车主推送1.1.0 版本 OTA 更新,主要新增城市领航(CNOA)等 16 项功能及 20 项优化。该版本当前处于内测阶段,...
01-21
1 月 28 日消息,奥迪位于比利时布鲁塞尔的工厂将在 2 月 28 日结束 Q8 e-tron 车型的生产,并随后关闭工厂,约 3000 名员工将失去工作岗位。奥迪这一决定引发了诸多争议...
01-29
近期播出的《消失的明月》特别受欢迎,无数观众深陷其中,无法自拔。许多人都渴望了解这部剧的剧情。主演是林思彤和徐世鑫,上线时间为每天10:00。该剧属于女频...
02-20
《余烬之上》故事简介,余烬之上在哪个台播出?‌《余烬之上》主要讲述了主角廖思远在十年前的一场火灾中家破人亡,并因此催生出双重人格。十年后,他意外卷入一宗...
02-21
  近日公布的新版医保药品目录新增91种药品,目录内药品总数增至3159种,参保人的“药篮子”再次升级。医保目录是如何诞生...
01-21
21世纪经济报道记者武瑛港 实习生张烁 北京报道小红书上又多出来了一批“难民”,不过这次是医美“难民”——近日北京塑研医疗美容诊所疑似...
01-25
  大众网记者 杨涛报道  日前,“外研社·国才杯”“理解当代中国”全国大学生外语能力演讲大赛(山东赛区高职组)成绩揭晓,青岛港湾职业技术学院的王淑珍同学凭借出色的表...
01-21
教育家精神深深植根于中华传统师道文化,同时也展现了新时代教师的精神风貌。新华网联合北京教育融媒体中...
01-23
  眼下,国内农产品价格整体回暖引起了市场关注,其中,玉米表现较为“抢眼”,玉米期货主力合约价格...
01-23
  近日,多家消费金融公司围绕春节购物、出行、旅游等消费需求,打造多样化服务和优惠举措,推出满...
01-24
星座配对一直是人们关注的话题,其中双鱼男和金牛女的组合备受瞩目。他们之间的配对指数...
01-22
天蝎座男生是十二星座中最神秘、深沉的一种类型,他们对感情非常认真,一旦喜欢上一个人,会...
01-22
剑南春销量排行榜? 比亚迪销量排行榜?剑南春销量排行榜?剑南春销量第五名:剑南春全国名酒销量排名前十名:冠军:茅台亚军:五粮液第三名:泸州老窖第四名:洋河第五名:剑南春第六名:郎酒第...
02-07
探索当下男孩服饰潮流:不容错过的小店推荐在当今这个注重个性与时尚的时代,男孩们的服饰同样不乏亮点。每当我走进一家特色的潮流小店,总能发现那些独具创意、令人惊艳的服饰,这...
02-12
2月11日消息,为加力推进农村电商、乡村旅游等乡村产业发展壮大,近日,农业农村部指导抖音等网络平台,开展“星乡村”“星农人”培育工作,以公益方式扶持培育一批有特色有潜力的乡...
02-11
2月15日消息,2025年宝山区优化营商环境暨投资促进大会近日举办,向全社会释放宝山区优化营商环境、实干前行的鲜明信号,发出共享发展机遇、双向奔赴的盛情邀约。本次大会对2024...
02-15
图源:图虫创意 不断下行的猪价终于在2024年出现回升,A股生...
02-21
虽然房地产市场历经变幻,刚需与改善型置业需求始终存在,它们是这个万亿规模市场永续发展的核心动力和基础支撑。今年2月以来,部分城...
03-09
近日,上海友趣惠信息科技有限公司(以下简称“友趣惠科技”)已完成A轮2800万元人民币的融资,由中海洋盛佳投资控股有限公司(以下简称“中海洋盛”)投资。...
02-07
全球性金融券商集团英国EBC Group平台始终致力于以领先生态,与全球交易者共塑交易的未来。 自第一届交易大赛起,为赤忱的热爱和卓越的才华提供舞台,在全球内寻找交易好手以赋能...
01-24
5070是英伟达新50系更具性价比的主流显卡,根据欧洲零售商Proshop的曝光,NVIDIA的中端显卡GeForce RTX 5070 Ti预计将在2月20日发布。 这也意味着RTX 5070 Ti首次...
01-24
网易策略游戏《万民长歌:三国》Steam商店页公开,计划推出DEMO以供试玩,计划登陆创意工坊,鼓励玩家制作游戏mod,以古中国这片大地为舞台,创造更多创意的玩法。 《万...
02-10
极目新闻记者 张扬实习生 许诺2月2日大年初五,湖北省黄冈市黄州区的安国禅寺前的广场热闹非凡。遛鸟的大爷提着竹笼在花坛边切磋鸟鸣,举着相机的游客围着青云塔转圈找角度,穿汉...
02-02
极目新闻记者 余渊 近日,有网友发视频称,湖南岳阳市平江县一辆警车连撞三辆车后,驾驶员逃离现场,此事引发关注。上述视频中,有人员声称:“一辆警车连撞三辆车后发生爆胎,随后驾驶员...
02-08
返回

点击右上角微信好友

朋友圈

点击浏览器下方“”分享微信好友Safari浏览器请点击“”按钮

点击右上角QQ

点击浏览器下方“”分享QQ好友Safari浏览器请点击“”按钮