AI得了“骗人病”,能治吗?

1年前 来源:北京日报 观看:118

别被你的AI忽悠了3dS即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!3dS即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……3dS即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。3dS即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?3dS即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。3dS即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。3dS即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。3dS即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。3dS即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。3dS即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。3dS即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。3dS即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。3dS即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。3dS即热新闻——关注每天科技社会生活新变化gihot.com

别被你的AI忽悠了3dS即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!3dS即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……3dS即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。3dS即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?3dS即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。3dS即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。3dS即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。3dS即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。3dS即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。3dS即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。3dS即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。3dS即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。3dS即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。3dS即热新闻——关注每天科技社会生活新变化gihot.com

本文链接:http://www.gihot.com/news-2-1790-0.htmlAI得了“骗人病”,能治吗?

声明:本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇:两个AI,说着说着就“加密”了......

下一篇:第二届中国人形机器人与具身智能产业大会在京举办

为你推荐
北京时间1月17日6时38分,美国太空探索技术公司(SpaceX)新一代重型运载火箭“星舰”从美国得克萨斯州起飞,完成第七次试飞发射。该火箭第一级助推器又一...
01-21
【新春走基层·我在大国工程现场】开栏的话 冬去春来,四季更替,又到了喜迎新春的时刻。浓浓的年味里,有人分秒必争,以奋斗书写新一年的梦想;有人...
01-24
  随着假期的收官,各地春节旅游“成绩单”相继出炉。北京凭借入境游、庙会游、冰雪游的持续升...
02-07
  辽宁省海洋预警监测中心2月6日16时发布海浪Ⅳ级蓝色警报。  受强冷空气影响,预计6日夜间至7日白天...
02-07
  1月20日,北京住房公积金管理中心(以下简称“公积金中心”)发布《关于开展提取住房公积金直付...
01-21
新闻记者 潘锡珩通讯员陈默 龙慧芳近日,武汉市武昌区黄鹤楼街道读书社区的居民代表,为武钢江南燃气公司送上了一面锦旗,上面写着“踏实为民办实事,情暖人心暖寒冬”,以此表达对江...
01-22
1 月 24 日消息,本月 10 号,备受关注的特斯拉焕新 Model Y 正式开启预售。相比旧版本涨价 1.26~1.36 万元,预计 3 月开始交付,其中:后轮驱动首发版(593km 标准续航)26.35 ...
01-25
1 月 27 日消息,雷军昨日发文称,小米汽车已和 13 家行业内优质运营商达成充电补能网络合作,超过 102 万充电桩入驻「小米充电地图」,今年的 Flag要成为“公用桩充电之王...
01-28
近期,《重症外伤中心》备受关注,播出后引发了广泛讨论。这部剧中的一个关键情节是韩宥林对白江赫医生态度的转变。在剧中,白江赫医生凭借精湛的技术和冷静的态...
02-19
  檀健次和李兰迪搭档主演的电视剧《滤镜》已经定档了,这是一部充满科幻色彩的现代喜剧。《滤镜》电视剧什么时候上映?下面一起了解下这部剧主要讲述了个怎样的故事吧。  ...
02-21
21世纪经济报道记者李佳英、季媛媛 广州、上海报道 细胞疗法,作为新一代精准医疗技术的典范,正在推动全球生物制药行业的最新一轮发展和变革...
01-25
21世纪经济报道记者林昀肖 实习生苏洋 北京报道 2月6日,香雪制药发布《关于被债权人申请预重整的提示性公告》(以下简称《提示性公告》)。其...
02-09
近期,阜新市第一职专刘艳霞名班主任工作室阶段汇报会在学校一楼礼堂举行。会议由工作室成员冯宇老师主持...
01-21
1月12至14日,清华大学国家卓越工程师学院12名硕博士研究生来到沈阳开展研学实践活动。团沈阳市委有关负...
01-21
  唐山银行股份有限公司(下称“唐山银行”)股权再次流拍。  近日,登记在唐山玉龙房地产开发有...
01-22
  2月8日,金融监管总局印发《保险集团集中度风险监管指引》(以下简称《指引》),要求保险集团公司...
02-11
天秤座的男生以他们温和、友善和迷人的个性而闻名。他们通常很受欢迎,因为他们擅长与人...
01-22
在爱情中,我们常常会遇到一些困惑和疑问。特别是当我们对一个人产生了好感,却无法确定对...
01-22
休闲布鞋哪个品牌好?  Converse是世界上最早生产帆布鞋的品牌,也是如今最大最有名的帆布鞋品牌,拥有全明星经典帆布鞋等几大系列众多款式。  主要品牌  Converse(匡威) ...
02-07
圣罗兰流苏链条包流苏掉了怎么办?圣罗兰流苏链条包流苏掉了怎么办?你说的这是圣罗兰的品牌热门款包包吧,流苏能用掉,如果不是什么故意或者小意外人为的,真的怀疑你的包包是否是正...
02-17
2月9日消息,天猫近日发布一则内测文档,宣布“天猫旗舰店会员活动现在可以直投微信私域”,即允许品牌直接将微信私域流量引导至天猫旗舰店,实现会员招募、购买转化及销量回流。目...
02-09
京东官宣入局外卖市场。今日下午,京东宣布京东外卖正式启动“品质堂食餐饮商家”招募。京东表示,2025年5月1日前入驻的商家,全年免佣金。对于已签约商户佣金政策是否调整,接近京...
02-12
2月13日消息,京东养车日前与杭州陆益嘉信息技术有限公司达成战略合作,双方将以独家授权的合作模式,共同推进浙江省五市京东养车连锁加盟门店的拓展。根据合作协议,双方将于三年...
02-14
2月23日消息,在线旅游预订公司Booking公布2024年第四季度和全年业绩。财报显示,2024年第四季度,Booking客房预订夜数增长13%至2.61亿;总预订额同比增长约17%至372亿美元;收入同比...
02-24
【#华油集团与五粮液集团合资公司登记成立# 注册资本3亿】天眼查App显示,近日,华油五粮(北京)供应链管理有限责任公司成立,法定代表人为杨金峰,注册资本3亿人民币,经营范围含供应链...
01-21
据相关媒体发布重磅消息:2025年当地时间1月15日晚,卡塔尔首相兼外交大臣穆罕默德在多哈宣布,以色列与哈马斯达成加沙停火协议,协议第一阶段将于1月19日开始实施。对这一消息,应邀...
01-21
快科技2月1日消息,毫无疑问DeepSeek的出现,让美国科技巨头们感到了恐慌,毕竟低算力需求下也能带来如此强大的AI大模型。 对于一些诋毁DeepSeek的声音,周鸿祎认为,美...
02-02
《巫术:疯狂领主的试验场》击败了《漫威蜘蛛侠2》和《战神5:诸神黄昏》等游戏,荣获今年格莱美最佳电子游戏原声音乐奖。 《巫术:疯狂领主的试验场》是1981年角色扮...
02-05
中国贸促会新闻发言人就美方宣布对中国输美产品加征10%关税发表谈话美国东部时间2月1日,美方以芬太尼等问题为由,对中国输美产品加征10%关税。中国工商界对此深表遗憾、坚决反...
02-02
在上海交通大学闵行校园的西区,旭华路是一条几乎贯穿南北的道路。开学时节,这几乎是全校最热闹的道路之一,沿旭华路一路穿行,会经过学生宿舍、体育场、用餐区、快递区、活动场馆...
02-08
返回

点击右上角微信好友

朋友圈

点击浏览器下方“”分享微信好友Safari浏览器请点击“”按钮

点击右上角QQ

点击浏览器下方“”分享QQ好友Safari浏览器请点击“”按钮