AI得了“骗人病”,能治吗?

1年前 来源:北京日报 观看:100

别被你的AI忽悠了fov即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!fov即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……fov即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。fov即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?fov即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。fov即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。fov即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。fov即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。fov即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。fov即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。fov即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。fov即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。fov即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。fov即热新闻——关注每天科技社会生活新变化gihot.com

别被你的AI忽悠了fov即热新闻——关注每天科技社会生活新变化gihot.com

当前,我国AI大模型的应用呈现迅猛增长态势。QuestMobile发布的最新数据显示,DeepSeek上线次月(2025年2月),活跃用户规模就突破了1.8亿。但在AI应用大众化的同时,也有不少网友惊呼:与AI的蜜月期还没有结束,就发现它在骗我!fov即热新闻——关注每天科技社会生活新变化gihot.com

有人用AI查资料,发现AI会编造假论文,期刊名称、论文标题、作者、网址等信息一应俱全,可全是编的;曾有一条“80后死亡率突破5.2%”的假新闻广为流传,据辟谣者分析,最初的信源可能来自AI对话……fov即热新闻——关注每天科技社会生活新变化gihot.com

这其实不是新问题,而是在大模型诞生之初就存在的老毛病——AI幻觉。甚至有专家认为,AI幻觉是大模型的“基因病”。因为AI大模型训练依赖海量数据,但数据的真实性却无人担保。AI大模型训练过程中,是将海量数据高度压缩抽象,输入的是内容之间关系的数学表征,而不是内容本身。AI与人类对话时,模型基于统计概率生成文本,追求流畅性而非真实性,很容易编出看似流畅但完全不符合事实的内容。fov即热新闻——关注每天科技社会生活新变化gihot.com

既然AI幻觉是“基因病”,那这病能治吗?要怎么治?fov即热新闻——关注每天科技社会生活新变化gihot.com

首先,AI幻觉也带来了AI的“超能力”,没必要根除。fov即热新闻——关注每天科技社会生活新变化gihot.com

AI幻觉也有好的一面。AI自主生成内容是大语言模型的突出特点,是最具想象力的技术突破。作为大模型与生俱来的特点,AI幻觉决定了大模型的创造力,对实现通用人工智能(AGI)非常重要,并可在科研、文艺等领域发挥作用。fov即热新闻——关注每天科技社会生活新变化gihot.com

比如,游戏开发、动漫设计、小说创作等领域欢迎奇思妙想,AI幻觉可以突破思维定式,为创作提供灵感。再如,科学研究中往往也需要非常规思路来破局闯关,AI不走寻常路的创造力,可以推动科研工作出现“AI幻觉—实验验证—理论重构”的新范式。fov即热新闻——关注每天科技社会生活新变化gihot.com

其次,AI幻觉虽不可根除,但可以控制。fov即热新闻——关注每天科技社会生活新变化gihot.com

对于AI幻觉,我们不能放任自流。一方面,AI幻觉产生大量虚假信息,这些虚假信息被新一代AI系统学习,就会形成“数据污染—算法吸收—再污染”的恶性循环。另一方面,在企业生产、医疗、法律等容错率很低的领域,AI幻觉可是“要命”的大毛病。因此,我们要从技术研发和管理机制上双管齐下,防范AI幻觉信息的泛滥。fov即热新闻——关注每天科技社会生活新变化gihot.com

技术层面,检索增强生成(RAG)技术、多模型交叉验证、动态知识更新机制等,都已被证明是减少AI幻觉的有效手段。未来,还需要继续提升训练数据质量与清洗标准,严格检测数据的来源和真实性,减少噪声干扰;引入强化学习与人类反馈机制,提升AI逻辑推理能力;增强AI大模型检测能力,用AI监管AI。fov即热新闻——关注每天科技社会生活新变化gihot.com

用户层面,对AI输出的答案不要直接采信,可以用多个AI模型分别生成答案再交叉验证、对照取优,对关键任务输出更有必要采取人工交叉验证,结合文献数据库、行业知识图谱等专业工具作出判断。fov即热新闻——关注每天科技社会生活新变化gihot.com

监管层面,“标注AI生成内容”已成为我国监管部门推动的方向,这体现了对生成式人工智能的透明度要求,将提高AI生成内容的可追溯性和可解释性。未来,我们还应加快人工智能法立法进程,建立全周期全链条监管体系。fov即热新闻——关注每天科技社会生活新变化gihot.com

实现“不被AI忽悠”目标,既需要算法工程师构建底层安全防线,也需要全社会共同建设可信AI生态。期待中国AI产业解决好这道AI幻觉控制难题,在创造力与真实性之间取得平衡。fov即热新闻——关注每天科技社会生活新变化gihot.com

本文链接:http://www.gihot.com/news-2-1790-0.htmlAI得了“骗人病”,能治吗?

声明:本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇:两个AI,说着说着就“加密”了......

下一篇:第二届中国人形机器人与具身智能产业大会在京举办

为你推荐
  1月16日上午,上海市政协十四届三次会议举行“扩内需、稳外需,推动新旧动能平稳转换,促进经济高...
01-21
  2月11日,国家统计局辽宁调查总队发布2025年1月份辽宁居民消费价格变化情况(CPI)。调查数据显示,今年1月...
02-12
  受益于亚冬会带来的冰雪经济新热度,滑雪服、羽绒服、滑雪手套等装备的销量在这个冬天迎来了一波新增...
02-15
  近日,#这届年轻人开始整顿年味了#话题冲上微博热搜。在大家的印象里,年味似乎总是带着老一辈传承下来的固定模式:忙忙碌碌准备年夜饭,规规矩矩拜年走亲戚,热热闹闹看春晚...
01-21
  春运第5日铁路客流开始呈现大幅上升趋势  中新网广州1月18日电(郭军 任永霜 李格格)1月18日,2025年春运进入第五日。据广铁集团数据显示,从当日开始,铁路整体客流开始呈...
01-21
1 月 21 日消息,东风日产今日公布纯电轿车 N7 的全新配色 —— 墨海蓝色。上周,该车已经公布了五种配色,分别为流光银、霜雪白、燕麦米、黑色以及青色,加上此次公布的墨...
01-21
[本站 资讯] 1月10日,我们从比亚迪官方了解到,其针对旗下紧凑型SUV――宋Pro DM-i推出限时优惠活动,仅9.98万元起,以及至高4000元置换补贴、“0首付或0利息或0月供”、原...
01-21
  1、《滤镜》小说原著就叫《滤镜》,这是桐华所著的作品,桐华也是这部剧的总编剧。  2、这是一部充满科幻色彩的现代剧,一共三十集,讲的是由一个神秘的高科技产品“滤镜手...
02-17
  1、《难哄》温以凡和桑延合租,是因为温以凡受不了隔壁男人的骚扰而搬家,桑延正好因为邻居家起火受到了连累,也不得不暂时租房子住。  2、两人就这样意外租到了同一个房...
02-18
  冬天适量食用南瓜,不仅能为身体提供丰富的营养,还能为健康加上一道坚实的屏障,南瓜也越来越成为受到人们喜爱的主食之一。南瓜...
01-21
21世纪经济报道记者 韩利明 上海报道随着四大跨国疫苗企业辉瑞、葛兰素史克(GSK)、默沙东、赛诺菲陆续发布2024年业绩,21世纪经济报道记者依...
02-11
  大众网记者 王一刚 报道  冬日风雅,大雪知寒。一年岁暮风雪始,寒冬用最纯洁的底色酝酿世间最精彩的颂歌。  一、童言话大雪  孩子们对即将到来的“大雪”节气充...
01-21
近期,阜新市第一职专刘艳霞名班主任工作室阶段汇报会在学校一楼礼堂举行。会议由工作室成员冯宇老师主持...
01-21
  1月21日,在岸人民币对美元汇率延续反弹势头,于日间交易时段最高上涨超过500个基点。专家表示,...
01-22
    2024年,工业硅供应持续增长,多晶硅需求疲弱,在高供应、高库存的情况下,工业硅价格承压下跌...
02-11
每个人都有自己心仪的对象,而星座往往成为我们选择伴侣的参考因素之一。在星座中,有一种...
01-22
天蝎座的男生通常以冷静、深沉而闻名。当他们遇到问题或者感到困惑时,他们往往需要一段...
01-22
童装新款上市文案? 夏天新款童装文案?一、童装新款上市文案?1、美丽不打折,春款童装全部上新,时光不老,我们不散,繁华落尽,我们一起享受世间美衣,衣服千千万,唯有新款最好看。2、夏装...
02-07
童装搭配技巧? 童装搭配文案?一、童装搭配技巧?童装怎么样搭配!1,首先是看儿童的肤色选择深浅,2,儿童的胖瘦选择衣服,3,儿童的喜爱选择,4颜色深浅错开搭配,5舒适宽松二、童装搭配文案?1....
02-07
2月7日消息,东方甄选在微博发文称,近日,北京互联网法院就抖音用户崔某网络侵权案作出判决,认定被告发布言论不实,侵害了东方甄选名誉权,要求被告在抖音账号置顶道歉声明,并赔偿东方...
02-08
2月17日消息,猪八戒网旗下江西八戒创新资源近日收到了“高新技术企业”证书纸质件,标志着该公司再次获批高新技术企业。图源:猪八戒网头条公众号江西八戒创新资源是猪八戒网企...
02-18
2月8日消息,据Tech星球消息,美团近期启动个人摄影师招募计划,现阶段招募的是人像摄影师,服务类型包含婚恋类、宴会类和景点跟拍类等,摄影师向平台交付2000元押金后,无需营业执照,即...
02-09
骑手们终于能老有所养,病有所医,伤有所赔。1.京东为外卖骑手缴纳五险一金,美团回应千万骑手翘首以盼的这一天,终于来了。2月19日,京东黑板报官宣,自2025年3月1日起,京东将逐步为京...
02-20
全球性金融券商集团英国EBC Group平台始终致力于以领先生态,与全球交易者共塑交易的未来。 自第一届交易大赛起,为赤忱的热爱和卓越的才华提供舞台,在全球内寻找交易好手以赋能...
01-24
2024年末,一位科技创业者火了。作者 | 王思琪来源 | 投资家(ID:touzijias)2024年末,一位科技创业者火了。2025年初,这位创业者再度爆火。近日,中国科技行业因一位85后年轻人现身《...
01-24
《异界锁链》监督、《尼尔:机械纪元》设计师田浦贵久似乎已经从白金工作室离职。 上个月,玩家们猜测这位核心创作者可能换了工作,因为他从自己的X(原推特)账号信息...
01-27
发行商 Knight Peaks 和开发商 Owlcat Games 宣布,CRPG游戏《开拓者:拥王者》在推出 6 年后,已突破 200 万销量大关。 游戏于去年 9 月正式迎来了 6 周年纪念日,...
01-28
据环球时报援引日本《产经新闻》2日报道,自2024年12月下旬流感病例数创新高后,日本多地药店表示已无用于治疗感冒、发烧等疾病药品的库存。此外,一些过于拥挤的医院也建议患者...
02-04
你的浏览器不支持video标签。极目新闻记者 张屏 视频剪辑 李仪2月5日,10位“楚才”人形机器人在武汉洪山礼堂组团亮相,为湖北省“新春第一会”上演科技序曲。其中,华中科技大学...
02-05
返回

点击右上角微信好友

朋友圈

点击浏览器下方“”分享微信好友Safari浏览器请点击“”按钮

点击右上角QQ

点击浏览器下方“”分享QQ好友Safari浏览器请点击“”按钮