小红书开源首款多模态大模型

3周前 来源: 观看:30

8月7日消息,小红书hi lab(人文智能实验室)开源了其首款多模态大模型dots.vlm1,这一模型基于DeepSeek V3打造,并配备了由小红书自研的12亿参数视觉编码器NaViT,具备多模态理解与推理能力。这一模型可以看懂复杂的图文图表,理解表情包背后的含义,分析两款产品的配料表差异,还能判断博物馆中文物、画作的名称和背景信息。vPS即热新闻——关注每天科技社会生活新变化gihot.com

watermark,image_d2F0ZXJtYXJrLnBuZz94LW9zcy1wcm9jZXNzPWltYWdlL3Jlc2l6ZSxQXzEy,g_south,t_55,x_1,y_20

图源:Hugging FacevPS即热新闻——关注每天科技社会生活新变化gihot.com

hi lab称,在主要的视觉评测集上,dots.vlm1的整体表现已接近当前领先模型,如Gemini 2.5 Pro与Seed-VL1.5 thinking,尤其在MMMU、MathVision、OCR Reasoning等多个基准测试中显示出较强的图文理解与推理能力。在典型的文本推理任务(如AIME、GPQA、LiveCodeBench)上,dots.vlm1的表现大致相当于DeepSeek-R1-0528,在数学和代码能力上已具备一定的通用性,但在GPQA等更多样的推理任务上仍存在差距。vPS即热新闻——关注每天科技社会生活新变化gihot.com

总体来看,dots.vlm1在视觉多模态能力方面已接近SOTA(最佳性能)水平,在文本推理方面达到了主流模型的性能。但hi lab也强调,dots.vlm1在部分细分任务上仍与最优结果存在一定距离,需要在架构设计与训练数据上进一步优化。目前,dots.vlm1已上传至开源托管平台Hugging Face,用户还可以在Hugging Face上的体验链接中免费使用这一模型。vPS即热新闻——关注每天科技社会生活新变化gihot.com

今年6月6日,小红书开源了其首款大语言模型,并在之后开源了用于OCR的专用模型,以及视觉、奖励模型等前沿方向的研究成果。vPS即热新闻——关注每天科技社会生活新变化gihot.com

本文链接:http://www.gihot.com/news-12-34789-0.html小红书开源首款多模态大模型

声明:本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇:阿里、京东、美团在线下开火,彻底杀疯了

下一篇:淘宝重大升级,阿里巴巴要夺回失去的一切

为你推荐
2月11日消息,中国B2B外贸金融平台XTransfer近日与非洲最大的跨国银行之一Ecobank签署合作谅解备忘录 ,双方将携手为非洲中小微贸易企业提供优质的跨境金融及风控服务,进一步促...
02-11
2月14日消息,有网友近日发帖称,在长沙盒马门店偶遇阿里巴巴集团创始人马云。据网友表示,马云此次到访的是盒马长沙星沙万象汇店,不少网友在社交媒体上晒出了马云在门店考察的图...
02-14
来源:图虫 3月3日,《长安的荔枝》发布首支预告及海报,并官宣...
03-04
3月3日消息,京东互联网医院皮肤医院近日上线罕见病专区,包括用药绿色通道、疾病知识科普等服务。京东互联网医院皮肤医院利用AI技术实现精准分诊,用户在京东APP搜索“皮肤医院...
03-04
2024年国网全年电网投资首超6000亿元,预计达到6092亿元,相比2023年新增711亿元,13.2%的同比增速也为近年最高值。据国网1月15日发布的信息显示,2025年国网将进一步加大投资力度,...
01-22
近日,苏州博萃循环科技有限公司完成近亿元人民币的B轮融资领投方交割。本轮融资由恩泽基金领投。「博萃循环」致力于电池关键材料循环利用的全套解...
02-07
来自深度求索的国产AI大模型DeepSeek最近在全球走红,与此同时,各种DeepSeek“培训课程”、“赚钱课程”开始涌现。难道学习人工智能一定要付费吗,学会DeepSeek真...
02-10
Too Kyo Games工作室宣布,旗下新游《百日战纪-最终防卫学园-》PC体验版将于2月19日登场,存档可继承到正式版,Switch版的试玩稍后发布,敬请期待。 《百日战纪-最终...
02-13
极目新闻记者 潘锡珩4日,极目新闻记者从武汉地铁了解到,为保障铁路夜间到达乘客出行需求,今日(2月4日),武汉轨道交通2号线汉口火车站往佛祖岭方向末班车延时至24:00,4号线武汉火车站...
02-04
极目新闻评论员 文清蔓“三亚发布”消息,2月4日,海南省委常委、三亚市委书记王祺扬,海南省副省长谢京,三亚市委副书记、市长陈希以“四不两直”方式调研春节期间三亚西岛海洋文...
02-05
新华社合肥1月20日电(记者徐海涛、陈诺)“998、999、1000……”大屏幕上的数字最终定格在1066,原本安静的控制大厅一片欢呼。1月20日,我国...
01-21
随着人类探索太空的脚步迈得越来越大,在月球上,甚至在火星上驻留并建设基地成为可能。想在月球上居住和旅行,水、氧气等生存资源和交通工具就不可或缺...
01-21
  【带你一起看大展】  光明日报记者周洪双李晓东  随着悠扬的里拉琴在四川成都金沙遗址...
01-21
近日我省这些事业单位发布招聘公告一起来看看1中国医科大学及附属医院  招聘岗位:本次公开招聘3个岗位...
02-18
新闻记者 康旭阳实习生 何世银通讯员 沈商轩1月21日,由商务部、中央广播电视总台、湖北省人民政府主办,湖北省商务厅、央视总台湖北总站、湖北省文旅厅、湖北省体育局、武汉市...
01-21
继佛山狮山镇和北滘镇之后,广东第三个千亿镇出现了!1月15日上午,《2025年广东省政府工作报告》出炉,其中提到东莞长安镇迈入了GDP“千...
01-21
在激烈的变革时代,宝马展现了一家优秀企业的“定力”与“韧劲”。2024年,宝马集团再度夺冠中国豪华乘用车市。这一年,宝马坚守“纯粹驾驶乐趣”的品牌承诺,携手经销商伙伴提升运...
01-21
2 月 3 日消息,今年春节假期,七座以下(含七座)小型客车通行收费公路继续执行免收通行费政策,免费通行时段起止时间为1月28日(除夕)00:00至2月4日(正月初七,明天)24:00,共计8天...
02-04
《难哄》电视剧是哪个小说改编的?剧版男主是谁?‌《难哄》电视剧是由竹已的同名小说改编‌‌。电视剧《难哄》的男主角是白敬亭‌‌。这部小说讲述了桑延和温...
02-20
柏林国际电影节闭幕,《植物学家》荣获新生代Kplus单元大奖在万众瞩目的柏林国际电影节上,一部来自中国的电影力作脱颖而出,成为全场焦点。日前,该电影节正式落下帷幕,并揭晓了各...
02-23
21世纪经济报道记者季媛媛 上海报道自1981年首例艾滋病病例报告以来,人类和艾滋病的抗争已持续40余年。时至今日,尚无可以根治艾滋病的药物,...
01-21
这里是《21健讯Daily》,欢迎与21世纪经济报道新健康团队共同关注医药健康行业最新事件!政策动向医保结算提速2月17日,国家医保局官微转载文章...
02-18
  近日,在第三届全球数字贸易博览会上发布了首批全国农村电商“领跑县”典型案例,曹县是山东省唯一上榜者。文化自信是新时代的突出优势,也是新时代文化的鲜明标识。正是...
01-21
为进一步提升班主任管理水平,探索班级管理的新方法,营口市中等专业学校学生科和FF名班主任工作室于2024年...
01-21
  摘要  【开年已跌逾20%!氧化铝供需格局将反转?】2024年,氧化铝期货作为国内大宗商品期货市场...
01-24
  监管部门多次提及的“完善农险经营退出机制”迎来突破性进展。  近日,金融监管总局北京监...
02-08
摩羯座的男生通常给人一种稳重、务实的印象,他们对感情也是非常认真和专注的。如果你想...
01-22
摩羯座是黄道带上的第十个星座,出生于12月22日至1月19日期间。摩羯座的人以稳重、务实...
01-22
儿童口号大全?  1、宝贝向前冲,这里属于你。  2、精彩艺术,尽放未来。  3、宝贝可爱,我们相伴。  4、来鹿优优,做全能宝宝。  5、希望,由此开始;未来,由此腾飞。  6、关...
02-12
秋季时尚新宠:香奈儿双色鞋的魅力与搭配秘籍在这个秋天,香奈儿再次给我们带来了惊喜。双色鞋的设计不仅让人眼前一亮,更是成为了时尚界的一种潮流趋势。作为一名爱好时尚的编辑...
02-12
返回

点击右上角微信好友

朋友圈

点击浏览器下方“”分享微信好友Safari浏览器请点击“”按钮

点击右上角QQ

点击浏览器下方“”分享QQ好友Safari浏览器请点击“”按钮