小红书开源首款多模态大模型

2个月前 来源: 观看:44

8月7日消息,小红书hi lab(人文智能实验室)开源了其首款多模态大模型dots.vlm1,这一模型基于DeepSeek V3打造,并配备了由小红书自研的12亿参数视觉编码器NaViT,具备多模态理解与推理能力。这一模型可以看懂复杂的图文图表,理解表情包背后的含义,分析两款产品的配料表差异,还能判断博物馆中文物、画作的名称和背景信息。tfC即热新闻——关注每天科技社会生活新变化gihot.com

watermark,image_d2F0ZXJtYXJrLnBuZz94LW9zcy1wcm9jZXNzPWltYWdlL3Jlc2l6ZSxQXzEy,g_south,t_55,x_1,y_20

图源:Hugging FacetfC即热新闻——关注每天科技社会生活新变化gihot.com

hi lab称,在主要的视觉评测集上,dots.vlm1的整体表现已接近当前领先模型,如Gemini 2.5 Pro与Seed-VL1.5 thinking,尤其在MMMU、MathVision、OCR Reasoning等多个基准测试中显示出较强的图文理解与推理能力。在典型的文本推理任务(如AIME、GPQA、LiveCodeBench)上,dots.vlm1的表现大致相当于DeepSeek-R1-0528,在数学和代码能力上已具备一定的通用性,但在GPQA等更多样的推理任务上仍存在差距。tfC即热新闻——关注每天科技社会生活新变化gihot.com

总体来看,dots.vlm1在视觉多模态能力方面已接近SOTA(最佳性能)水平,在文本推理方面达到了主流模型的性能。但hi lab也强调,dots.vlm1在部分细分任务上仍与最优结果存在一定距离,需要在架构设计与训练数据上进一步优化。目前,dots.vlm1已上传至开源托管平台Hugging Face,用户还可以在Hugging Face上的体验链接中免费使用这一模型。tfC即热新闻——关注每天科技社会生活新变化gihot.com

今年6月6日,小红书开源了其首款大语言模型,并在之后开源了用于OCR的专用模型,以及视觉、奖励模型等前沿方向的研究成果。tfC即热新闻——关注每天科技社会生活新变化gihot.com

本文链接:http://www.gihot.com/news-12-34789-0.html小红书开源首款多模态大模型

声明:本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇:阿里、京东、美团在线下开火,彻底杀疯了

下一篇:淘宝重大升级,阿里巴巴要夺回失去的一切

为你推荐
1月24日消息,国联股份冷链多多数字云仓(寮步仓)开仓仪式近日在东莞市寮步镇举办,标志着冷链多多禽蛋产业链仓网布局在华南地区再落一子。涂多多高级副总裁、物流部总监安珅,冷链...
02-07
2月10日消息,据京东七鲜发布的数据显示,今年春节期间,京东七鲜在春节期间的订单量同比上涨接近100%。即时零售平台在春节期间成为众多消费者的热门选择,极大地促进了年货市场的...
02-11
2月5日消息,8天假期叠加“请2休11”的拼假策略,带来了春节假期更多元的出游模式。途牛《2025春节出游消费盘点》(以下简称“报告”)数据显示,更多途牛用户选择了5至6天或3至4天的...
02-07
3月2日消息,银联-Visa“北京中轴线无障碍支付服务旅游示范区”启动仪式日前在北京坊举行。北京市文化和旅游局将携手中国银联与Visa,合作共建银联-Visa“北京中轴线无障碍支付...
03-03
【#荣耀申请注册无极引擎商标#】天眼查知识产权信息显示,近日,荣耀终端股份有限公司申请注册一枚“无极引擎”商标,国际分类为科学仪器,当前商标状态为等待实质审查。荣耀终端股...
01-21
近日,柔性钙钛矿电池研发制造企业湖南炎和科技有限责任公司(简称“炎和科技”)完成千万级天使+轮融资,由朝希资本独家投资。炎和科技是一家专注于钙钛...
02-07
《流放之路》开发商GGG向初代游戏的粉丝道歉,原因是初代游戏的更新被推迟,需要等《流放之路2》的关键更新上线才能推出。 GGG曾向粉丝承诺,他们将继续更新已运营...
02-01
近日,国产独立黑暗武侠动作游戏游戏《乂闻录:轮回》(《义闻录:轮回》)官宣了发售日期,该作将于4月18日发售,登陆Steam,售价78元,首周折扣价66元,首个版本将提供20+小时的...
02-10
总台记者当地时间2月5日获悉,当天,日本埼玉县八潮市道路塌陷事故现场,救援人员使用水下无人机在下水管道内进行调查时,在塌陷现场下游100米至200米左右的下水管道中,发现了疑似货...
02-06
2025年综合运输春运工作专班数据显示,预计2025年2月9日(春运第27日,农历正月十二),全社会跨区域人员流动量20629万人次,其中,铁路客运量1330万人次,公路人员流动量18983万人次(高速公...
02-09
  1月7日,国家区块链技术创新中心介绍,长安链支撑自然资源部逐步形成覆盖全国、跨层级、跨系统...
01-21
  2月6日,记者从2025年全省残联工作会议上获悉,今年,全省残联系统将更好履行“代表、服务、管理”职责,促...
02-08
    游客在崂山巨峰观雾凇行走的荷尔摄  本报记者肖相波  近期,青岛崂山巨峰的雾凇景观...
02-11
泰国旅游安全信心下降之际,从旅游业内到社媒大众都在推测:三亚旅游将迎“泼天富贵”。 喧嚣背后,近期三亚旅游热度究竟如何?时代周报...
01-21
  中新经纬1月19日电 据中央纪委国家监委驻中国工商银行纪检监察组、青海省纪委监委消息:日前,中央纪委国家监委驻中国工商银行纪检监察组、西宁市监委对中国工商银行上海市...
01-21
1 月 26 日消息,据韩联社报道,比亚迪韩国公司 24 日透露,截至 23 日,旗下纯电 SUV 车型“ATTO 3”(元 PLUS)在韩预售量突破 1000 辆关口。这距离比亚迪本月 16 日在韩国市...
01-27
2 月 5 日消息,丰田汽车公司(以下简称“丰田”)与上海市政府今日就共同助力中国社会绿色低碳发展相关举措达成合作意向。丰田决定在上海市金山区成立 LEXUS 雷克萨斯纯...
02-05
  光明日报北京1月19日电(记者牛梦笛、张进进)中央广播电视总台《2025年春节联欢晚会》19日举行...
01-22
随着电视剧的热播,“夜魔侠重生上映时间是什么时候”这一话题逐渐吸引了众多粉丝的目光。该剧播出后,凭借其精彩的剧情、精良的制作和演员们的精湛表演,赢得了...
02-21
21世纪经济报道记者季媛媛 上海报道 继2023年出现上市以来首次亏损,科创板首家CRO(医药合同研发服务)企业美迪西(688202.SH)2024年的业绩继续...
01-22
21世纪经济报道记者 唐唯珂 广州报道Deepseek持续搅动全球AI格局重塑之下,应用产业端连锁反应也在深入。在医疗端应用展开的讨论同样热闹。...
02-08
1月12至14日,清华大学国家卓越工程师学院12名硕博士研究生来到沈阳开展研学实践活动。团沈阳市委有关负...
01-21
上海市科学学研究所研究员李辉为华东师范大学应用伦理专业研究生授课。受访者供图“只有完善多学科协同...
01-22
  原标题:又见共管保险箱被撬!浙金信托一产品爆雷后被监管认定存在四大问题  来源:界面新闻 ...
01-28
  摘要  【碳酸锂价格节后维持“震荡”业内人士:今年一季度或上演“躁动”行情】对于锂行业...
02-06
天蝎座的男生通常都有着神秘而深沉的个性,他们对于感情非常认真,但也很容易受到伤害。如...
01-22
水瓶座的男生一向以聪明、独立和理性著称。他们喜欢自由自在地生活,追求个人空间和独特...
01-22
莆田华昌珠宝的上班时间及工作氛围探秘在莆田,华昌珠宝因其精美的珠宝产品和优质的服务而备受青睐。如果你正在考虑加入这家珠宝公司,了解它的上班时间以及工作环境将对你做出...
02-07
选对尺码,让你的香奈儿鞋子更加完美对于许多香奈儿的爱好者来说,选购鞋子不仅仅是挑选一款时尚的鞋款,尺码的选择同样至关重要。无论是经典的香奈儿平底鞋、优雅的高跟鞋还是休...
02-12
返回

点击右上角微信好友

朋友圈

点击浏览器下方“”分享微信好友Safari浏览器请点击“”按钮

点击右上角QQ

点击浏览器下方“”分享QQ好友Safari浏览器请点击“”按钮