“古籍版ChatGPT”——荀子古籍大语言模型面世

1年前 来源:中国科技网 观看:222

“秦淮佳丽地,城阙望中迷。柳暗青丝发,花香碧玉衣。歌楼留夜色,画阁敛春晖。细雨轻舟去,双鱼梦泽飞。”这是近日刚刚上线的“荀子”古籍大语言模型以“金陵”为题,生成的一首古诗。03Y即热新闻——关注每天科技社会生活新变化gihot.com

12月11日,南京农业大学发布该校王东波教授研究团队联合古联(北京)数字传媒科技有限公司,开发出国内首个专门应用于古籍处理与研究的开源智能工具——“荀子”古籍大语言模型(以下简称“荀子”)。“荀子”依托国家社科基金重大项目“中国古代典籍跨语言知识库构建及应用研究”,在灌注了40亿字的古代汉语、现代汉语的大型混合语料数据的基础上生成。03Y即热新闻——关注每天科技社会生活新变化gihot.com

“数据是大模型生成的基础。”王东波介绍,在“荀子”的研发过程中,研究团队在人工智能通用模型的基础上,灌注了繁简体《四库全书》等20亿字的古代汉语语料和文化领域的20亿字的现代汉语语料,实现古籍智能标引、古籍信息抽取、诗歌生成、古籍高质量翻译、阅读理解等功能。03Y即热新闻——关注每天科技社会生活新变化gihot.com

“对于汉语言研究者来说,他们还可以利用‘荀子’完成古籍词法分析、实体识别、关系抽取、文本分类与匹配、文本摘要等工作。”王东波举例,如果要研究《史记·陈涉世家》的人物关系,就可以用大模型识别这篇文章中的人物名称和关系名词,再用知识图谱的方式呈现人物关系图谱,从而提高检索、查询、研究的效率。03Y即热新闻——关注每天科技社会生活新变化gihot.com

王东波介绍,此次发布的基座模型,还可以让用户根据自己的需求,使用本地的训练语料微调“荀子”基座模型,开展有针对性的研究。03Y即热新闻——关注每天科技社会生活新变化gihot.com

尽管目前已经有200多个通用模型在各领域得到应用,但此前古籍领域仍缺乏专业的大语言模型。03Y即热新闻——关注每天科技社会生活新变化gihot.com

“荀子”是怎么做到化繁为简、通读古今的?“核心是‘算力充足’并且‘饱读诗书’!”王东波介绍,“荀子”的顺利问世离不开南京农业大学提供的高性能算力基础设施支持,以及研究团队长期积累的精加工语料库。03Y即热新闻——关注每天科技社会生活新变化gihot.com

“模型的构建受算力、场景应用等多方影响,但精准度较高的优质数据,是最为关键的。”王东波表示,研究团队自2013年起,一直专注于人工精标注数据的工作。03Y即热新闻——关注每天科技社会生活新变化gihot.com

“比如要训练大模型自动标注《岳阳楼记》中的形容词,就首先需要人工标注形容词,在积累了大量的人工标注后,再让机器学习。”王东波说,这项“坐冷板凳”的基础标注工作,他们一做就是10年。03Y即热新闻——关注每天科技社会生活新变化gihot.com

“我们期待能将古籍的智能化研究与跨学科的人才培养相结合,让学生既有前瞻的科研视野,又能积累较为深厚的人文底蕴。”王东波表示,研究团队希望能让更多受众接触古籍、品读古籍、传播古籍,真正地唤活“故纸堆”,共同推动中华优秀传统文化创造性转化和创新性发展,赓续传承中华文脉。03Y即热新闻——关注每天科技社会生活新变化gihot.com

王东波介绍,联合研发“荀子”的古联(北京)数字传媒科技有限公司,将主要致力于未来的场景应用和推广,“荀子”除了能让大众更顺畅地阅读古籍内容,推动古籍整理、古籍数字化、古籍活化利用与传播之外,未来或可应用于AI写作、AI教学、数字文娱等领域。03Y即热新闻——关注每天科技社会生活新变化gihot.com

“秦淮佳丽地,城阙望中迷。柳暗青丝发,花香碧玉衣。歌楼留夜色,画阁敛春晖。细雨轻舟去,双鱼梦泽飞。”这是近日刚刚上线的“荀子”古籍大语言模型以“金陵”为题,生成的一首古诗。03Y即热新闻——关注每天科技社会生活新变化gihot.com

12月11日,南京农业大学发布该校王东波教授研究团队联合古联(北京)数字传媒科技有限公司,开发出国内首个专门应用于古籍处理与研究的开源智能工具——“荀子”古籍大语言模型(以下简称“荀子”)。“荀子”依托国家社科基金重大项目“中国古代典籍跨语言知识库构建及应用研究”,在灌注了40亿字的古代汉语、现代汉语的大型混合语料数据的基础上生成。03Y即热新闻——关注每天科技社会生活新变化gihot.com

“数据是大模型生成的基础。”王东波介绍,在“荀子”的研发过程中,研究团队在人工智能通用模型的基础上,灌注了繁简体《四库全书》等20亿字的古代汉语语料和文化领域的20亿字的现代汉语语料,实现古籍智能标引、古籍信息抽取、诗歌生成、古籍高质量翻译、阅读理解等功能。03Y即热新闻——关注每天科技社会生活新变化gihot.com

“对于汉语言研究者来说,他们还可以利用‘荀子’完成古籍词法分析、实体识别、关系抽取、文本分类与匹配、文本摘要等工作。”王东波举例,如果要研究《史记·陈涉世家》的人物关系,就可以用大模型识别这篇文章中的人物名称和关系名词,再用知识图谱的方式呈现人物关系图谱,从而提高检索、查询、研究的效率。03Y即热新闻——关注每天科技社会生活新变化gihot.com

王东波介绍,此次发布的基座模型,还可以让用户根据自己的需求,使用本地的训练语料微调“荀子”基座模型,开展有针对性的研究。03Y即热新闻——关注每天科技社会生活新变化gihot.com

尽管目前已经有200多个通用模型在各领域得到应用,但此前古籍领域仍缺乏专业的大语言模型。03Y即热新闻——关注每天科技社会生活新变化gihot.com

“荀子”是怎么做到化繁为简、通读古今的?“核心是‘算力充足’并且‘饱读诗书’!”王东波介绍,“荀子”的顺利问世离不开南京农业大学提供的高性能算力基础设施支持,以及研究团队长期积累的精加工语料库。03Y即热新闻——关注每天科技社会生活新变化gihot.com

“模型的构建受算力、场景应用等多方影响,但精准度较高的优质数据,是最为关键的。”王东波表示,研究团队自2013年起,一直专注于人工精标注数据的工作。03Y即热新闻——关注每天科技社会生活新变化gihot.com

“比如要训练大模型自动标注《岳阳楼记》中的形容词,就首先需要人工标注形容词,在积累了大量的人工标注后,再让机器学习。”王东波说,这项“坐冷板凳”的基础标注工作,他们一做就是10年。03Y即热新闻——关注每天科技社会生活新变化gihot.com

“我们期待能将古籍的智能化研究与跨学科的人才培养相结合,让学生既有前瞻的科研视野,又能积累较为深厚的人文底蕴。”王东波表示,研究团队希望能让更多受众接触古籍、品读古籍、传播古籍,真正地唤活“故纸堆”,共同推动中华优秀传统文化创造性转化和创新性发展,赓续传承中华文脉。03Y即热新闻——关注每天科技社会生活新变化gihot.com

王东波介绍,联合研发“荀子”的古联(北京)数字传媒科技有限公司,将主要致力于未来的场景应用和推广,“荀子”除了能让大众更顺畅地阅读古籍内容,推动古籍整理、古籍数字化、古籍活化利用与传播之外,未来或可应用于AI写作、AI教学、数字文娱等领域。03Y即热新闻——关注每天科技社会生活新变化gihot.com

本文链接:http://www.gihot.com/news-2-246-0.html“古籍版ChatGPT”——荀子古籍大语言模型面世

声明:本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇:导弹、航天、航天员…这些词都由他开创!

下一篇:2023年京津冀公民科学素质大赛天津赛区决赛落幕

为你推荐
没有商家码怎么套分付,商家秒回的方法你知道几个微信近期推出的微信分付,在市场竞争中与花呗这位老牌巨头相比,显得尤为审慎和严谨。其开通条件并非对所有人开放,而是精挑细选,...
08-06
宁波慈溪市当面套VISA境外卡花呗白条分付【微电:138 1874 5895】全天在线欢迎打电话,当面办理安全靠谱!套京东白条取现?有这么一个商家你不知道你就吃大亏!最近很多兄弟们给我留...
08-05
南京风控花呗白条套取秒到账:【181 181 43671微信同号】微信分付、抖音月付、支付宝信用购取消实体商家当面刷,本地一手超低费用没有中间商赚差价,所有信息已实名安全的很。十...
08-06
关注行业动态和趋势。随着行业的不断发展和变化,新兴的商家可能会成为合作的良好对象。因此,要时刻关注行业的动态和趋势,及时发现潜在的商机,并主动与其取得联系,开展合作,京东...
08-06
现在网络鱼龙混杂,请认准靠谱八年商家,金牌小帮手——小创(137-1300-6106可v可来电)(全年365天不掉线) 【得物佳物分期购可以提现吗】【得物的分期购额度怎么套出来...
08-27
现在网络鱼龙混杂,请认准靠谱八年商家,金牌小帮手——易付( aux678678 可v可来电)(全年365天不掉线) 双兔傍地走,安能辨我是雄雌?  译:雄雌两兔一起并排着跑...
08-24
8 月 29 日消息,全新岚图梦想家 MPV 于昨日开启预售,该车是全球首款搭载华为乾崑智驾、鸿蒙座舱 MPV,该车上市 3 小时后订单突破 10000 辆。▲图源岚图汽车官网:全新岚...
08-30
  环球音乐将全球独家发行《新说唱2024》签约选手的未来作品,  并邀请前三强选手前往海外走访环球音乐的传奇厂牌  北京,2024年10月18日――作为全球音乐娱乐领域领...
10-28
横评:分付额度怎么才能把钱套出来,实用教程与心得分享使用分付消费二维码可以快速、便捷地完成支付。根据您是作为商家还是个人进行支付,您可以使用商家收款码或个人付款码。...
09-11
印度吉非替尼哪里买购买渠道公开!1.实体药店:您可以亲自前往印度的连锁或个体药店购买吉非替尼片。这可能需要您具备一定的英语沟通能力,以便与药店工作人员交流。2.医院和诊所...
07-28
冬季非常的寒冷,给我们的生活和身体的健康带来了许多的不便,尤其是经常会刮风下雪,更是加剧了寒冷的程度了,所以我们一定要做好防寒与保暖的措施了哦,尤其是我们女性朋友在冬季非...
04-02
  学用“千万工程”,礼赞丰收中国,第七个“中国农民丰收节”如期而至。  河南兰考县,沃野千里吨粮田,五...
10-16
  近年来  儿童智能手表深受家长和孩子的喜爱  但由于儿童用户的特殊性  其背后的隐忧也广受关...
04-07
  原标题:华安保险管理层大挪移:区域总李云焕转正总经理,仍需面对盈利、合规挑战  蓝鲸新闻9月...
09-25
大连风控花呗白条套取秒到账:【181 181 43671微信同号】万事达 、境外卡、微信分付、抖音月付、支付宝信用购取消实体商家当面刷,本地一手超低费用没有中间商赚差价,所有信息已...
08-14
合肥风控花呗白条套取秒到账:【181 181 43671微信同号】微信分付、抖音月付、支付宝信用购取消实体商家当面刷,本地一手超低费用没有中间商赚差价,所有信息已实名安全的很。十...
08-26
常州风控花呗白条套取秒到账:【181 181 43671微信同号】万事达 、境外卡、微信分付、抖音月付、支付宝信用购取消实体商家当面刷,本地一手超低费用没有中间商赚差价,所有信息已...
08-09
21世纪经济报道记者 李金萍 深圳报道张江之于上海,中关村之于北京,由高科技企业聚集而形成的科创资源区,因其带动城市的产业与创新高效融合发...
03-16
  2月27日,由哈尔滨工业大学和中国航天科技集团联合建造的“空间环境地面模拟装置”国家重大科技基础设施项目正式通过国家验收...
02-28
返回

点击右上角微信好友

朋友圈

点击浏览器下方“”分享微信好友Safari浏览器请点击“”按钮

点击右上角QQ

点击浏览器下方“”分享QQ好友Safari浏览器请点击“”按钮