中科院自动化所: 正在打造“紫东太初”2.0全模态大模型|天天新资讯
【环球网科技综合报道】近日,中国科学院自动化研究所“紫东太初”大模型研究中心常务副主任、武汉人工智能
(资料图片仅供参考)
近日,中国科学院自动化研究所“紫东太初”大模型研究中心常务副主任、武汉人工智能研究院院长王金桥研究员介绍,基于华为全栈国产化软硬件平台昇腾AI与开源AI框架昇思MindSpore,中国科学院自动化研究所和武汉人工智能研究院正在联合打造 “紫东太初”2.0全模态大模型,可实现文本、图片、语音、视频、3D点云、传感信号等不同模态的统一表征和学习,助推通用人工智能时代加速到来。
据悉,2019年开始,自动化所在语音、文本、图像等单模态大模型研究和应用基础上,瞄准多模态大模型领域开始联合攻关,并于2021年7月正式发布了全球首个千亿参数多模态大模型“紫东太初”,以多模态技术探索通用人工智能发展道路。
区别于当前以文本为主的大部分语言大模型,“紫东太初”大模型在研发之初即坚持以多模态技术为核心,利用图-音-文等更多类型数据进行跨模态的统一表征和学习,实现了图像、文本、语音三模态数据间的“统一表示”与“相互生成”,使人工智能大模型的理解和生成能力更加接近人类,为贯通多模态人工智能行业应用提供了创新基础,向通用人工智能迈出关键一步。
在“紫东太初”1.0应用推广过程中,除了需要处理海量语音、图像和文本等互联网信息外,更需要处理多种传感器、3D点云及视频等物联网海量数据,才能满足现实生产力的提高。针对数字物联时代的新需求与新趋势,中科院自动化研究所研究探索全模态大模型体系架构和基础算法,持续推动“紫东太初”技术和应用发展。
在文本、图片、音频、视频的基础上,“紫东太初” 2.0可融入3D、视频、传感信号等更多模态数据,并优化语音、视频和文本的融合认知以及常识计算等功能,进一步突破感知、认知和决策的交互屏障,让人工智能从感知世界进化为认知世界。
关键词:
【环球网科技综合报道】近日,中国科学院自动化研究所“紫东太初”大模型研究中心常务副主任、武汉人工智能
智能手机可以通过升级更新系统来获得新功能新体验,大家会在智能手机操作系统新版本推送之后第一时间升级更
1、买增值税税控系统专用设备及支付技术维护费:借:应交税费-抵减增值税额贷:银行存款转出未交增值税:
据《每日体育报》的消息,巴萨足球总监阿莱马尼希望在离职前敲定登贝莱的续约。报道称,巴萨足球总监阿莱马
以下是*ST庞大在北京时间5月8日14:01分盘口异动快照:5月8日14点1分,*ST庞大盘中打开涨停,现报0 78元,成
<p> 来自苏州轨道集团的消息,11号线列车在线下试跑时,速度达100公里 小时,刷新了苏州地铁列车运行速
1、多瑙河是欧洲第二长河,在欧洲河流中长度仅次于伏尔加河。2、它发源于德国西南部,自西向东流,流经奥地
近期,南方某中型公募基金公司旗下两名绩优基金经理接连离职,在公募行业快速发展的背景下,中小家基金公司
环比上升0 66%截至4月末我国外汇储备规模为32048亿美元---人民网北京5月8日电(记者杜燕飞)国家外汇管理局
难民儿童被美政府加快托管后,约2 3最终成为全职童工。(资料图)海外网5月8日电据《纽约时报》7日报道,移
塔克:有无侵略性是我们最大的不同季后赛时若不够强硬就赢不了,塔克,pj,76人队,关键时刻,波士顿凯尔特人
1、黑龙公主奥妮克希亚尘泥沼泽得FB现在3-5个人也就够勒切掉他会掉个头上交给暴风门口得
4月末中国外储重上3 2万亿美元黄金储备“六连增”
信用卡延期还款影响信用不?信用卡延期还款会对个人信用造成一定的影响。因为信用卡公司会将您的还款信息
一、英超曼联0-1西汉姆联遭遇两连败北京时间5月8日凌晨2点,2022-23赛季英超联赛第35轮,曼联来到伦敦碗球场挑战
月球上也有玻璃!5月7日,记者从中国科学院物理研究所获悉,通过对嫦娥五号月壤样品开展系统的物质科学研究
冬哥是电视剧《开封府》中的人物。两大权臣时代结束了,王延龄把权力还给皇帝,自己告老还乡,在垂钓中回忆
怡俊集团控股(02442)公布,最终发售价厘定为每股发售股份1 28港元,公司将收
NBA季后赛次轮G3,湖人127-97大胜勇士,系列赛总比分2-1领先。今天,湖人球员拉塞尔接受了TA记者SamAmick的
5月5日,嘉实基金、博时基金、南方基金相继申报投资海外半导体市场的QDII基金,分别为嘉实标普半导体精选行