首页 > 行情 >

“紫东太初”全模态大模型持续探索通用人工智能新路径

2023-05-07 17:53:58 科技日报

科技日报记者 陆成宽

5月6日,在华为昇腾AI开发者峰会上,中国科学院自动化研究所“紫东太初”大模型研究中心常务副主任、武汉人工智能研究院院长王金桥研究员介绍,基于华为全栈国产化软硬件平台昇腾AI与开源AI框架昇思MindSpore,中国科学院自动化研究所和武汉人工智能研究院正在联合打造“紫东太初”2.0全模态大模型,可实现文本、图片、语音、视频、3D点云、传感信号等不同模态的统一表征和学习,助推通用人工智能时代加速到来。


(资料图片仅供参考)

自动化所供图

超前布局,坚持以多模态技术探索通用人工智能

从婴幼儿开始,人类的认知学习就是建立在对现实世界图像、声音和文字等多种模态信息基础之上。突破模态限制,实现图、文、音等更多模态的通用大模型是人工智能融入现实世界的必然。

2019年开始,自动化所在语音、文本、图像等单模态大模型研究和应用基础上,瞄准多模态大模型领域开始联合攻关,并于2021年7月正式发布了全球首个千亿参数多模态大模型“紫东太初”,以多模态技术探索通用人工智能发展道路。

区别于当前以文本为主的大部分语言大模型,“紫东太初”大模型在研发之初即坚持以多模态技术为核心,利用图-音-文等更多类型数据进行跨模态的统一表征和学习,实现了图像、文本、语音三模态数据间的“统一表示”与“相互生成”,使人工智能大模型的理解和生成能力更加接近人类,为贯通多模态人工智能行业应用提供了创新基础,向通用人工智能迈出关键一步。

从感知到认知,面向数字物联世界再上新台阶

世界已经进入了数字物联时代。在“紫东太初”1.0应用推广过程中,除了需要处理海量语音、图像和文本等互联网信息外,更需要处理多种传感器、3D点云及视频等物联网海量数据,才能满足现实生产力的提高。针对数字物联时代的新需求与新趋势,中科院自动化研究所研究探索全模态大模型体系架构和基础算法,持续推动“紫东太初”技术和应用发展。

在文本、图片、音频、视频的基础上,“紫东太初”2.0可融入3D、视频、传感信号等更多模态数据,并优化语音、视频和文本的融合认知以及常识计算等功能,进一步突破感知、认知和决策的交互屏障,让人工智能从感知世界进化为认知世界,延伸出更加强大的通用能力。

打造全栈国产化通用人工智能底座

全栈国产化通用人工智能平台的实践对我国实现AI领域科技自立自强、占领科技创新高地具有重要的战略意义。“紫东太初”大模型从立项开始,就以中科院自动化所自研算法为核心,以全栈国产化基础软硬件昇腾AI平台为基础,依托武汉人工智能计算中心算力支持,真正意义上实现了国产人工智能大模型的可控、可信、可用,有力地促进了国产全栈式基础软硬件的发展。

目前,由自动化牵头打造的多模态人工智能产业联合体已陆续吸纳产学研各界近70家成员单位。围绕多模态大模型技术及应用,“紫东太初”大模型已在手语教学、法律咨询、交通出行、广电、医疗机器人、医学影像判读等数十个行业场景领域展现出广阔的落地潜力。在华为昇腾AI开发者峰会上,“紫东太初”大模型开源了基于昇腾与昇思的3.8B图像-文本-语音多模态模型并开放紫东太初大模型服务平台。

从互联网的图音文多模态走向物联网的全模态,以打造国产化通用人工智能底座为目标,自动化所将持续推进“紫东太初”大模型基础理论、关键技术和应用生态的全链条自主创新,着力以自主可控基础软硬件建立开源开放的多模态产业生态,不懈探索通用人工智能创新路径。

x
广告
最近更新

“紫东太初”全模态大模型持续探索通用人工智能新路径

2023-05-07

【环球新视野】假如给我三天光明梗概450字左右_假如给我三天光明梗概

2023-05-07

焦点信息:疯狂坦克手机网游

2023-05-07

男明星拍内裤广告大全 男星在为内裤代言时大鸟处于什么状态

2023-05-07

雷丁汽车申请破产,公司被逼虚报工业产值

2023-05-07

世界热议:湖南:暴雨中 感谢有你

2023-05-07

砂黄红土

2023-05-07

热推荐:现实版保持通话!杭州119接警员用3斤麻辣小龙虾,救回一条年轻生命

2023-05-07

初中作文写作方法与技巧_作文写作方法与技巧 全球速看料

2023-05-07

全球聚焦:专业不对口?想跨行咋找工作?推荐3类不限专业岗位

2023-05-07

应急管理部启动危险化学品重大危险源企业2023年第一次安全专项检查督导

2023-05-07

点亮山里娃的科技梦(科技群英绘·最美科技工作者)

2023-05-07

【攀枝花5月5日山火明火被扑灭】据攀枝花市森林草原防灭火指挥部消息,2023年5月5日18时30分,攀枝花市东区弄弄坪街道高峰社区后山发生一起火情。经多方力量扑救,明火于5月7日4时26分被全部扑灭,全面转入火场清理看守阶段,没有造成人员伤亡和次生灾害。 全球今头条

2023-05-07

世界热讯:或将命名为A7 全新奥迪A6骡车谍照曝光

2023-05-07

巴菲特称美国目前面临的挑战很大_世界快播

2023-05-07

犯险保险诈骗怎么量刑 天天报资讯

2023-05-07

【e汽车】曝员工“被放假”,爱驰汽车真的要倒闭了吗? 环球动态

2023-05-07

今日立夏,建议中老年少吃姜和猪肉,多吃这3样,助你顺利过夏天|环球播资讯

2023-05-07

全球观点:LOL幸运召唤师2021年12月网址在哪里(12月幸运召唤师地址入口2021)

2023-05-07

每日热点:那个和你聊天的对话机器人获得了“吴文俊奖”

2023-05-06

价格战“熄火”的4月:新势力回暖,传统车企高端品牌集体大涨

2023-05-06

压舱石前面用什么词_压舱石的寓意

2023-05-06

每日播报!左股骨颈骨折是什么

2023-05-06

人间好时节丨立夏:夏木阴阴正可人 全球快消息

2023-05-06

聚光科技获86家机构调研:聚致、聚拓去年年底和今年年初的时候产品已经开始上市了,已经开始实现收入(附调研问答)

2023-05-06

天天观速讯丨美国股市上涨,截至收盘道琼斯工业平均指数上涨1.65%

2023-05-06

天天快报!安阳内黄:科技小院助农服务有力度 群众增收有保障

2023-05-06

宣城广德:“便民”小菜园为乡村提“颜”增“质”

2023-05-06

世界热议:游客用激光笔照大熊猫“白天”,北京动物园回应:已反馈给相关部门处理,目前还不知道是谁做的

2023-05-06

动态:全国主要公路气象预报(5月5日20时至6日20时)

2023-05-06

“华龙一号”全球首堆示范工程通过竣工验收-播报

2023-05-06

有组织抹黑警方取证行动 保安局斥漠视法律 环球观天下

2023-05-06

太古地产2023年一季度香港整体办公楼租用率达94%

2023-05-06

焦点播报:坂井泉水演唱会1996完整版_坂井泉水演唱会

2023-05-06

全球微资讯!沈阳龙生墓园电话_沈阳龙生墓园

2023-05-06

世界热推荐:华东重机于徐州投资新设光能科技公司,注册资本5亿元

2023-05-06

SHEIN推出平台模式,拟引入更多第三方卖家-全球热点评

2023-05-06

“碳关税”即将落地,将会给纺织业带来哪些影响?

2023-05-06

母亲节顺德火车头植物园同行母亲进园免票|当前快讯

2023-05-06

天天速讯:2023成都三诊文综试题及答案汇总!

2023-05-06

江疏影上过哪些综艺节目 江疏影最近参加活动

2023-05-06

清华大学团队揭示星系外气体进入星系的详细过程 全球报资讯

2023-05-06

跨越1700多公里的双向奔赴!甘肃老人寄来感谢信:“青岛之行很是温暖”

2023-05-06

为防游客“白嫖” 黄河壶口瀑布景区砌高墙?多方回应

2023-05-06

美疾控中心主任瓦伦斯基辞职

2023-05-06

天天观点:5月5日基金净值:景顺长城成长龙头一年持有混合A最新净值0.8425,跌0.45%

2023-05-06

长裙英文名_长裙英文-热讯

2023-05-06

环球消息!五分之一的人因装修费用而后悔买房

2023-05-06

长痘痘了怎么办_长痘痘怎么调理

2023-05-06

世界快消息!5月5日基金净值:华夏经典混合最新净值1.856,涨0.92%

2023-05-06

牛吃草问题公式大全_牛吃草问题公式

2023-05-06

团员个人政治立场方面的问题_政治立场方面的问题

2023-05-05

民宿迎来最火“五一”:平台民宿预订量达2019年2.7倍|天天即时看

2023-05-05

水晶光电最新公告:获得捷豹路虎HUD项目定点通知书

2023-05-05

万人说新疆|看乌苏驾校白加克哈子的教练生活 全球热头条

2023-05-05

在卖空机构兴登堡发布令人震惊的报告后 比尔·阿克曼抨击老对手卡尔·伊坎

2023-05-05

龙泉驿规划中一核两带四片的文化发展利用格局是什么意思?

2023-05-05

乙肝疫苗多少钱打针前需要体检吗_乙肝疫苗多少钱|环球即时看

2023-05-05

太空豆怎么用?_太空豆怎么穿图解

2023-05-05

天天快资讯丨香港一季度餐饮总收益价值临时估计276亿港元 按年上升81.7%

2023-05-05

【五四特别致敬·我还是从前那个少年】贲德:青春,不分年龄-世界报资讯

2023-05-05

快资讯:札萨克镇人民政府、札萨克派出所联合举行“全民反诈 合力同心”——反诈联盟启动仪式

2023-05-05

天天时讯:云南建水旅游市场火爆 “五一”假期共接待游客58.4万人次

2023-05-05

警示教育约谈 共促美丽长江

2023-05-05

天天观天下!华为P60进军欧洲!

2023-05-05

谢娜综艺代表作没写快乐大本营 41岁谢娜重出江湖

2023-05-05

全球通讯!陈情令结局如何_陈情令结局

2023-05-05

新消息丨内黄县:推出三大精品旅游线路 丰富游客假日文化生活

2023-05-05

速递!一般玉米要煮多久才熟_玉米要煮多久才熟

2023-05-05

5月5日 13:23分 美好医疗(301363)股价快速拉升

2023-05-05

贵南高铁实现全线接触网送电 预计今年内开通运营|世界热消息

2023-05-05

世界时讯:2023青岛·全球创投风投大会将于5月12日-13日举办

2023-05-05

【早盘快报】机构调研火热,医药行业关注度升温,医药ETF(512010)实现四连阳 新视野

2023-05-05

每日聚焦:【莱凯健身】公开课•《如何正确的跑步》圆满落幕啦!~你得到手环了吗?

2023-05-05

全球今日讯!京东31亿元地块是保租房项目:将建4000套员工公寓

2023-05-05

每日简讯:聋哑夫妻找不到老家寄来的快递 民警“纸笔交流”解燃眉之急

2023-05-05

世界关注:三亚市交通运输局:暂停受理网约车经营许可及运输证核发业务

2023-05-05

广发财智金借款到账在哪里的_广发财智金如何还款简介介绍|报资讯

2023-05-05

全球新动态:基础锂盐早间提示

2023-05-05

陕西禾润易实业12.5亿摘得西安长安区宅地 建筑面积近18万平米

2023-05-05

赤壁铜雀台张馨予写真_《赤壁铜雀台

2023-05-05

盘前题材挖掘

2023-05-05

连续7次加息 欧洲央行在遏制通胀与经济增长间进退两难-当前快报

2023-05-05

孙鹏|每日信息

2023-05-05

全程马拉松多少公里世界纪录(全程马拉松) 全球观天下

2023-05-05

挪威央行加息至2008年以来的最高水平 暗示将有进一步行动

2023-05-05

快讯2023-05-05 04:09:24

2023-05-05

天天时讯:挤出理论

2023-05-05

天天讯息:5月5日1000万!速抢

2023-05-05

北京到宁波高铁时刻表查询(北京到宁波高铁)

2023-05-04

护航“五一”,主动延迟退休——兴义公安交警张尚启:“我想再站最后一班岗”

2023-05-04

市农业农村局获市直部门、单位高质量发展综合绩效考核“优秀”等次

2023-05-04

苏大20法学高考分数线 2022年苏州大学法学研究生分数线

2023-05-04

一会儿阿根廷,一会儿缅甸,足协就不能找个靠谱点的热身对手吗? 消息

2023-05-04

在游戏里当爹,最怕自家白菜把别家的白菜拱完了_世界快看

2023-05-04

人民网评婆孙插队事件:讨论“平移插队”事件不能跑偏,不能滑向违法边缘 天天资讯

2023-05-04

世界微速讯:广厦队球员,切莫寒了心...

2023-05-04

环球快看:建滔集团5月4日回购5.00万股 耗资119.69万港币

2023-05-04

【0504申万收评】宏观因素扰动,原油跌近6%,贵金属推动走高

2023-05-04

重点聚焦!中国科技企业首次:百度以第一完成单位登顶《Nature》正刊

2023-05-04

5月4日红日药业涨5.21%,华泰紫金泰盈混合A基金重仓该股 视讯

2023-05-04

沈梓捷缺席今晚生死战 深圳男篮面临巨大考验

2023-05-04

【天天报资讯】“五一”期间成都熊猫主题游火爆 游客赏“花”热情只增不减

2023-05-04

山东德州一小区发生煤气泄漏闪爆事件 造成1人受伤-天天精选

2023-05-04

ETF观察丨恒生医疗保健指数反弹,再鼎医药涨超6%,恒生医疗ETF(513060)近20个交易日资金净流入超17亿元 全球微资讯

2023-05-04

咖啡新季度财报集体向好,瑞幸和星巴克又开始加速开店_环球观焦点

2023-05-04

高校毕业生数量创新高,上海市教委主任呼吁全社会关注大学生就业

2023-05-04

开源证券:给予奇安信买入评级|最新消息

2023-05-04

【世界新要闻】金山这个合作社探索出“鱼菜共生”模式 带动农业产业提档升级

2023-05-04

哈兰德:我会玩些电子游戏来散心,但不能告诉你们是什么

2023-05-04

新内真衣_关于新内真衣简介 环球即时看

2023-05-04

哈登:这场球队几乎没有做得好的方面 但达成了客场赢一场的目标 当前热门

2023-05-04

4亿年薪+2亿赞助费!足坛顶级肥约曝光,名记确认梅西,C罗羡慕

2023-05-04

科技纳米皮+无金环设计!小米13 Ultra限量定制色图赏

2023-05-04

汽车零部件板块走高 徕木股份涨停 最新快讯

2023-05-04

宏昌电子5月4日盘中跌幅达5%

2023-05-04

外围跳水了!节后,A股会迎来“强降雨”吗?

2023-05-04

【世界新要闻】南京银行2022年总资产首超2万亿元,净利润184.08亿元,增16.09%

2023-05-04

天津329家企业线上参展广交会 津企线上成交超9000万美元

2023-05-04

赛事密集“鸣枪” 文体旅消费需求在马拉松赛道上井喷|世界播资讯

2023-05-04

速看:劳动合同法年假规定的相关内容是什么

2023-05-04

2023上海车展:林肯全新航海家 有环绕屏幕的快乐老家 全球快看点

2023-05-04

【聚看点】起承转合是什么意思_起承转合是啥意思

2023-05-04

word文档清楚表格内容_word文档清除表格内容_世界快播报

2023-05-04

突发!“克里姆林宫遭无人机袭击”!俄方:保留报复权利 播报

2023-05-03

柳下惠是何许人_柳下惠梗怎么来的|简讯

2023-05-03

全球时讯:胶州男孩手指受伤,李沧交警紧急开道送医

2023-05-03

32比最小的两位数是多少_最小的两位数是多少

2023-05-03

国内游人数和收入超2019年 “五一”旅游火出圈 焦点热议

2023-05-03

海底捞:“五一”假期前三天接待顾客同比增长65% 淄博门店接待增长4.7倍-环球播报

2023-05-03

MG动画|向山西陶寺出发,寻找“最初的中国” 环球快报

2023-05-03

文旅融合 “五一”假期各地消费市场长势强劲

2023-05-03

明天A股怎么走?我做了一个大胆的预判。具体请看我的手绘预测图。

2023-05-03

速递!正常星系中的恒星形成与X射线演化的研究(关于正常星系中的恒星形成与X射线演化的研究介绍)

2023-05-03

哪款智能手机适合老人用

2023-05-03

受食品通胀推动 澳大利亚3月份零售销售增长超预期

2023-05-03

河北工程大学王牌专业_河北工程大学专业

2023-05-03

美民调:更多美国人认为枪支和犯罪应列为美国首要问题

2023-05-03

中国建设银行2023年5月份最新存款利率:3年期利率很高 每日快讯

2023-05-03

焦点速看:空气清新环境美,三亚乡村引客来

2023-05-03

刺激,5-1德甲第5踢疯了,横扫拜仁的绊脚石,昂首杀入决赛

2023-05-03

一季度长江干线港口货物吞吐量增长6.2%

2023-05-03

当前热讯:假期接近尾声!福州新一轮降水即将来袭,未来三天……

2023-05-03

微信电脑版打不开图片和文件(微信电脑版打不开图片) 微资讯

2023-05-03

活久见|竟然能看到“最强三国”的番

2023-05-03

杰地集团(08313)预期一季度净利润约68万新加坡元 天天快看

2023-05-02

好客山东名不虚传!淄博 0.85 米志愿者喝着奶帮看行李|环球新视野

2023-05-02

汽车信息:你可以花100万美元买下卡扎菲上校的迈巴赫 环球快资讯

2023-05-02

天天快看:1924年:冯玉祥逼宫、溥仪出走的一幕

2023-05-02

环球消息!班尼特_关于班尼特介绍

2023-05-02

41岁孙博肝癌去世,相恋12年的圈内女友送花圈,发文悼念惹泪目 世界今日报

2023-05-02

招聘会计信息最新招聘信息_会计招聘信息怎么写-每日看点

2023-05-02

每日观点:莱音珠宝黄金价格今天多少一克(2023年05月02日)

2023-05-02

41岁孙博肝癌去世,相恋12年的圈内女友送花圈,发文悼念惹泪目 当前焦点

2023-05-02

都说胡列娜爱上唐三,为了唐三,小舞可以献祭,胡列娜可以做什么?|焦点速看

2023-05-02

从“招商引资”到“招商选资” 从“闲置低效”到“腾笼换鸟” 在提质增效的加速度中稳步向前 速看

2023-05-02

锅圈食汇,房东的极致博弈-全球聚焦

2023-05-02

天津城市建设大学官网_天津城市建设管理职业技术学院贴吧

2023-05-02

里弗斯谈哈登:他今天太棒了 他保持了镇定 他有很好的耐心

2023-05-02

摩根大通收购美国第一共和银行-时讯

2023-05-02

阿拉伯五国外长强调优先解决叙利亚危机-今日快讯

2023-05-02

罗马诺:特莱斯、拜利租借回归后预计都不会留在曼联 世界热门

2023-05-02

山东青岛5月1日12时起进入海洋伏季休渔期_即时焦点

2023-05-02

美芯晟2023年5月11日开启申购,申购代码:787458

2023-05-02

鹦鹉鱼吃什么鱼食_鹦鹉鱼吃什么食物最好|动态焦点

2023-05-02

山里人家姐妹花

2023-05-01

鬬_关于鬬简述|环球实时

2023-05-01

环球新消息丨为什么他们总是义无反顾,《惊天救援》主演杜江王千源俞灏明这样说

2023-05-01

天天微速讯:巩卫进行时丨“五一”劳动最光荣!那大城区环境卫生整治不松懈

2023-05-01

爱马仕45只超级热门难买的包包推荐!-世界热门

2023-05-01

每日热点:山东工业园火灾致5死

2023-05-01

烫发的种类有哪些_大家一起来看看吧

2023-05-01

特种部队3浴血追凶 下载_特种部队3浴血追凶-天天快讯

2023-05-01

环球聚焦:王杨:黄金震荡高抛低吸,欧盘1980直接多!

2023-05-01

寿险转长护险试点今日启动!申请办理需要注意这些内容→

2023-05-01

全球新消息丨have怎么读_have的意思

2023-05-01

当前最新:黄景瑜辟谣出演狂飙2

2023-05-01

当前速讯:佛心果菩提怎么把玩_佛心果

2023-05-01

全省各地体育新闻播报 快资讯

2023-05-01

狭窄空间里的热爱和坚守_环球微速讯

2023-05-01

当前观点:Redmi 2023年快充之王来了!210W新机已在路上

2023-05-01

每日热门:炸丸子的家常做法面包糠_炸丸子的家常做法

2023-05-01

【世界报资讯】生活是文学唯一的源泉——读《瓦屋山桑》

2023-05-01

国防部:中国军队永远都是人民的守护者

2023-05-01

看点:什么是民事诉讼法学它的研究对象是什么 什么是民事诉讼

2023-05-01

环球今亮点!丁立人夺国象男子个人世界冠军详细内容

2023-05-01

世界观热点:海南熊猫兄弟“五一”假期“营业” 获亲子游客热捧

2023-05-01

普雷马克原理举例说明_普雷马克原理的心理依据|每日视点

2023-04-30

kubernetes就绪探针使用 全球快播报

2023-04-30

新华网三评“假期旅游”:让堵心变顺心、让流量变“留量”、让过客变常客-短讯

2023-04-30

【全球独家】绩效考核意见怎么写 考核意见怎么写

2023-04-30

“五一”假期首日迎客流出行高峰 南昌铁路发送旅客136.6万人次|全球快播

2023-04-30

世界最新:超燃!中国“翼装侠”张树鹏成功穿越天门洞

2023-04-30

重点聚焦!百度、微博、斗鱼、豆瓣等平台被约谈

2023-04-30

发宝宝照片配的个性说说 发宝宝照片配的个性说说搞笑-世界今日讯

2023-04-30

甜奶油怎么做(甜奶油怎么做好吃的)

2023-04-30

即时:出口再发力!564辆比亚迪元plus汽车在小漠国际物流港装船出海

2023-04-30

北京交警:车驾管业务 “容缺办”“延期办”措施今天停止|世界聚焦

2023-04-30

“一旦隐形战机在中国周边被击落,我们将无能为力”

2023-04-30

一个篮球“打”开发展新思路_环球焦点

2023-04-30