从检索图像、描述视频，到吟诗作赋、续写文章，再到识别语音、双语翻译，虚拟人“小初”日前亮相2021世界人工智能大会，展示了图、文、音三种模态的智能转换和生成。
“小初”具备这样的能力，得益于一个名为“紫东太初”的跨模态通用人工智能平台。该平台由中国科学院自动化研究所研发，基于国产化基础软硬件，仅采用一个大模型，即可“锻炼”人工智能在视觉、文本、语音多个场景的理解能力。
中科院自动化所所长徐波介绍，“大数据+大模型+多模态”将改变当前单一模型对应单一任务的人工智能研发范式，多模态大模型将成为不同领域的共性平台技术，是迈向通用人工智能的重要路径探索。
“‘紫东太初’实现了图、文、音三种模态的统一表达，以图生音，以音生图，将开拓AI在视频配音、语音播报、标题摘要、海报创作等更多元场景的应用。”徐波说。
据了解，中科院自动化所构建了中文预训练模型、语音预训练模型、视觉预训练模型，并通过跨模态语义关联，构建了三模态预训练大模型。（董瑞丰）
编辑：赵蕴清
忒色 “秦岭最美风景廊道联合体”成立。未来，联合体成员间联合打造秦岭公路旅游IP。 2021-10-14
忒色 （图17）\（图18）\（图19） 现在，“诗经里小镇”已经成为游客深度体验诗词游、文化游、休闲游，感受国潮和国粹的必去之地 2021-10-11
忒色 10月18日，第十九届四川光雾山国际红叶节将在巴中市南江县开幕，红叶节持续至11月18日，为期一个月。 2021-10-09
忒色 2021-10-09
忒色 2021-10-09
忒色 国庆七天长假，如若你还没远游，也不想长途劳顿，那不妨参考下我们特别推荐的美景美食，陪着家人，轻轻松松逛美咥美。 2021-10-02
忒色 即日起，西安地区七家万豪集团酒店联合开启Fun肆串场活动秋高气爽，等你共赏 特别礼遇无门槛扫码加入万豪旅享家会员，注册并绑定成功后领取17元礼遇，消费100元可直接抵扣消费 2021-09-30
忒色 秋日的竹溪，每一片叶子都沾染着大自然明媚金秋的韵味，不论走到哪里，绝对都能拍出令人惊艳的风光大片！ 2021-09-30
忒色 “秦岭楼观一票通”9月29日起已正式开售，广大市民可在秦岭国家植物园、秦岭四宝科学公园、赵公明文化景区和终南山古楼观历史文化景区售票处购买，同时开通网络售票 2021-09-30
忒色 2021-09-28
忒色 秋风送爽，天高云淡，不知不觉，五彩斑斓的秋季再次莅临人间。当秋日的阳光照耀着大地，苍山更加壮阔，森林更加多彩，河流更加清澈…… 2021-09-27
忒色 9月24日，西藏山南国道219“一措再措”高原房车自驾露营节在“藏戏第一村”扎西曲登启动 2021-09-26
网站简介 网站团队 本网动态 友情链接 版权声明 我要投稿 工作邮箱 陕西不良信息举报 新闻宣传自律管理承诺书
