【TWINHOW评点：基于人工智能的自动化科技平台“紫东太初”将大有作为】自动化网推好（TWINHOW）高质量发展联盟（平台）评论要点：

• “紫东太初”大模型开拓性地实现了图-文-音语义统一表达，首次实现了“语音生成视频”的功能，迈出朝向人工智能通用化的关键一步。并依托紫东太初大模型研发了跨模态通用人工智能平台，打造了多模态人机对话机器人“小初”，兼具图文音的理解、推理和生成能力，具有图像生成、智能问答、语音识别、文字识别、视频生成、视频描述、智能翻译等30多项功能。
• 基于人工智能的自动化科技平台“紫东太初”，在具有自主可控的自然语言处理、模式识别、知识图谱、机器学习、自动学习等人工智能科技的基础上，通过 在工业、医疗、城市、金融、物流、科学研究等行业领域开展典型应用示范，必将大有作为，为推动高质量发展、共创更美好未来作出“自动化者”应有的贡献！

据中科院自动化所信息，日前，工业和信息化部公布了“2021年人工智能产业创新任务揭榜挂帅项目”立项名单，由中科院自动化所牵头的“大规模多模态预训练模型的研发与行业应用”项目在1200余个申报项目中脱颖而出，获得优胜揭榜资格。 

该项目聚焦大规模多模态预训练模型的研发与行业应用，以自主可控基础软硬件平台为基础，突破不同领域的共性平台技术，实现万亿级参数量规模的大模型分布式训练，构建覆盖多语种文本、语音、图像、视频的多模态预训练大模型，通过在工业、医疗、城市、金融、物流、科学研究等行业领域开展典型应用示范，改变当前单一模型对应单一任务的人工智能研发范式，推动我国人工智能研发规则产生重大变革。 

此前，已经以全栈自主可控基础软硬件平台为基础，与武汉市东湖高新区深度合作，依托武汉智能计算中心的昇腾GPU，研发了面向超大规模模型的高效分布式训练框架，在图、文、音三个基础模型上加入跨模态编码和解码网络，打造了业内首个千亿参数三模态大模型“紫东太初”。

“紫东太初”大模型开拓性地实现了图-文-音语义统一表达，首次实现了“语音生成视频”的功能，迈出朝向人工智能通用化的关键一步。并依托紫东太初大模型研发了跨模态通用人工智能平台，打造了多模态人机对话机器人“小初”，兼具图文音的理解、推理和生成能力，具有图像生成、智能问答、语音识别、文字识别、视频生成、视频描述、智能翻译等30多项功能。目前，“紫东太初”已经与上汽集团、魏桥创业、爱奇艺和新华社、美亚大千等行业领军企业合作，共同探索了丰富的应用落地场景。 

2021年12月5日，第九届中国新兴媒体产业融合发展大会在海南博鳌举行。中国科学院自动化研究所、新华社技术局、媒体融合生产技术与系统国家重点实验室联合发布“全媒体多模态大模型研发计划”，将在媒体科技领域进行全新合作，通过技术创新推动媒体融合发展。 

此次计划研发的“全媒体多模态大模型”，将基于中科院自动化所“闻海”多模态媒体大数据和“紫东太初”三模态大模型核心技术积累，面向新华社技术局、媒体融合生产技术与系统国家重点实验室等部门的业务领域模型，构建“大数据+大模型+多模态”的多任务统一学习体系，以及“知识与数据混合驱动”的可信建模方式，从而实现对全媒体数据理解与生成的统一建模，打造全栈国产化媒体人工智能平台。

中国科学院自动化研究所王金桥研究员在会上分享了“紫东太初”三模态大模型与媒体业务融合方面的新进展，介绍了内容理解、图像生成、视频生成等方面的性能提升，展示了多模态对话虚拟人“小初”在高清图片生成、新闻续写和热点新闻发现等方面的强大能力。 

“紫东太初”三模态大模型兼具跨模态理解和生成能力，结合新华社在海量全媒体数据积累和媒体融合业务场景，共同打造“全媒体多模态大模型”，将加速推动AI在如视频配音、语音播报、标题摘要、海报创作等更多元媒体业务场景的应用。 

据悉，工业和信息化部组织开展的“2021年人工智能产业创新任务揭榜挂帅工作”，聚焦人工智能产业发展的核心基础、重点产品、公共支撑等3类创新任务，旨在发掘培育一批掌握关键核心技术、具备较强创新能力的优势单位，突破一批人工智能标志性技术产品，加快突破产业发展瓶颈、补齐短板，推动我国人工智能产业与实体经济融合发展。