项目简讯|力控科技获战略投资,中科深智生成式AI游戏场景落地

力控科技获中石化资本战略投资

项目简讯|力控科技获战略投资,中科深智生成式AI游戏场景落地

近日,北京力控元通科技有限公司(以下简称“力控科技”)与中国石化集团资本有限公司(以下简称“中石化资本”)成功签订增资协议并完成交割。本轮股权融资完成后,中石化资本成为力控科技重要股东,力控科技将借此契机,进一步在产品创新迭代和产品线扩充上精准发力,持续打造工业软件和工控信息安全的基础平台及适配产品,更好地服务于广大客户。

中石化资本依托中石化集团强大的资本优势和科技优势,围绕中石化集团“一基两翼三新”的产业格局,重点布局新能源、新材料、节能环保、高端智能制造、大数据和人工智能等战略性新兴产业,推动金融、科技和产业的良性循环,赋能绿色低碳可持续发展。

力控科技作为卓越的工业软件产品开发商及解决方案提供商,聚焦中国工业4.0、智慧市政等领域的智能管控产品开发与行业解决方案,丰富的产品线融入到工业互联网体系的各个环节,提供从自动化、数字化到智能化的多层次的软硬件产品及行业解决方案。 在二十多年锐意进取的发展过程中,力控科技已成长为工业软件细分赛道的头部品牌,实现工业互联网领域的工业软件+工控信息安全的全覆盖,业务涵盖石化化工、油气、矿山、冶金、市政等多个决定国民经济发展的重点行业。凭借自主创新能力,力控科技在技术实力与发展前景等方面均得到市场的高度认可,目前已获得了杭实资管、基石基金、前海股权基金、国投创合等市场主流投资机构的战略投资。

中科深智实现生成式AI游戏场景落地率先推出虚拟助播产品

“生成式AI正展现巨大潜能,其在各行业的落地和应用也正在迅速加速。”

作为国内生成式AI虚拟人技术领导者,中科深智凭借自身的技术积淀和在 NVIDIA NeMo、Omniverse等技术 的帮助下,成功推出虚拟人实时交互和应答系统——云小七,这也是加入 NVIDIA初创加速计划与 NVIDIA 深入技术交流与合作的成果之一。

同时,中科深智将自有大模型GenSense数智姜尚引入游戏行业,支持智能NPC(也即虚拟人)的批量化生产,提升游戏开发效率。

云小七除了可以让NPC具备个性化特征,还能够在不需要编写复杂脚本的情况下,与游戏玩家进行顺畅的文字、语音、动作、表情等多模态的实时互动。这将为游戏开发商带来更加有力的支持,同时也为玩家提供更加生动、真实的游戏体验。

1

文字&语音实时对话能力

云小七底层的文字对话能力,来自于中科深智在5月10日推出的自有大语言模型GenSense数智姜尚。数智姜尚是国内商用大模型在轻量化领域内的首次尝试,其200亿和20亿两种参数量的大模型,占用资源相对于传统技术更少,推理甚至只需要一块NVIDIA GeForce RTX 3090显卡便能良好运行。

NVIDIA NeMo在数智姜尚的训练过程中提供了低门槛、经济高效的帮助。NVIDIA NeMo是一个用于构建最先进对话式AI模型的工具包,为LLM的预训练、自然语言处理(NLP)、自动语音识别(ASR)和文本到语音(TTS)合成模型提供单独的集合。对于LLM的部分, NVIDIA NeMo Framework提供了多个可选择的预训练模型,包括几十亿参数的中等体量和最大的AI单体Transformer语言模型(MT-NLG 5300亿)。这些预训练模型能够大幅缩短后续基于该模型的微调和再训练的时间。

在高效训练框架 NVIDIA NeMo Framework的助力下,数智姜尚的最终呈现为专门针对虚拟人端到端应用而设计的模型,具有轻量级、可私有化部署等优势,服务于中科深智下游客户。同时,NeMo Framework提供的NeMo Guardrails工具帮助中科深智高效解决对话式AI合规性和安全性的风险。NeMo Guardrails为对话设置了响应范围边界,使其回答范围仅限于适当的主题并仅提供必要的信息,并限制AI只与已确认安全的第三方应用程序建立联系。

NeMo框架中的ASR/TTS模型进一步提高了云小七对于音频输入和输出响应的实现效率。云小七嵌入在中科深智自身技术底座之上,支持与用户进行实时的语音交流,从而实现了多种交互模式的无障碍切换。

2

动作和表情的实时反馈

云小七的核心能力之一还包括中科深智自研实现的CLAP大模型算法(Contrastive Language-Action Pre-Training,对比性语言-动作预处理模型),这种算法可以实现对于语音、语义以及外部环境输入的实时反馈,从而输出动作和表情等,使得NPC具有更加生动的表现能力。此外, NVIDIA Omniverse中的 Audio2Face也可以辅助云小七实现音频输入的面部输出,通过预训练的深度神经网络、调整角色网格的3D顶点等方式,实现快速表情切换。

为了实现更加自然的动作反馈生成以及动作和空间关系的独立实现,云小七采用了CLAP算法,并支持基于语义、音乐和连续动作等多种生成方式。

在游戏环境中,云小七能够识别并及时反应,这得益于其自身的意图识别能力以及 NVIDIA Maxine对于音频和视频通信方面的优化。即使使用普通的麦克风和摄像头,NPC也能够与玩家实现实时互动。

3

智能NPC的最终实现

项目简讯|力控科技获战略投资,中科深智生成式AI游戏场景落地

至此,再加上中科深智的超写实虚拟人生成系统Anyhuman(支持快速创建并导出高精度数字人)的协同助力,一个实现了超写实虚拟人形象、文本和语音实时交互、对外部环境输入实时感知并转化为动作和表情反馈的NPC终于问世。

这些后续功能基于生成式AI的设计,可以通过赋予特定的人设,如形象、声音、性格特征、背景等等,来与游戏内容有机融合。鉴于这一创新,中科深智预测这将完全改变玩家与游戏角色互动的方式,提高游戏的沉浸感,让普通玩家也能更快地探索元宇宙的奥秘。

4

率先推出虚拟助播产品

作为已占据70%电商市场份额的生成式AI和3D AIGC技术公司,中科深智基于其深厚的人工智能积累,立足于目前行业的发展趋势,从电商行业场景下商家的需求考虑,率先推出虚拟助播产品,并支持接入多个直播平台。

中科深智的Motionverse虚拟人业务中台,依托于自研实现的CLAP大模型算法(Contrastive Language-Action Pre-Training,对比性语言-动作预处理模型),能够实现对于动作和表情的驱动,支持基于语音、语义、音乐等多种生成方式。这也使得虚拟助播可实现唇形与语音同步、表情和动作衔接自然,具有更加生动的表现能力。同时可以降本增效。

华天软件首席科学家梅敬成博士

入选中国科协海智计划特聘专家

项目简讯|力控科技获战略投资,中科深智生成式AI游戏场景落地

根据中国科协近日印发的《2022年中国科协海智计划特聘专家入选名单》,华天软件首席科学家梅敬成博士成功入选。

海智计划是中国科协发起的旨在引进海外高层次人才为国服务的一项重要工作。

中国科协海智计划特聘专家活动是中国科协做优对高层次海外科技人才的联系服务,更好服务地方科技经济发展,加强中国科协海智特聘专家队伍建设组织的高层次人才选拔活动。

经推荐审查、专家评审及复核、海智计划领导小组审议等,据悉,此次全国619名专家被聘任为海智专家。

【海创汇,是海尔集团面向全球创业者打造的加速器平台。自成立以来,通过搭建开放的大企业创新创业平台,围绕科技创新,探索“有根创业”加速模式,提升创业成功率,已逐步形成大中小企业融通发展生态。海创汇,将坚持发挥海尔海创汇大企业创业平台产业优势,聚焦科技创新,加速培育“专精特新”企业,推动高质量发展。】