巨人网络发布“千影”有声游戏大模型:加码“游戏+AI”赛道

  12 月 12 日下午消息,巨人网络在 2024 年度中国游戏产业年会上发布“千影 QianYing”有声游戏生成大模型,加码“游戏 +AI”赛道。“千影 QianYing”包含游戏视频生成大模型 YingGame、视频配音大模型 YingSound,实现了有声可交互游戏视频生成的新突破。

  此外,巨人网络启动“千影共创计划”,基于大模型底座技术,对外开放模型技术、模型应用、原创游戏项目等方面的合作共创、应用落地、人才招募,加速布局“游戏 +AI”从降本增效向颠覆式创新的快速转化。

  YingGame 由巨人网络 AI 实验室联合清华大学 SATLab 研发,是首个实现角色多样运动与个性化、具备强物理模拟特性的游戏视频生成大模型,可生成开放世界游戏视频,通过文本、图像或键盘、鼠标操作实现角色动作的交互控制,并自定义游戏角色,同时具备更好的游戏物理仿真特性,无需传统游戏的 3D 模型制作和引擎渲染环节。结合自研视频配音大模型 YingSound,能够根据画面生成与之匹配的复杂音效,实现有声游戏视频。

  YingSound 是由巨人网络 AI 实验室、西北工业大学 ASLP Lab 和浙江大学联合研发的视频配音大模型(Video-to-Audio Model,V2A),拥有超强的时间对齐、视频语义理解能力,无需人工输入提示词,端到端为各类视频生成多种类型的高精细度音效,涵盖真实场景视频、动漫视频与游戏视频等,具备多样化应用场景泛化能力。

  巨人网络表示,“千影 QianYing”有声游戏大模型展示了通过文字描述实现游戏创造的一种可行性,目前尚处于技术打磨阶段,AI 实验室将持续推进模型能力的升级迭代。