随着元宇宙时代的到来,虚拟人产业正蓬勃发展。在自身能力不断提升的同时,Cocos 引擎也在技术和工具上不断探索创新,所以有了这套以 Cocos 引擎基础能力作为底座的虚拟角色专业解决方案。
不管是元宇宙的美好畅想还是乍一看魔法般神奇的语言大模型 ( LLM ) ,再好的产品呈现都需要良好创作内容的加持,而帮助快速孵化优秀内容才应该是 工具向产品 应该解决的问题。
为进一步降低创作门槛,提高开发效率, Cocos 虚拟角色研发团队针对行业痛点,推出了全新的无代码 3D 角色编辑器 Cocos Persona Editor,以及快速集成虚拟角色能力的开发工具 Cocos Meta SDK。
Cocos Persona Editor:无代码角色编辑器
Cocos Persona Editor(以下简称 Persona)是一款面向普通用户的可视化 3D 虚拟角色生成工具,通过拖拽式操作实现快速角色创建。即使不具备相关专业技能,也能打造真实细腻的虚拟形象。
在功能方面,Persona 包含了 捏脸换装、动态捕捉、资产管理、场景管理、虚拟直播、 AIGC 等在内的虚拟角色必备 “全家桶”!
多样风格模型兼容
Persona 内置丰富多样的 3D 角色模板,帮助你快速生成需要的 3D 角色。
如果你已经有角色资产,可直接导入 Persona,然后进行简单适配就能实现模型的实时驱动,轻松打造属于你的专属虚拟角色!
深度外观编辑 + AIGC 功能集成
Persona 不仅具备基础的捏脸和换装功能,还附带了丰富的可视化材质系统,让你可以轻松自定义角色外观,快速打造理想的虚拟形象。
可视化材质系统支持自由修改模型材质贴图,用户可以通过应用 Cocos 虚拟人专用 Shader 轻松实现精致 PBR 渲染效果。
Persona 中的材质系统还接入了 AI 技术,支持一键调用 stable diffusion 绘图服务,仅需文本描述即可生成2D图像,并直接应用于 Persona 中的 3D 模型上,帮助打造独特的个性化虚拟角色。
内测阶段仅支持用户自行部署的 SD 服务,未来将支持更多主流 AI 绘图服务
自然流畅的角色驱动系统
除了让虚拟角色拥有精美的外观,Persona 搭载的驱动功能还能赋予角色 “灵魂”,让每个 3D 角色都能活灵活现。
-
Cocos 自研的 AI 智能 动态捕捉算法,精准还原真实面部动态表情。无需复杂昂贵外接动捕设备,1~2 台 普通摄像头即可一键开启面部&全身实时动态捕捉。
-
Cocos 自研的骨骼 动画重定向算法,兼容 Biped 等大部分 人形动画骨骼;您可以自由导入骨骼动画 并转化为通用角色动作资源。为项目开发提供了极大的便利,让制作者无需再面对复杂的骨骼和动画脚本,避免反复修改调试。大大降低了制作难度,提高了效率。 -
低门槛的 弹簧骨配置系统,能让新手用户轻松配置出拥有丝滑动态效果的发丝、裙摆。
自定义 3D 场景助力创作
在 Persona 内可以轻易通过拖拉拽快速构建 3D 场景,结合虚拟角色,就可以搭建你心中理想的小世界!
-
对于 游戏开发者,可以通过在 Persona 中搭建 3D 场景,便捷实现游戏场景的 原型设计,而后直接导出角色至本地工程。 -
对于 虚拟UP主或虚拟IP运营方,可以将搭建的 3D 场景保存为直播间环境,使用内置的 直播模式在不同直播场景间随意切换,丰富直播互动体验。助力虚拟 IP 运营,丰富个人直播体验! -
对于 视觉内容创作者,可以摆设道具、控制人物姿势,布置视角;通过截图或录制功能快速输出分镜草稿;辅助动画、脚本故事创作。为作品添砖加瓦!
Cocos Meta SDK:简单易用的虚拟角色开发工具包
无需额外开发即可在项目中快速集成 3D 虚拟角色能力。不论您是希望进行商业应用开发,还是游戏开发,选择集成 Meta SDK 都将是一个更加便捷高效的开发方案。
减轻开发压力,专注内容本身
Cocos Meta SDK 搭载了包含捏脸换装、角色操控、表情动作播放、视觉面捕、口型驱动等高级虚拟角色功能。开发者无需重复开发这些通用能力,直接将精力放在内容创作与场景优化上,大幅提升开发效率。
同时,Cocos 是一个移动端优先的引擎,在移动端做了大量的技术优化,能在最小的算力范围内,达到最优的虚拟人效果,实现大多数低算力设备及操作系统的全面覆盖。
Persona+Meta SDK工具组合打法
由 Persona 创建角色资源,导出并接入 Meta SDK,即可轻松构建各类个性化工程。Persona Editor + Meta SDK 强强联合,基本构成了元宇宙虚拟社交、数字人商业营销、游戏开发所需的全套技术解决方案。过去只能想象的场景,现在都可以通过这套组合拳实现。
面向多样化需求,打造协同创作环境
Persona 编辑器及 Meta SDK 在设计上充分考虑了不同用户群体和应用场景的需求,提供了针对性功能,构建高效的协同创作环境。
-
降低 3D 项目开发难度:无需编程知识,就能在 Persona 内预览和调试 3D 渲染效果及动画组合,不同种类的创作者可以各司其职高效协作。 -
简化程序开发流程:Meta SDK 为程序员提供完整接口,可将精力集中在自己的开发领域,无需操心虚拟角色技术细节。 -
支持多样化需求:Persona 和 Meta SDK 可用于游戏开发、商业应用、IP 短视频、VR/AR 等领域,满足不同用户的虚拟角色创作需求。
丰富多样的应用场景
-
虚拟互动直播 - Persona 编辑器的实时捕捉功能可以精准还原角色的面部和动作表现,直播环境自由创作,一键轻松开启直播间。
-
游戏、商业应用开发 - 通过 Cocos Meta SDK,开发者可以将 Persona 中的角色资产应用到游戏项目中,轻松实现交互式虚拟角色项目的开发。不论是小程序、桌面游戏 、手机应用 还是 车载程序,集成虚拟角色都不再是一大难题。
-
IP 短视频 - Persona 对通用骨骼动画格式提供了全面支持,加上完全可自定义的 3D 场景,可以大幅缩减短视频内容的制作时间。不论是分镜草稿、短视频素材都能轻松拿捏。
-
VR/AR 应用 - 结合 Cocos CreatorXR 可以帮助开发者毫不费力地将虚拟角色集成到 VR/AR 游戏或者应用中。
内测活动说明:
本次测试开放时间为 2023 年 8 月 10 日 至 8 月 25 日 ,面向所有用户开放申请,无名额限制,审核通过后即可进行下载体验。
如何申请内测资格:
-
下载并登录 Cocos Dashboard。
尚未注册 Cocos 账号的用户请先前往 Cocos 官网申请注册。
-
单击首页 Cocos Persona 标签页下的 【申请使用】 按键即可申请内测。请尽可能完整填写申请表单,能帮助您更快取得测试资格。请注意查收审核通知邮件;审核通过后您便可直接在 Cocos Dashboard 中安装并使用 Cocos Persona。 -
获取 Cocos Meta SDK:获得内测资格后,请进入 Cocos 商城 搜索并下载 Persona Plug-in 。在 Cocos Creator 内安装插件后即可下载 SDK 包体。 -
更多测试相关说明,请前往 Cocos 官网论坛查看,或添加下方内测交流群进行咨询。
Persona 内测交流群:
还在等什么? 快来申请测试名额, 感受前所未有的创作体验吧!
点击【阅读原文】,可进入虚拟角色官网页面。
本文分享自微信公众号 - COCOS(CocosEngine)。
如有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一起分享。