抢先体验虚拟角色开发工具,Cocos Persona Editor 开启内测!

原创
2023/08/10 12:04
阅读数 242
AI总结

随着元宇宙时代的到来,虚拟人产业正蓬勃发展。在自身能力不断提升的同时,Cocos 引擎也在技术和工具上不断探索创新,所以有了这套以 Cocos 引擎基础能力作为底座的虚拟角色专业解决方案

不管是元宇宙的美好畅想还是乍一看魔法般神奇的语言大模型 ( LLM ) ,再好的产品呈现都需要良好创作内容的加持,而帮助快速孵化优秀内容才应该是 工具向产品 应该解决的问题。

为进一步降低创作门槛,提高开发效率, Cocos 虚拟角色研发团队针对行业痛点,推出了全新的无代码 3D 角色编辑器 Cocos Persona Editor,以及快速集成虚拟角色能力的开发工具 Cocos Meta SDK

Cocos Persona Editor:无代码角色编辑器

Cocos Persona Editor(以下简称 Persona)是一款面向普通用户的可视化 3D 虚拟角色生成工具,通过拖拽式操作实现快速角色创建。即使不具备相关专业技能,也能打造真实细腻的虚拟形象。

在功能方面,Persona 包含了 捏脸换装、动态捕捉、资产管理、场景管理、虚拟直播、 AIGC 等在内的虚拟角色必备 “全家桶”!

多样风格模型兼容

Persona 内置丰富多样的 3D 角色模板,帮助你快速生成需要的 3D 角色。

如果你已经有角色资产,可直接导入 Persona,然后进行简单适配就能实现模型的实时驱动,轻松打造属于你的专属虚拟角色!

深度外观编辑 + AIGC 功能集成

Persona 不仅具备基础的捏脸和换装功能,还附带了丰富的可视化材质系统,让你可以轻松自定义角色外观,快速打造理想的虚拟形象。

可视化材质系统支持自由修改模型材质贴图,用户可以通过应用 Cocos 虚拟人专用 Shader 轻松实现精致 PBR 渲染效果。

Persona 中的材质系统还接入了 AI 技术,支持一键调用 stable diffusion 绘图服务,仅需文本描述即可生成2D图像,并直接应用于 Persona 中的 3D 模型上,帮助打造独特的个性化虚拟角色。

内测阶段仅支持用户自行部署的 SD 服务,未来将支持更多主流 AI 绘图服务

自然流畅的角色驱动系统

除了让虚拟角色拥有精美的外观,Persona 搭载的驱动功能还能赋予角色 “灵魂”,让每个 3D 角色都能活灵活现。

  • Cocos 自研的 AI 智能 动态捕捉算法,精准还原真实面部动态表情。无需复杂昂贵外接动捕设备,1~2 台 普通摄像头即可一键开启面部&全身实时动态捕捉。

  • Cocos 自研的骨骼 动画重定向算法,兼容 Biped 等大部分 人形动画骨骼;您可以自由导入骨骼动画 并转化为通用角色动作资源。为项目开发提供了极大的便利,让制作者无需再面对复杂的骨骼和动画脚本,避免反复修改调试。大大降低了制作难度,提高了效率。
  • 低门槛的 弹簧骨配置系统,能让新手用户轻松配置出拥有丝滑动态效果的发丝、裙摆。

自定义 3D 场景助力创作

在 Persona 内可以轻易通过拖拉拽快速构建 3D 场景,结合虚拟角色,就可以搭建你心中理想的小世界!

  • 对于 游戏开发者,可以通过在 Persona 中搭建 3D 场景,便捷实现游戏场景的 原型设计,而后直接导出角色至本地工程。
  • 对于 虚拟UP主或虚拟IP运营方,可以将搭建的 3D 场景保存为直播间环境,使用内置的 直播模式在不同直播场景间随意切换,丰富直播互动体验。助力虚拟 IP 运营,丰富个人直播体验!
  • 对于 视觉内容创作者,可以摆设道具、控制人物姿势,布置视角;通过截图或录制功能快速输出分镜草稿;辅助动画、脚本故事创作。为作品添砖加瓦!

Cocos Meta SDK:简单易用的虚拟角色开发工具包

无需额外开发即可在项目中快速集成 3D 虚拟角色能力。不论您是希望进行商业应用开发,还是游戏开发,选择集成 Meta SDK 都将是一个更加便捷高效的开发方案。

减轻开发压力,专注内容本身

Cocos Meta SDK 搭载了包含捏脸换装、角色操控、表情动作播放、视觉面捕、口型驱动等高级虚拟角色功能。开发者无需重复开发这些通用能力,直接将精力放在内容创作与场景优化上,大幅提升开发效率。

同时,Cocos 是一个移动端优先的引擎,在移动端做了大量的技术优化,能在最小的算力范围内,达到最优的虚拟人效果,实现大多数低算力设备及操作系统的全面覆盖。

Persona+Meta SDK工具组合打法

由 Persona 创建角色资源,导出并接入 Meta SDK,即可轻松构建各类个性化工程。Persona Editor + Meta SDK 强强联合,基本构成了元宇宙虚拟社交、数字人商业营销、游戏开发所需的全套技术解决方案。过去只能想象的场景,现在都可以通过这套组合拳实现。

面向多样化需求,打造协同创作环境

Persona 编辑器及 Meta SDK 在设计上充分考虑了不同用户群体和应用场景的需求,提供了针对性功能,构建高效的协同创作环境。

  • 降低 3D 项目开发难度:无需编程知识,就能在 Persona 内预览和调试 3D 渲染效果及动画组合,不同种类的创作者可以各司其职高效协作。
  • 简化程序开发流程:Meta SDK 为程序员提供完整接口,可将精力集中在自己的开发领域,无需操心虚拟角色技术细节。
  • 支持多样化需求:Persona 和 Meta SDK 可用于游戏开发、商业应用、IP 短视频、VR/AR 等领域,满足不同用户的虚拟角色创作需求。

丰富多样的应用场景

  • 虚拟互动直播 - Persona 编辑器的实时捕捉功能可以精准还原角色的面部和动作表现,直播环境自由创作,一键轻松开启直播间。

  • 游戏、商业应用开发 - 通过 Cocos Meta SDK,开发者可以将 Persona 中的角色资产应用到游戏项目中,轻松实现交互式虚拟角色项目的开发。不论是小程序桌面游戏 、手机应用 还是 车载程序,集成虚拟角色都不再是一大难题。

  • IP 短视频 - Persona 对通用骨骼动画格式提供了全面支持,加上完全可自定义的 3D 场景,可以大幅缩减短视频内容的制作时间。不论是分镜草稿、短视频素材都能轻松拿捏。

  • VR/AR 应用 - 结合 Cocos CreatorXR 可以帮助开发者毫不费力地将虚拟角色集成到 VR/AR 游戏或者应用中。

内测活动说明:

本次测试开放时间为 2023 年 8 月 10 日 至 8 月 25 日 ,面向所有用户开放申请,无名额限制,审核通过后即可进行下载体验。

如何申请内测资格:

  1. 下载并登录  Cocos Dashboard

尚未注册 Cocos 账号的用户请先前往 Cocos 官网申请注册。

  1. 单击首页 Cocos Persona 标签页下的  【申请使用】 按键即可申请内测。请尽可能完整填写申请表单,能帮助您更快取得测试资格。请注意查收审核通知邮件;审核通过后您便可直接在 Cocos Dashboard 中安装并使用 Cocos Persona。
  2. 获取 Cocos Meta SDK:获得内测资格后,请进入  Cocos 商城 搜索并下载  Persona Plug-in 。在 Cocos Creator 内安装插件后即可下载 SDK 包体。
  3. 更多测试相关说明,请前往 Cocos 官网论坛查看,或添加下方内测交流群进行咨询。

Persona 内测交流群:

还在等什么? 来申请测试名额, 感受前所未有的创作体验吧!

点击【阅读原文】,可进入虚拟角色官网页面。

本文分享自微信公众号 - COCOS(CocosEngine)。
如有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一起分享。

展开阅读全文
加载中
点击引领话题📣 发布并加入讨论🔥
0 评论
0 收藏
0
分享
AI总结
返回顶部
顶部