Creator AIGC插件!一句话生成人脸

2024-01-21

近几个月以来,AIGC 一路高歌猛进,让我们见证了一场行业革命。

然而 AIGC 在 3D 资产领域却仍是业内的难题,少有突破。

小编今天给大家推荐一个 3D 角色 AIGC 利器 ChatAvatar 。它可以算是 3D AIGC 领域的一匹黑马,走在了领域的前沿。

ChatAvatar 团队为 Cocos Creator 制作了专门的插件,目前已经上线 Cocos Store,开发者们可以免费获取。

72bc3df12beec9d44dbbdc049ea86c3f.png

ChatAvatar Import Tool 插件实现一键导入 ChatAvatar 数字人资产包的功能,如:

  • 模型导入

  • 材质导入

  • 贴图资产导入

  • 资产设置

使用该插件可以简单快捷将 ChatAvatar 3D 数字人资产导入引擎场景并投入使用。

871de89fc136652db4cf2d7aaf932820.png

关于 ChatAvatar

ChatAvatar 由影眸科技提供。

影眸科技孵化于上海科技大学MARS实验室,成立后已获得奇绩创坛与红杉种子的两轮投资。

通过与国内顶尖人工智能、计算机视觉实验室合作,积极推动尖端实验室科研成果的民用化、商业化,探索前沿人工智能、计算机视觉技术在大众娱乐市场的推广应用。

2021年,AIGC 还未掀起巨浪之时,公司就已经推出国内首个 AIGC ToC 绘画应用 Wand ,产品一度登顶 AppStore 分区榜首。

此次登陆 Cocos 商店 的 ChatAvatar 角色生成平台是影眸科技凭借团队在生成式 AI 领域多年的技术积累,使用创造性的方案将自有的 PFA(Production-ready Facial Assets) 数据集与 diffusion 技术相结合,做到了以自然语言文本为输入,生成符合 CG 行业制作标准的3D人脸模型与PBR材质。

ChatAvatar 也是首个能够完成产品级 3D 资产生成的 AI 算法框架,也是影眸科技在 AIGC 新赛道上的又一次重大突破。

在 Cocos 中使用 ChatAvatar

我们可以在 Cocos Creator 中引入 ChatAvatar 生成好的角色素材,并支持 Cocos 默认的 PBR 材质。

8fe29197bbfc9cd69bf76cddeb0c30e2.png

具体步骤可以参考这个视频:

快速开始

  • 点击编辑器菜单的“文件 -> 导入 ChatAvatar 资源”,在打开的面板上点击 Import 按钮,载入zip包。

f19455b12f288a83869b236af2893c50.png
  • 根据需求选择需要导入的内容,再点击确定即可。

939d70318dbbfded7dddc1823c5e10e6.png
  • 导入成功会在项目下的 chat-avatar-import/ 目录下生成导入的资源,其中 textures、metarials、Animation 和 sources 是一些公共的材质贴图、预览动画以及控制脚本和资源,项目内一份即可,默认会导入到此处,请尽量不要调整公共贴图的位置避免重复导入造成包体增大。

e0f29a421be779b130d553f8538c53c5.png

身体控制

  • ChatAvatar Import Tool 提供了基础的身体控制脚本与动画文件,ChatAvatar 数字人资产可以生成具有骨骼的身体模型。

  • 将模型文件中的 additional_body 模型文件拖入场景中,并将 chat-avatar-importer/sources/ 中的预置节点 IK、LookAt 添加至 additional_body 节点。同时将 chat-avatar-importer/sources/Canvas 添加至场景中。

e0ffc5bfbb4c9619bf138650951e4c2a.png
  • 点击 additional_body 节点并添加如下组件。

c5d91c4e0f45dafa3293ab66daab2564.png
  • 点击 Main Camera 并为其添加 chat-avatar-importer/sources/Camera/FollowCamera.ts 组件。

  • FollowCamera.target 设置为 additional_body 节点中的 LookAt 节点。

9e7aeed962b44a75f40e879a400141d6.png
  • 点击 Canvas 节点, FollowCameraInput.Camera 设置为 Main Camera。

805622177ccfea1da3c9c59b90186f10.png

设置完毕,此时即可运行场景并控制角色移动。

面部控制

ChatAvatar 还支持 Blendshape。

Blendshape 的控制脚本可以从 Cocos 官方的模块展示集合中获得 (https://docs.cocos.com/creator/manual/zh/cases-and-tutorials/)

f1d4b0d4fd4d7b9fe1068e4b065adb60.gif

总结

以上就是 ChatAvatar 的主要功能,更多功能就留给开发者们自己去探索咯。

希望开发者们在 ChatAvatar 的加持下,能够更高效、更便捷、更低成本地生产 3D 角色资产,提升自己的游戏产品品质。

点击 【阅读原文】 即可进入 Cocos Store 商品页面,免费获取 ChatAvatar。

推荐阅读

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

Creator AIGC插件!一句话生成人脸 的相关文章

  • AI绘画StableDiffusion美女实操教程:斗破苍穹-小医仙-天毒女(附高清图下载)

    小医仙 是天蚕土豆所著玄幻小说 斗破苍穹 1 及其衍生作品中的角色 身负厄难毒体 食毒修炼 万毒不侵 通体毒气 这种会无意识地杀死别人的体质让天性善良的小医仙成为人憎鬼厌的天毒女 在萧炎多次帮助下得以控制 出图效果展示 资源整合 今天我们就
  • 【大模型】开源大模型汇总以及微调策略

    目录 前言 LLaMA stanford Alpaca Guanaco Vicuna Chinese LLaMA Alpaca Chinese Vicuna Luotuo Chinese Falcon OpenBuddy Falcon Ch
  • 评测:对接GPT-4的NewBing使用体验变化

    GPT 4是OpenAI发布的最新一代语言模型 于2023年3月14日正式发布 并通过API和ChatGPT Plus平台向用户开放 微软也证实 在GPT 4正式发布之前 就已经在部分版本的Bing中使用GPT 4技术 本文旨在对使用GPT
  • 图文详解GPT-4最强对手Claude2的使用方法

    大家好 我是herosunly 985院校硕士毕业 现担任算法研究员一职 热衷于机器学习算法研究与应用 曾获得阿里云天池比赛第一名 CCF比赛第二名 科大讯飞比赛第三名 拥有多项发明专利 对机器学习和深度学习拥有自己独到的见解 曾经辅导过若
  • 【多模态】3、CLIP

    文章目录 一 背景 二 方法 2 1 使用自然语言来监督训练 2 2 建立一个超大数据集 2 3 选择预训练的方式 对比学习而非预测学习 2 4 模型缩放和选择 三 效果 四 思考 论文 Learning Transferable Visu
  • 3月29日!中国AIGC产业峰会最新议程&嘉宾名单公布!

    组委会 发自 凹非寺量子位 公众号 QbitAI 这是信息量爆炸的一周 AIGC相关的新讯息持续涌现 不断冲击我们对人工智能的认知 ChatGPT Midjourney Phenaki等一系列颠覆性的AIGC产品 正在改变我们的日常生活 人
  • 应用场域的深度融合与创新构想

    近年来 随着人工智能技术的迅速发展 自然语言处理技术也取得了显著的进步 其中 ChatGPT作为一种高效的自然语言处理模型 已经在许多领域得到了广泛的应用 本文主要围绕ChatGPT的调研分析以及其与应用场域的结合构想展开讨论 一 Chat
  • 聊聊机器如何“写“好广告文案?

    作者 张超 除非你的广告建立在伟大的创意之上 否则它就像夜航的船 不为人所注意 大卫 奥格威 现代广告业奠基人 01 引子 创意作为一种信息载体 将广告主的营销内容呈现给用户 辅助用户消费决策 乃至激发潜在需求 通常 创意可表现为文本 图片
  • 100位特邀用户亲测GPT-4

    在首期Beezy4 0体验官优秀案例集中 部分用户展示了GPT 3 5和GPT 4 0在小红书文案 创意脚本生成上的应用对比 今天我们将选取其中的典型案例进行分析 看一下GPT 3 5和GPT 4 0在文案写作领域的表现有何不同 优秀案例
  • 招募 AIGC 训练营助教 @上海

    诚挚邀请对社区活动感兴趣的你 成为我们近期开展的训练营助教 与我们共同开启这场创新之旅 助教需要参与 协助策划和组织训练营活动 协助招募和筛选学员 协助制定训练营的宣传方案 负责协调和组织各项活动 助教可获得 AIGC知识库 获得社区提供的
  • 前沿探索|关于 AIGC 的「幻觉/梦游」问题

    AI语言模型的梦游是指模型产生内容与真实世界不符或者是毫无意义的情况 这种情况主要是由于语言模型缺乏真实世界的知识和语言的含义 导致模型难以理解和表达现实世界的概念和信息 这种情况在现代自然语言处理中普遍存在 尤其是在开放式生成领域的问题中
  • AIGC驱动产品开发创新,改变你所知的一切!

    你是否想过 3000年后的饮料是什么味道 9月12日 可口可乐全球创意平台 乐创无界 再度推出全新限定产品 首款联合人工智能 AI 打造的无糖可口可乐 未来3000年 从口味研发到包装设计都体现了AI的深度参与打造 Y3000与AI共创这一
  • 大模型开发:从数据挖掘到智能应用

    在当今的数字化时代 数据的生成和处理已经成为一项重要的战略任务 随着大数据技术的发展 企业 组织以及个人对海量数据的需求越来越大 这也就催生了数据挖掘算法模型开发的快速发展 数据挖掘算法模型开发是一种从大量数据中提取有价值信息的过程 这些信
  • 人工智能AI工具汇总(AIGC ChatGPT时代个体崛起)

    Name Category Website Description 描述 AIGC时代 超级个体的崛起 小报童 https xiaobot net p SuperIndividual 介绍AIGC ChatGPT 使用技巧与搞钱方式 Mas
  • 美创科技发布“韧性”数据安全防护体系框架

    4月13日 美创科技数据安全产品架构升级发布会顺利举办 会上 美创重磅发布 韧性 数据安全防护体系框架 全新数据安全框架 以 资产 为中心 由内而外 以 看见 基石 旨在通过构建 弹性和韧性 可见性 适应性进化 的数据安全防护能力 帮助用户
  • AIGC之Stable Diffusion 提示词学徒库

    前言 描述 本文主要用来记录 提示词TAG 一 提示词 1 提升画面品质的提示词 masterpiece 杰作 best quality 最佳品质 ultra highers 超高分辨率 8k resolution 8k分辨率 realis
  • 清华大学AIGC发展研究报告1.0版震撼发布!192页PPT

    来源 清元宇宙 人工智能无疑是2023年最受关注的科技热点 作为将会掀起人类再一次生产力革命的重大技术突破 人工智能受到了全球范围内各领域人士的高度关注 近日 清华大学沈阳教授团队发布了 AIGC发展研究报告1 0版 总计192页 分为技术
  • 文字图像转换的创新技术

    随着科技的快速发展 人工智能 AI 已经逐渐融入我们的日常生活 而 生成式 AI 更是引领着 AI 领域的新一轮革命 生成式 AI 是一种能够从文字描述中提取信息 并将其转化为图像或其他形式内容的技术 如今 这种技术正在逐渐改变我们与计算机
  • ChatGPT发布一年后,搜索引擎的日子还好吗?

    导读 生成式AI 搜索引擎的终结者还是进化加速器 ChatGPT发布刚刚一年 互联网世界已经换了人间 2023年 以ChatGPT和大模型为代表的生成式AI浪潮对全球互联网 云计算 人工智能领域都带来巨大冲击 而且生成式AI在各行各业的应用
  • 2023年度盘点:AIGC、AGI、GhatGPT、人工智能大模型必读书单

    文末送书 今天推荐几本AIGC AGI GhatGPT 人工智能大模型领域优质书籍 前言 2023年是人工智能大语言模型大爆发的一年 一些概念和英文缩写也在这一年里集中出现 很容易混淆 甚至把人搞懵 LLM Large Language M

随机推荐