自动生成数字人?!输入文本即可驱动生成 3D 数字人化身和动画 #AvatarCLIP

Mix Lab味知实验室

共 712字,需浏览 2分钟

 · 2022-05-22

ML1680

希望社区有一篇 AI 工具的整理,尤其是开源、有接口的,包括 AI 写作AI 作曲AI 辅助数字人制作等等......

Mixlab

安排,我们将持续积累 AI 的创作工具与方法~

知识库

本期推荐 # AvatarCLIP  模型,一个用于 3D 头像生成和动画的文本驱动框架。



AvatarCLIP


该模型可根据文字描述身体形状外观动作来生成3D人物和动画,使非专业出身的用户能够自定义3D 化身的形状和纹理 。

小杜

使用该模型生成的结果非常有意思,比如 “举起双臂的瘦削忍者” ,“坐着的超重的相扑选手”等等。

# 生成结果
输入文字:举起双臂的瘦削忍者

输入文字:坐着的超重的相扑选手

输入文字:一个很瘦的将军,正在吃汉堡包。

输入文字:一个身材高大的 姚明正在投篮。

小杜

我们可以体验,在 colab 中即可生成数字人运动模型。

colab 数字人生成渲染结果

小杜

项目网站中展示了丰富的人物3D模型加载库,创作者可以运用生成的数字人3D模型尝试多种应用可能~

该项目展示的选择加载的模型库

选择生成模型下载 FBX 格式后即可导入blender、Unity中 或上传至 Mixamo(拥有丰富的运动库) 中进行创作。

开源代码地址:
github.com/hongfz16/AvatarCLIP
项目地址:
hongfz16.github.io/projects/AvatarCLIP.html

opus

欢迎加入社群,探索 数字人 的多样玩法~


备注:数字人

[ 元宇宙创作者指南 ] 
[ 元宇宙资源清单 ]
github.com/shadowcz007/awesome-metaverse

浏览 111
点赞
评论
收藏
分享

手机扫一扫分享

举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

举报