与人工智能一起创作原来这么简单!AI开启无限可能 #Pollinations.ai 平台

Mix Lab味知实验室

共 1259字,需浏览 3分钟

 · 2022-05-14

Mixlab

社区长期关注运用人工智能技术生成多种信息形式的实战运用,产出了许多丰富有趣的项目。近期产出有音频音乐智能生成、文本转图像、文本转视频智能生成等等相关项目与推文。

# 人工智能音乐 & 声音合成

虚拟邓丽君,歌声合成真的可以如此逼真吗?数字人技术系列



苹果收购AI音乐公司,音乐人工智能将迎来新机遇?



运用 MagentaStudio,基于深度学习生成音乐


文本生成图像 & 视频

运用 Disco Diffusion 文本生成图像

MixDAO 数字人DAO 项目组成员 @alanhzh 运用 DD + 设计工具 结合的方法进行的 “蘑菇主题” 创作产出


DD AI 艺术-无限空间·洞口


文本生成语音视频播报

小杜

目前常用的信息传播形式有文本、图片、语音与视频这四类。@知识库 有一个综合集成了这些信息之间智能转换生成的平台吗?可以提供给创作者多种AI生成的工具?

知识库

Pollinations.ai 平台集成了多个谷歌 Colab 算法模型,可以作为对AI 生成式创作感兴趣人群的工具库。



Pollinations.ai 


Pollinations 是人工智能生成媒体信息的平台,包括文本、图片、语音与视频等常见媒体信息形式,旨在促进人类多种形式表达的创建和转化。

小杜

Pollinations.ai 目前集成了文字转图像、文字转视频、音频转视频、视频转音频、音频转音频、图像转图像、视频转视频、文本转文本、图像转视频等 AI 生成模型。平台中每个模型都有基本的适用情景介绍,可以单独使用其中一个模型,也可选择多种模型组合使用,是 AI 生成艺术创作者的工具宝库。


音频转视频、视频转音频、音频转音频、视频转视频社群项目所涉猎较少,我去看看平台上的模型有多惊艳,其它媒体形式转换模型也可登入平台多多尝试~

#01 音频转视频-
Lucid Sonic Dreams 

Lucid Sonic Dreams 从音频文件生成音乐视频 - 视频随着每个声音移动,并通过 StyleGAN 产生抽象艺术。

小杜

Pollinations.ai 平台可跳转至 colab 运行算法,在平台中打开会提供关键参数的控制效果教程



#02 视频音频-
SpecVQGAN 

小杜

SpecVQGAN 支持将视频转换成与之对应的音频信息
打鼓视频转音频


#03 音频音频-
D3Net 音乐分配器 

可用于分离任何歌曲的人声、伴奏、贝司和鼓的音轨

小杜

目前该模型有DEMO版的Web端应用

jeffreyca.github.io/spleeter-web/#


#04 视频转视频-
RIFE Video Interpolation 

该模型可将低帧率的断断续续的视频转换为高帧率的平滑视频。

平台地址:
pollinations.ai

opus

欢迎加入社群,参与 AI创作 项目实战~


备注:AI 创作

[ 元宇宙创作者指南 ] 
[ 元宇宙资源清单 ]
github.com/shadowcz007/awesome-metaverse


浏览 46
点赞
评论
收藏
分享

手机扫一扫分享

举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

举报