今年在@Simon的白日梦 那学习了超多AI知识,我觉得很有必要给大家梳理一下,关于人工智能内容生成(AIGC)的一切。
—— 以下内容均节选自@Simon的白日梦 的私人图书馆(知识星球,最近五折)
[浮云]
★AI创作工具
▲文字生成图像
● 目前最好用的、功能最全的 Stable diffusion colab 版
fast-stable-diffusion:http://t.cn/A6oKz6rt
● 目前速度最快的 DreamBooth stable diffusion colab版
(调整训练模型使用):http://t.cn/A6oqYQUg
● Imagic
使用文字描述,在保留原图片风格和内容的前提下对图片进行修改的工具: github.com/justinpinkney/stable-diffusion/blob/main/notebooks/imagic.ipynb
● stablediffusion-infinity
能够在colab上运行的无限画布版stable diffuison:http://t.cn/A6SugfUK
● robo-diffusion
专门生成机器人图像的stable diffusion版本:http://t.cn/A6o0PTZm
● material_stable_diffusion
基于stable diffusion生成无缝贴图的工具
github.com/TomMoore515/material_stable_diffusion
● Text2Light
使用文字生成HDR全景图的工具
http://t.cn/A6SeLRY9
▲文字生成视频
● Deforum_Stable_Diffusion
通过模拟镜头移动和深度估计,实现stable diffusion做动画生成的工具:http://t.cn/A6SSboqh
● stable-diffusion-studio
github.com/amotile/stable-diffusion-studio
一个聚焦于动画生成,界面类似于剪辑软件的stable diffusion定制UI
● make-a-video-pytorch
facebook AI视频生成算法,make-a-video的开源复现版,施工中,先占个坑。
github.com/lucidrains/make-a-video-pytorch
● ebsynth.com
一个将对视频的单帧修改传播到整个视频上的工具。已经有windows安装包可以用了。
http://t.cn/AiOXgbM3
▲文字生成3D模型
● dreamfields-3D
我基于dream fileds和dreamfields-torch开发的,利用clip+nerf,能够在colab上使用的文字生成带顶点色的三维模型工具:http://t.cn/A6SEsj6r
github.com/shengyu-meng/dreamfields-3D
● stable-dreamfusion
利用nerf+stable diffusion,同样实现类似文字到三维顶点色模型生成(从原理上来说应该比dreamfields-3D效果更好,但是目前代码还在不断迭代中):http://t.cn/A6o0PTZ3
github.com/ashawkey/stable-dreamfusion
● PureCLIPNeRF
使用clip+nerf生成体素模型的工具: github.com/hanhung/PureCLIPNeRF
● GET3D
基于GAN能够生成带高清贴图的3D模型的算法(但是要基于同一类的3D数据转2D图片后训练):nv-tlabs.github.io/GET3D/
● CLIP-Mesh
使用CLIP去deform原有模型文件并加上贴图的新算法: github.com/NasirKhalid24/CLIP-Mesh
● MDM
利用扩散模型~根据文字直接驱动人体三维模型做相应的动作!
guytevet.github.io/mdm-page/
▲Prompt engineering (引导词构造)
● Prompt Parrot!
prompt 鹦鹉永动机。根据给出的prompt自动训练NLP模型生成更多的prompts:http://t.cn/A6o0PTZ1
● krea.ai
一个收集了千万级AI生成的图片、文字对的索引网站:http://t.cn/A6SpBjmg
● publicprompts
一个精品prompt案例网站:http://t.cn/A6oSasq7
● CLIP Interrogator
一个能够反向从图片中提取文字信息的AI,网页试玩:http://t.cn/A6oNFGiX
▲资源和工具合集
● AI Library
搜索超过450个热门的AI工具及模型:http://t.cn/A6alUYEj
● pollinations.ai
类似 AI Library的AI模型、资源、论文搜索工具。http://t.cn/A6o0PTZn
● Image Synth Link List,一个关于AI内容生成的一切:http://t.cn/A6o0PTZu
● Paper2GUI:一款面向普通人的AI桌面APP工具箱,免安装即开即用,已支持20+AI模型: github.com/Baiyuetribe/paper2gui
[浮云]
★AI学习教程
● AI art course
一个开源AI课程;由一系列notebook组成,案例可以直接运行,可玩性很高~!
github.com/johnowhitaker/aiaiart
● MIT 6.S192
MIT提供的深度学习、艺术、美学、创造力综合课程
ali-design.github.io/deepcreativity/
● Awesome Computer Vision
一个关于计算机视觉/computer vision的算法、数据、论文、软件、模型等一切的大合集!: github.com/jbhuang0604/awesome-computer-vision
● The Illustrated Stable Diffusion
一个使用图形化语言讲解SD原理的干货教程!:jalammar.github.io/illustrated-stable-diffusion/
● 深度学习经典 - 花书的讲解和复现
github.com/MingchaoZhu/DeepLearning
● Modelverse
一个专注于搜索AI模型的搜索引擎:http://t.cn/A6oG7At8
[浮云]
▶ 知 识 星 球:AI白日梦想家
▶ 限时限量5折链接:见评论(不知道为啥链接失效)
▶ 会员权益:
● 现有近500条最近3个月的AI工具\代码\论文、设计、参数建模、生物、艺术相关资源收藏;
● 每周更新(具体内容可参考图9标签);
● 72小时内无条件一键退款;
● 还可以向@Simon的白日梦 提问;(我个人觉得最值的一条)
#AI绘画#
