更新记录:
- v0.1 2022.10.15
- v0.2 2022.11.22
专栏链接： https://xiaobot.net/post/7aa026e7-b23a-4d2f-84d3-0b0840688099
旅行者，欢迎光临，小二有礼了。
这是一个可以探索的茶馆，我会不定期的把AIGC相关的应用都分类更新到下面。有感兴趣的项目，旅行者可先自行了解和试用，后面我会挑几个应用重点分析。
AIGC 应用目录
文本生成
AI写诗
- 九歌——人工智能诗歌写作系统 清华NLP组出品
- 小冰现代诗歌创作系统 微软小冰出品
- 自动对对联 王斌老师作品
AI写作
- copy.ai 自动文案生成
- jasper.ai 文案辅助生产
- AI Book Writing with GPT3 & Dalle-mini 使用GPT3和Dalle生成书
- GALACTICA 科研方向的语言模型
AI影视创作
- 故事与分镜生成工具 结合 GPT-3 和 Stable Diffusion，搭建在Google Sheet上的故事与分镜生成工具。只需要录入一句话即可自动完成所有内容生成
音频生成
- OpenAI Whisper 可以将音频中的语言信息转换为文字，不只是翻译，此项目是开源的
- AudioGen 根据文本生成音频
- Mubert AI生成音乐
AI辅助工作
- www.adept.ai 可以通过自然语言操作搜索，也可以操作表格
AI代码生成：
图像生成
AI画画
- Midjourney 目前效果最好的生成器，还以社区运营最早出名
- stable diffusion Stability.ai发布的开源版本扩散模型，目前很多工具都是基于此版本
- Imagen Google，文本生成画
- DreamFusion Google，文本生成3D图像
- Magic3D 文本生成3D模型
Prompts Engineering
每个平台的Prompts其实不太一样，需要学习
- https://lexica.art/ 图像生成的搜索引擎，可以得到Prompts继续优化
- https://labs.openai.com/collection OpenAI自己家的collection，也有Prompts
- PromptsBase Prompts市场
- AI自动生成prompt论文
- Stable Diffusion Prompt Book
AI辅助设计
- Artbreed 可以通过Prompts+图像指导AI创作，从而获得更可控的结果
- Figma **Ando AI插件** 使用提示词生成渲染及变体
- getalpaca 自动图像生成和补全
- Novel AI 生成二次元漫画，质量很高。目前他们模型已经泄露，网上很多工具基于他们的偶像
- AI Render Blender的Stable Diffusion插件
- carefree-creator 开源AI创作工具
视频生成
视频生成
- https://makeavideo.studio MetaAI的Make-a-Video视频生成。可以输入参考视频，模型输出相关变体视频
- https://imagen.research.google/video/ Google的Imagen视频生成版本
- Runwayml.com 辅助视频制作，效果很强
- phenaki.video 随时间变化的文本生成视频
- InfiniteNature-Zero: 从一张照片生成3D航拍视频
动画生成
- 3D动画算法制作 和大模型类似，就是去掉一部分帧，然后利用模型来补充帧
- Stablediffusion2puppet
游戏生成
- 音频驱动手势生成 英伟达的 Audio2gesture，目前是驱动虚拟人
- 文本驱动动作生成 文本生成动作，还有MotionDiffuse，SPACEx英伟达最新的论文，驱动嘴型，表情和头部运动
- Game-as-neural-network 游戏即神经网络的实验性Demo
- GameGAN
AIGC 模型目录
GPT3：OpenAI的语言模型
- GPT3 demo 提供300多个GPT3 demo的搜索
Dall·e&Dall·e2：OpenAI的text2img模型
官网：https://openai.com/dall-e-2/
- dalle-mini huggingface托管的mini版本，效果不太好
- craiyon Dalle开源版本
Diffuse Model： 扩散模型
stable-diffusion
官网： https://github.com/CompVis/stable-diffusion
微调模型demo：https://huggingface.co/spaces?sort=likes&search=stable-diffusion
优化：
- Diffusion预训练成本降低6.5倍，微调硬件成本降低7倍**！**mp.weixin.qq.com
Dreambooth
官网：https://dreambooth.github.io/
Disco-Diffusion
官方：https://github.com/alembics/disco-diffusion
Pxiaoer's Blog 