Diffusion惊艳应用大赏
每天给你送来NLP技术干货！
文｜白鹡鸰
来自 | 夕小瑶的卖萌屋
自从Diffusion模型兴起之后，AI绘画圈又迎来了一波猪突猛进式的强化，早几年还只是Ins的二次元/迪士尼风格滤镜，让人穿上不同服装当接头霸王。现在，你随便输几句话，模型就能刷刷刷给你吐出一大堆精美的图来，画的比你好，风格多样化，还两分钟就交稿。
虽然用AI搞艺术已经进入了全民应用的时代，但很多人对这个强大的工具的使用方式却让我不由感叹想象力的匮乏。想想吧！我当着妈妈的面打开小蓝鸟搜索这期推送的素材，结果齐刷刷跳出了一大排雪白的胸脯！我妈看我的眼神当场就不对了！！！
那么，今天我们就来看看Diffusion模型还有哪些好玩实用的应用，一起欣赏下吧！
本期内容参考@daniel_eckler。
游戏/动画制作
三维动作生成
模型名为MDM, Human Motion Diffusion Model [2]，只要输入语言描述，就能让三维小人模型做出对应的动作，生成结果具有多样性，每个小人会有一定的动作差异。从demo可以看出，目前动作已经非常生动流畅了。
建模贴图
dream-textures，基于Stable Diffusion实现的开源项目，可以自动生成纹理，给模型贴图，可以作为Blender插件部署 [3]。
MineCraft转绘画
另一项基于Stable Diffusion实现的工作，目前未开源，但它的效果展示引发了我无限的遐想 [5]。如果MineCraft转现实风格的图片效果这么好，《三体》动画的开发是不是可以基于《我的三体》加快进程了？
增强现实与虚拟现实
虚空画图
Diffusion模型和GravitySketch的结合，原本GravitySketch的绘制效果非常简陋，但加上diffusion模型之后，图像生动了不止一点两点 [6]。
室内环境生成
还是基于Stable Diffusion的开源项目 [7]，能通过VR眼镜“扭曲”你周围的环境并基于一些参考图片进行再生成。老实说总体效果还是有些掉SAN，不过前途无量啊，想想以后在家里，带上VR瞬间变成凡尔赛宫，这不是很爽？
最佳应用
在大部分人还在用Diffusion捏脸、造原创角色、沉迷美色的时候，有些人的格局已经打开了。直接靠着目前为止漫威的动画、电影素材，把《蜘蛛侠·平行宇宙2》的预告片给造出来了。看到这个整活的时候我内心的震撼程度更甚于当年看到Jack Frost和Elsa、林黛玉和伏地魔的拉郎MV [8]。
结语
Diffusion模型的使用姿势目前为止还没有被完全开发，它的潜力很大程度上取决于人类想象力能有多么精彩。所以说，还请大家整活的时候含蓄一点，免得下次我又被逮个现行，百口莫辩跳进黄河洗不清了！
最后是题图里承诺的爆照时间——
没错，网络上，没有人知道小爷是一只电子鸟（图片由HuggingFace-Stable Diffusion生成 [9]）。
白鹡鸰（jí líng）是一种候鸟，浪形的飞翔轨迹使白鹡鸰在卖萌屋中时隐时现。已在上海交大栖息四年，进入了名为博士的换毛期。目前蹲在了驾驶决策的窝里一动不动，争取早日孵出几篇能对领域有贡献的论文～
知乎ID也是白鹡鸰，欢迎造访。
Diffusion惊艳应用大赏相关推荐
- Ai绘画工具有哪些？推荐这7款效果惊艳的AI绘画神器
2022虽然不是ai绘图这项技术诞生的时间,但却是到目前为止最爆火出圈的绘图元年. AI绘图(AI painting)就是以文生图(text2image),属于跨模态生成(Cross-modal ge ...
- 抖音、Tiktok危机！谷歌AI短视频生成模型，效果惊艳了
文 | 梦晨 Pine(发自凹非寺) 源 | 量子位 内容生成AI进入视频时代! Meta发布「用嘴做视频」仅一周,谷歌CEO劈柴哥接连派出两名选手上场竞争. 第一位Imagen Video与Meta ...
- 一文盘点最近特别火的 10 款惊艳的 AI 工具（附项目代码）
2023可以称得上是脑洞大开的一年!人工智能的风口由OpenAI的ChatGPT率先引爆. 今天,我们给大家推荐10款惊艳的AI工具,欢迎补充! ...
- 值得分享！它们才是真正的宝藏网站，让人惊艳
推荐7个非常不错的良心网站,可以解决大家很多问题,每一个都让人惊艳,喜欢的话记得点赞支持哦~ 1.搜图导航 搜图导航是一个非常强大的图片聚合和设计资源导航网站,提供一站式快速搜索图像服务.还有自定义导 ...
- GAN独领风骚！盘点2021最惊艳38篇AI论文
来源:新智元 [导读]2021年是人工智能继续突飞猛进的一年.近日,Github上有人总结出了今年最有趣.最惊艳的38篇关于AI和机器学习论文,值得收藏. 1.Zero-Shot Text-to-Im ...
- 全球首个AI女主播上岗了！太惊艳了！
来源:水木然 摘要:前不久,全球首个AI女主播诞生的消息走红网络!刚刚,这位AI女主播今天正式上岗了! 是不是非常惊艳? 如果不是专门解释,她极有可能被为是真人! 这位全球首个AI女主播的上岗,吸引了 ...
- 服！AI 让兵马俑“活”起来，颜值惊艳！
你曾想过,假如兵马俑会动起来会是怎样的? IT界网红UP主.频频上热搜"AI修复百年前老北京影像"作者大谷发表了炫酷作品"AI还原的秦代兵马俑,原来这么帅?人工智能让艺术 ...
- 三星笔记本又发新品，这一次仍然惊艳
在我们生活的时代,信息技术日新月异,科技产品目不暇接,生产与效率作为当前社会运行的基础,一直是不同产业共同关注的目标. 笔记本电脑作为承接这种需求的工业产品之一,代表着生活.工作.学习等需求的优化程度 ...
- 震惊！原来Android OpenGL ES可以这样用，实现 （水波纹）涟漪效果超惊艳！
用几行代码实现惊艳的特效. 作者:字节流动 链接:https://juejin.im/post/5ed9c9445188254344768bd6 水波纹效果原理 最近一个做视频滤镜的朋友,让我给他做一 ...
最新文章
- numpy使用[]语法索引二维numpy数组中指定行列位置的数值内容(access value at certain row and column in numpy array)
- javascript常用小例子
- ACM HDU 1249
- Python中的map()函数和reduce()函数的用法
- “白痴“上帝视角调节反序列化链之CC2
- 请求的站点不可用或找不到_80%的500强用企业微信，企业越来越找不到拒绝用它的理由...
- linux里查看所有用户和用户组
- jQuery源码分析研究学习笔记-jQuery.clean()（七）
- 使用电脑开发的，连个黑屏休眠都不会设置？
- nginx负载均衡核心模块(upstream和proxy模块)及常用参数介绍
- python随机森林回归_机器学习：Python实现随机森林回归
- 解决word文件另存为PDF时图片变模糊
- vi与vim的区别以及常用命令
- 公鸡5文钱一只，母鸡3文钱一只，小鸡3只一文钱， 用100文钱买一百只鸡,其中公鸡，母鸡，小鸡都必须要有，问公鸡，母鸡，小鸡要买多少只刚好凑足100文钱。
- 18-Halcon机器视觉实例入门：图像滤波-各向异性滤波
- 用ccs创建一个工程文件
- 将文本中的各个单词的字母顺序翻转（Java）
- tp路由服务器无响应,路由器无法PPPOE链接上网老显示服务器无响应
- Mybatis逆向工程同名表找错数据库的问题
- Adobe dreamweaver cs6 代码颜色配色方案
热门文章