AI Art Weekly | AI 艺术周刊 #17

文摘   科技   2024-02-26 06:30   北京  

欢迎大家踏入本期的《AI艺术周刊》。在这里,我们一起探索人工智能的最新进展和它如何重新定义艺术创作的边界。无论你是 AI 艺术的狂热爱好者,还是对这一领域充满好奇的新手,我们都将为你带来灵感的火花和实践中的深刻见解。让我们共同揭开 AI 艺术的神秘面纱,探索它的无限可能。
* 每周我需要花费大约 8-12 小时来整理这些周刊内容。如果你喜欢我的工作,不妨在下方赠我一杯咖啡,可以令我保持思绪清晰与热情不减 🙏

🌟 本期要闻

Stable Diffusion 3
https://stability.ai/news/stable-diffusion-3?ref=aiartweekly
上周,Stable Diffusion 3 进入了早期预览阶段。目前该模型还尚未开放,但早期预览的等待名单已经开启。据称,Stable Diffusion 3 在多主题提示、图像质量和拼写能力方面有了显著的性能提升。

注: Stable Diffusion 3 宣传海报

SDXL-Lightning:渐进式对抗扩散模型
https://fastsdxl.ai/?ref=aiartweekly

字节跳动找到了一种新的方法,仅通过几个步骤即能生成高质量的 1024px 图像,这一方法被称为 SDXL-Lightning。目前已在 fastsdxl.ai 上提供了相关演示。我们可以看出,无论出图质量还是出图速度都还是相当不错的~

注: SDXL-Lightning 示例

FiT:用于扩散模型的灵活视觉变换器

https://github.com/whlzy/FiT?ref=aiartweekly
众所周知,我们现在运用的扩散模型都是基于在正方形图像上训练的。而 FiT 是一种新的变换器架构,专为生成不受分辨率和纵横比限制的图像而设计(类似于 Sora 所做的)。这使得在训练和推理阶段都能灵活适应多样的纵横比,从而促进分辨率的泛化并消除由图像裁剪引入的偏差。
注: FiT 示例
Snap Video:用于文本到视频生成的扩散时空变换器

https://snap-research.github.io/snapvideo/?ref=aiartweekly

在 Sora 之后,跟进视频模型变得颇具挑战。但 Snap Video 确实引人注目!Snapchat 公司开发的这款模型解决了像素图像生成中的冗余问题,相比其他方法,生成的视频质量大大提高,时间连贴性和运动复杂度也有显著改善。与 FiT 相似,它也采用了一种新的变换器架构,在训练速度上比 U-Nets 快 3.31 倍,推理速度约快 4.5 倍。
注: Snap Video 示例
Binary Opacity Grids

https://binary-opacity-grid.github.io/?ref=aiartweekly

Binary Opacity Grids 是一种新的基于网格的视图合成方法,能够捕捉到精细的几何细节。生成的网格能够在移动设备上实时渲染,并与现有方法相比实现显著的质量提升。
注: Binary Opacity Grids 示例
Argus3D:提升自回归模型在 3D 形状生成的能力和可扩展性

https://argus-3d.github.io/?ref=aiartweekly

Argus3D 不仅能够从图像和文字提示中生成三维模型,还能为其创建的形状赋予独一无二的纹理。你可以想象一下,仅通过指向某个空间并用自然语言描述你希望放置的物体,就能构建并填充一个三维场景,是多么美好和令人期待的事情。
注: Argus3D 示例
FlashTex:利用 LightControlNet 实现的快速可重新照明的网格纹理化

https://flashtex.github.io/?ref=aiartweekly

Roblox 本周发布了 FlashTex。该方法可以根据用户提供的文本提示对输入的 3D 网格进行纹理化。这些生成的纹理可以在不同的照明环境下正确地重新照明。

注: FlashTex 示例

Visual Style Prompting:风格迁移

https://curryjung.github.io/VisualStylePrompt/?ref=aiartweekly

Visual Style Prompting 能够根据参考图像生成具有特定风格的图像。与 IP-Adapter 和 LoRAs 等其他方法相比,Visual Style Prompting 在保留参考图像风格的同时,更能避免文本提示中的风格渗透。

注: Visual Style Prompting 示例

 SCG:按规则音乐引导扩散模型

https://scg-rule-guided-music.github.io/?ref=aiartweekly

SCG 能够帮助音乐家作曲和即兴创作新的钢琴曲。它允许音乐家通过使用规则来指导音乐生成,比如遵循 C 大调中简单的 I-V 和弦进程。

注: SCG 示例

📰 其它动态
  • UniEdit:

    视频一致性编辑框架


    https://jianhongbai.github.io/UniEdit/?ref=aiartweekly

  • MVDiffusion++:

    3D 对象重建高分辨率多视图扩散模型


    https://mvdiffusion-plusplus.github.io/?ref=aiartweekly

  • Make a Cheap Scaling:

    一种扩散模型新优化方案,可有效提高生成效率降低成本


    https://guolanqing.github.io/Self-Cascade/?ref=aiartweekly

  • GaussianPro:

    带有渐进式传播的 3D 高斯喷涂技术


    https://kcheng1021.github.io/gaussianpro.github.io/?ref=aiartweekly


⚒️ 工具与教程:

J Mascis - 《Old Friends》
独立摇滚传奇人物 J Mascis 最近发布了一支完全由 AI 生成的音乐视频,这是否为我们提供了一个值得借鉴的例子呢?
https://www.youtube.com/watch?v=2ds7REMJR2c
如果你也对 Midjourney 或艺术设计感兴趣,那么欢迎加入我们的社群!在这里,我们可以一起探讨有趣的设计话题,共同探索 Midjourney 所带来的无限可能性!

注:如果你与我一样热衷于紧跟人工智能与设计的最新趋势,那么我强烈推荐你试用下我们精心打造的这款应用 — 设计原力。这款应用能够让你随时了解到最前沿的信息,让你的信息库始终保持最新状态
▲ 好了,以上这些就是本节的全部内容了 ~ 如果,你也对 AI 绘画感兴趣,不妨记得关注我!我们下期见!!

设计师的自我修行
创意— 并非要让人惊奇它崭新的形式和素材, 而是应让人惊异它源自最平凡的生活。
 最新文章