🌟 本期要闻：
https://blackforestlabs.ai/announcing-black-forest-labs/?ref=aiartweekly |
Black Forest Labs 是一家由 Andreessen Horowitz 投资的新兴生成式 AI 公司，近日宣布推出其 FLUX.1 文本生成图像模型套件。以下是其关键亮点：
FLUX.1 采用多模态和并行扩散变压器块的混合架构
模型参数扩展至 120 亿
融合了流匹配、旋转位置嵌入和并行注意力层
推出了三个变体：FLUX.1 [pro]、FLUX.1 [dev] 和 FLUX.1 [schnell]
支持从 0.1 到 2.0 兆像素的多种纵横比和分辨率
BTL 称 FLUX.1 在图像合成领域树立了新的标杆，尤其是在视觉质量、提示符合性和输出多样性方面表现突出。FLUX.1 [dev] 和 [schnell] 变体是开放权重模型，分别可用于非商业和个人用途，而 FLUX.1 [pro] 则通过 Replicate、fal.ai 或其自有 API 提供商业应用的 API 访问
https://huggingface.co/black-forest-labs/FLUX.1-schnell?ref=aiartweekly |
Midjourney v6.1 发布
增强了图像的连贯性，特别是在解剖特征和有机主体方面 通过减少伪影和增强纹理，提高了图像质量 提高了小图像细节的精确度 新的放大器提升了纹理质量（非常称赞的效果 ！！） 标准图像处理速度提高了约 25% 在提示中使用“引号”时，文本渲染的准确性得到了增强 更新的个性化模型具有更好的细微差别和准确性 引入了个性化代码版本控制 新的 --q 2 模式，提供更丰富的纹理，但连贯性略有降低
https://stability.ai/news/introducing-stable-fast-3d?ref=aiartweekly |
从单张输入图像生成 3D 资产，仅需 0.5 秒 生成 UV 展开网格、材质参数和反照率颜色 可选四边形或三角形重建（增加 100-200 毫秒的处理时间） 可在 7GB VRAM 的 GPU 上运行或通过 Stability AI API 运行
该模型性能优于之前版本，将推理时间从 10 分钟（SV3D）缩短至 0.5 秒，同时保持输出质量。设计旨在用于游戏、虚拟现实、零售、建筑和设计中的快速原型制作。权重和代码可在 Hugging Face 和 GitHub 上找到，并提供 Hugging Face 演示
https://sam2.metademolab.com/?ref=aiartweekly |
视频和图像的统一分割 视频帧中交互式对象选择和跟踪 实时处理和流式推理 在陌生内容上的强大零样本表现
SAM 2 在对象分割任务中表现优于现有模型，尤其是在对象部件的跟踪上。与其他交互式视频分割方法相比，它需要更少的交互时间。该模型的架构包括一个每次会话的内存模块，能够在对象暂时消失时继续跟踪。模型的权重和代码已开源，并发布了一个交互式网页演示，供用户试用该模型
https://github.com/facebookresearch/segment-anything-2?ref=aiartweekly |
https://mks0601.github.io/ExAvatar/?ref=aiartweekly |
https://pku-yuangroup.github.io/Cycle3D/?ref=aiartweekly |
注: Cycle3D 示例
| https://cs.yale.edu/homes/che/projects/perm/?ref=aiartweekly |
注: Perm 示例
| https://objectcarver.github.io/?ref=aiartweekly |
注: ObjectCarver 示例
https://github.com/agnJason/XHand?ref=aiartweekly |
注: XHand 示例
| https://github.com/adventurer-w/ClickDiff?ref=aiartweekly |
注: ClickDiff 示例
| https://zju3dv.github.io/nis_slam/?ref=aiartweekly |
注 : NIS-SLAM 示例
https://shahrukhathar.github.io/2024/07/22/Bridging.html?ref=aiartweekly |
注: Bridging the Gap 示例
https://lightchaserx.github.io/matting-by-generation/?ref=aiartweekly |
注: Matting by Generation 示例
| https://yunzeman.github.io/ORG/?ref=aiartweekly |
注: ORG 示例
| https://ali-videoai.github.io/tora_video/?ref=aiartweekly |
注: Tora 示例
| https://yulu.net.cn/freelong/?ref=aiartweekly |
注: FreeLong 示例
