Align Your Steps:低步数推理保持高质量结果 适用于SD 1.5和SDXL

行情 | 2024-04-26| 12
Align Your Steps:低步数推理保持高质量结果 适用于SD 1.5和SDXL

划重点:

- 通过优化采样计划提升生成模型效率和质量

- 可适用于多种数据合成基准测试,包括图像、视频等

- 用户友好的插拔式优化计划应用,提升生成过程中的稳定性和质量

站长之家(ChinaZ.com)4月26日 消息:在深度学习领域,扩散模型(DMs)作为生成建模的前沿方法已经得到广泛应用。然而,DMs 的一个关键缺点是其较慢的采样速度,这主要是由于需要通过大型神经网络进行多次顺序函数评估。

本文提出了一种名为 “步调齐整(Align Your Steps)” 的全新方法,旨在为 DMs 优化采样计划,从而实现高质量输出。该技术适用于SD1.5和SDXL,低步数的同时保持高质量结果。通过利用随机微积分方法,针对不同的求解器、训练的 DMs 和数据集找到最佳的采样计划。在多个图像、视频以及二维数据合成基准测试中,优化计划几乎在所有实验中优于先前手工制定的计划。这一方法展示了采样计划优化的潜力,特别是在少步骤合成领域。

通过严格的定量实验,发现优化计划在标准图像生成基准测试中显著提升图像质量,无论使用哪种流行的采样器都能得到一致的改进。此外,研究还针对文本到图像模型进行了用户研究,结果显示使用优化计划生成的图像更受欢迎。

下面展示了一些文本到图像的例子,对比展示了使用优化计划与实践中使用的两种最流行计划(EDM 和 Time-Uniform)的效果。

此外,在视频生成方面进行了研究,发现使用优化计划可以在视频生成过程中产生更加稳定的视频,减少随时间推移的颜色失真。

产品入口:https://top.aibase.com/tool/align-your-steps

在线colab:https://colab.research.google.com/drive/1cIwbbO4HRP1aUQ8WcbQBaT8p3868k7BC?usp=sharing

适用于SDXL的ComfyUI工作流:https://openart.ai/workflows/KrmAPmuIWMzztrE7Qkrc

标签:, ,

相关推荐相关推荐

远距出游受追捧!滴滴发布五一出行报告:跨城打车需求上涨99%

远距出游受追捧!滴滴发布五一出行报告:跨城打车需求上涨99%

快科技5月6日消息,滴滴官方近日公布了五一假期的出行报告,详细梳理了假期的出行情况。

行情 9 2024-05-06
索尼Xperia 1 VI真机亮相:骁龙8 Gen3加持

索尼Xperia 1 VI真机亮相:骁龙8 Gen3加持

据官方此前宣布,索尼将于5月17日举办Xperia新品发布会。虽然官方尚未透露具体的机型,但考虑到去年发布的Xperia 1 V,因此今年的活动很有可能推出新一代Xperia 1 VI。近日有外媒发布了该机的高清渲染图。

行情 4 2024-05-06
微软发布AI天气预测模型 能精准预报未来30天天气

微软发布AI天气预测模型 能精准预报未来30天天气

站长之家(ChinaZ.com)5月6日 消息:微软Start团队近日宣布,他们开发出了一种全新的数据驱动AI天气预测模型,该模型能够准确预测未来30天的天气情况。这一研究成果不仅在预报准确率上取得了显著提升,同时在计算效率上也实现了巨大突破。

行情 9 2024-05-06
高铁上2女子因遮光帘拉扯40分钟 12306回应

高铁上2女子因遮光帘拉扯40分钟 12306回应

快科技5月6日消息,近期在一列从合肥开往太原的G3136高铁列车上发生了一起令人哑然的事件。

行情 2 2024-05-06
“玩”出百万粉丝,抖音小游戏成创作者新风口?

“玩”出百万粉丝,抖音小游戏成创作者新风口?

你是否在刷抖音时刷到过类似的短视频:不算精致的游戏画面中坐着一位小姐姐,她面前摆放了一大盆米饭,周围还散布着各种各样的“小摆件”,屏幕上的标题是《如何让小姐姐吃饱饭》?

行情 2 2024-05-06
Al加码,引爆“躺平式”旅游

Al加码,引爆“躺平式”旅游

今年的五一,“微度假”“微旅行”纷纷出圈。 相较于三亚、云南等老牌旅游大热门,人们开始寻找一些不用“人挤人”的小众旅行目的地:数据显示,更多游客愿意来到小城市旅游。根据在线旅游平台数据,今年“五一”假期,县域市场酒店预订订单同比增长68%,景区门票 ...

行情 3 2024-05-06
实时语音变换器Supertone Shift 可将实时变化直播说话声音

实时语音变换器Supertone Shift 可将实时变化直播说话声音

5月6日 消息:Supertone Shift是一款创新的实时语音变换技术产品,它允许用户即时切换到任选的声音,为虚拟主播(VTubers)、内容创作者、游戏玩家以及希望准确表达角色声音的用户提供了强大的支持。

行情 2 2024-05-06
特斯拉人形机器人擎天柱进厂打工 可精准分装电池

特斯拉人形机器人擎天柱进厂打工 可精准分装电池

站长之家(ChinaZ.com)5月6日 消息:最近,特斯拉发布了关于其最新人形机器人擎天柱Optimus的最新进展视频,这段视频凸显了Optimus在分拣电池、自主行走以及执行工厂任务等多方面的能力。

行情 5 2024-05-06
德系豪华品牌开始发力!奥迪推出限时政策:置换至高补贴4.2万元

德系豪华品牌开始发力!奥迪推出限时政策:置换至高补贴4.2万元

快科技5月6日消息,我们从奥迪官方获悉,奥迪官方认证二手车迎来20周年庆典,特别推出了五大专属礼遇,涵盖评估、置换、会员、延保和翻新等服务。

行情 3 2024-05-06
特斯拉机器人进厂打工,马斯克:手的自由度今年将达到22个!

特斯拉机器人进厂打工,马斯克:手的自由度今年将达到22个!

特斯拉机器人Optimus最新视频出炉,已经可以在厂子里打工了。 正常速度下,它分拣电池(特斯拉的4680电池)是这样的: 官方还放出了20倍速下的样子——在小小的“工位”上,拣啊拣啊拣: 这次放出的视频亮点之一在于Optimus在厂子里完成这项工作,是完全自主的 ...

行情 4 2024-05-06
拼命投流拼命爽:疯狂引流私域的茶叶到底怎么挣钱?

拼命投流拼命爽:疯狂引流私域的茶叶到底怎么挣钱?

一些茶叶销售团队正在激进地投流并引流至私域。来自平台的数据显示,其ROI非常乐观。更重要的是,这个门类所面对的人群,简直是私域最佳人群:

行情 11 2024-05-06
AI日报:Remini“黏土AI”攻占小红书;HeyGen推自动剪辑工具;多图漫画工具StoryDiffusion来了;AI音乐Udio可生成15分钟音频

AI日报:Remini“黏土AI”攻占小红书;HeyGen推自动剪辑工具;多图漫画工具StoryDiffusion来了;AI音乐Udio可生成15分钟音频

欢迎来到【AI日报】栏目!这里是你每天探索人工智能世界的指南,每天我们为你呈现AI领域的热点内容,聚焦开发者,助你洞悉技术趋势、了解创新AI产品应用。

行情 10 2024-05-06
英伟达 ChatRTX 增加了语音图像等多种新功能 支持新的模型

英伟达 ChatRTX 增加了语音图像等多种新功能 支持新的模型

站长之家(ChinaZ.com)5月6日 消息:英伟达的ChatRTX在其最新更新中引入了多种新功能,这些功能在3月的GTC上首次展示,显著增强了这款基于RTX加速的聊天机器人应用的能力。ChatRTX现在支持更多的大型语言模型(LLM),包括Google的Gemma和中英双语的ChatG ...

行情 6 2024-05-06
价值15000元!理想L6最新定购权益发布

价值15000元!理想L6最新定购权益发布

快科技5月6日消息,今天上午,理想汽车发布了L6车型最新的定购权益。 即日起至2024年5月31日24时,定购用户可享5000元定金抵扣1万元购车款;5000元选装基金;价值5000元7千瓦家充桩及安装服务。 与上市公布的定购权益相比,选装基金由1万元降至5000元。 ...

行情 5 2024-05-06
10月发!曝小米15 Pro有直立和潜望双版本

10月发!曝小米15 Pro有直立和潜望双版本

快科技5月6日消息,博主数码闲聊站暗示,小米15Pro工程机测试了直立长焦和潜望长焦两个版本,目前尚未敲定最终长焦方案。

行情 5 2024-05-06