Gerald Shen – NVIDIA 技術博客
http://www.open-lab.net/zh-cn/blog
閱讀開發者創建的最新技術信息、頭條新聞 和內容。
Thu, 09 May 2024 09:21:42 +0000
zh-CN
hourly
1
196178272 -
使用 DRaFT+增強文本到圖像的微調,現已是 NVIDIA NeMo 的一部分
http://www.open-lab.net/zh-cn/blog/enhance-text-to-image-fine-tuning-with-draft-now-part-of-nvidia-nemo/
Fri, 26 Apr 2024 09:12:38 +0000
http://www.open-lab.net/zh-cn/blog/?p=9917
Continued]]>
文本到圖像的 Diffusion 模型已經被建立為基于給定文本的高保真圖像生成的強大方法。然而, Diffusion 模型并不總是在給定的輸入文本和生成的圖像之間實現所需的對齊,尤其是對于現實生活中沒有遇到的復雜的特殊提示。因此,人們對有效地微調 Diffusion 文本到圖像模型以實現即時對齊并最大化文本到圖像評分模型越來越感興趣。 直接獎勵微調(DRaFT)是一種簡單而有效的方法,旨在微調 Diffusion 模型,以最大化可微分的獎勵函數,如可微分報酬的直接微調 Diffusion 模型所示。 這篇文章解釋了 Diffusion 模型的 DRaFT 方法,以更好地與不同和復雜的提示保持一致。我們還介紹了 DRaFT+,它增強了 DRaFT 方法的能力,并解決了它們的主要缺點。 現在,您可以通過訪問 DRaFT+ 算法和示例代碼 NeMo Aligner 庫 在…
Source
]]>
9917
人人超碰97caoporen国产