https://blog.qife122.com/tags/dpo/ Recent content in DPO on 办公AI智能小助手 Hugo zh-cn qife Fri, 12 Sep 2025 17:01:42 +0800 https://blog.qife122.com/p/%E4%BD%BF%E7%94%A8axolotl%E5%92%8C%E7%9B%B4%E6%8E%A5%E5%81%8F%E5%A5%BD%E4%BC%98%E5%8C%96dpo%E5%BE%AE%E8%B0%83%E5%BC%80%E6%BA%90%E5%A4%A7%E8%AF%AD%E8%A8%80%E6%A8%A1%E5%9E%8B/ Fri, 12 Sep 2025 17:01:42 +0800 https://blog.qife122.com/p/%E4%BD%BF%E7%94%A8axolotl%E5%92%8C%E7%9B%B4%E6%8E%A5%E5%81%8F%E5%A5%BD%E4%BC%98%E5%8C%96dpo%E5%BE%AE%E8%B0%83%E5%BC%80%E6%BA%90%E5%A4%A7%E8%AF%AD%E8%A8%80%E6%A8%A1%E5%9E%8B/ <h1 id="使用axolotl和直接偏好优化dpo微调开源大语言模型">使用Axolotl和直接偏好优化(DPO)微调开源大语言模型</h1> <p>Komninos Chatzipapas<br> 发表于AI·Web·2024年12月6日·更新于2024年12月10日</p> <p>大语言模型(LLM)为AI应用开启了无数新机遇。如果您曾想微调自己的模型，本指南将展示如何轻松实现且无需编写任何代码。使用Axolotl和DPO等工具，我们将逐步完成整个过程。</p> https://blog.qife122.com/p/%E4%BD%BF%E7%94%A8axolotl%E5%92%8Cdpo%E6%8A%80%E6%9C%AF%E5%BE%AE%E8%B0%83%E5%BC%80%E6%BA%90%E5%A4%A7%E8%AF%AD%E8%A8%80%E6%A8%A1%E5%9E%8B%E7%9A%84%E5%AE%8C%E6%95%B4%E6%8C%87%E5%8D%97/ Wed, 10 Sep 2025 06:43:57 +0800 https://blog.qife122.com/p/%E4%BD%BF%E7%94%A8axolotl%E5%92%8Cdpo%E6%8A%80%E6%9C%AF%E5%BE%AE%E8%B0%83%E5%BC%80%E6%BA%90%E5%A4%A7%E8%AF%AD%E8%A8%80%E6%A8%A1%E5%9E%8B%E7%9A%84%E5%AE%8C%E6%95%B4%E6%8C%87%E5%8D%97/ <h1 id="使用axolotl和直接偏好优化dpo微调开源大语言模型">使用Axolotl和直接偏好优化(DPO)微调开源大语言模型</h1> <p>大语言模型(LLM)为AI应用开启了无数新机遇。如果你想微调自己的模型，本指南将展示如何轻松实现这一目标，无需编写任何代码。我们将使用Axolotl和DPO工具，逐步完成整个过程。</p>