Tagged

LORA

A collection of 27 posts

APPLICATOIN

让LLM学会你的说话风格

使用你自己的社交网络评论来微调一个LLM，并在（相对）廉价的硬件上运行所有微调。

TOOL

用MLX-LM微调Mistral-7B

在本教程中，我们将借助 mlx-lm 包加载Mistral-7B-Instruct-v0.3–4bit 模型，并使用LoRA对其进行微调。

MODEL-ZOO

蒸馏DeepSeek-R1到自己的模型

在本博客中，我们将介绍如何使用LoRA等技术将 DeepSeek-R1 的推理能力蒸馏到较小的模型（如 Microsoft 的 Phi-3-Mini）中。

MODEL-ZOO

DeepSeek-R1微调指南

在这篇博文中，我们将逐步指导你在消费级 GPU 上使用 LoRA（低秩自适应）和 Unsloth 对 DeepSeek-R1 进行微调。

MODEL-ZOO

DeepSeek LLM微调指南

在本指南中，我们将介绍使用监督微调 (SFT) 和 Hugging Face 数据集对 DeepSeek LLM 进行微调的过程，并提供针对特定领域数据集进行训练的分步代码演示。

TOOL

ComfyUI：从入门到精通

对于这篇文章，我想开始挑战，让初学者更容易在开源空间内进行高级图像生成。我意识到在 20 分钟内完成这项任务相当繁重。

MODEL-ZOO

LLM微调综合指南

训练和微调模型是一项昂贵的苦差事，如果可以的话，你真的应该避免它，把省下的钱花在去阿鲁巴岛或任何你喜欢的度假胜地的旅行上。

APPLICATION

LLM微调实现网络攻击检测

在这篇文章中，我将探讨 LLM 微调在网络安全领域预测任务中的更高级用例。具体来说，我提出了一种使用微调 LLM 进行实时网络攻击检测的机制。

MODEL-ZOO

10个最流行的FLUX LoRA模型

如果想为你的项目增添光彩，尝试新的艺术风格，或者只是更深入地研究人工智能生成的艺术，那么这 10 个顶级 Flux LoRA 模型将让你大饱眼福。

MODEL-ZOO

拯救量化LLM的准确性

使用量化 LoRA (QLoRA) 对大型语言模型进行微调可以有效更新原始模型权重，但在将 LoRA 权重与量化基础权重合并时，最初可能会降低准确性。

MODEL-ZOO

StarCoder私有代码库微调

在本文中，我们将展示如何在私有代码库上微调StarCoder，以增强其上下文感知能力并提高模型对组织需求的实用性。

TOOL

ComfyUI FLUX LoRA微调工作流

本文介绍的 ComfyUI FLUX LoRA 训练工作流使你能够使用自己的数据集微调预先存在的 FLUX 模型。

MODEL-ZOO

视觉语言模型LoRA微调指南

在本文中，我们将探讨如何使用Unsloth、WandB等强大的工具组合来微调 Meta AI 的 Llama-3.2–11B-Vision 模型，并使用vLLM进行模型服务和推理。

MODEL-ZOO

Gemini问答数据集微调

本文介绍如何通过构建一个基于斯坦福问答数据集 (SQuAD 1.1) 微调的强大问答系统来增强 Gemini 1.5 Flash 的功能。

TOOL

ComfyUI使用Flux.1 LoRA模型

Flux 擅长生成逼真的照片，但有些风格可能难以实现，用 LoRA 模型补充 Flux 基础模型也是你AI工具箱中的另一个宝贵技巧。

APPLICATION

小规模CV任务如何利用基础模型

自2023年以来，人工智能领域将受到来自生成式AI的新成功的冲击，我们将探索是否可以利用这些基础模型来构建数据集、利用新的架构和新的预训练权重，或者从中提取知识。

MODEL-ZOO

Gemma 2微调实现医学问答

本文旨在对医学数据集上的 Gemma 2 模型进行微调，重点关注其在医疗保健相关 QA 任务中的应用。

MODEL-ZOO

Qwen2-VL OCR能力微调与量化

最近，我对 Qwen2-VL-2B 进行了微调，我的目标是使用此模型从车辆铭牌和底盘图像中提取所需的信息 (OCR)。

MODEL-ZOO

Idefics-2微调实现视觉问答

本文介绍如何使用Transformers库微调Idefics-2视觉大模型，来应对视觉问答任务。

MODEL-ZOO

Qwen2.5-Coder 模型微调教程

本文介绍如何在Continue代码助手的开发数据记录基础上，使用 Unsloth 微调Qwen2.5-Coder 7B模型，以完善其代码自动完成能力。

TOOL

ComfyUI生成Logo的3个方法

本文介绍在ComfyUI中生成徽标Logo的3种方法：使用CivitAI的LoRA模型、使用IPAdapter+ControlNet以及使用参考图像生成。

TOOL

15个最流行的ComfyUI工作流

在 ComfyUI 中构建复杂的工作流程并不是每个人都喜欢的，因此我整理了一份最适合稳定扩散的15个最佳 ComfyUI 工作流列表。

TOOL

LitGPT 微调简明教程

LitGPT 是一个简化高性能 LLM 预训练、微调和可扩展部署的平台， 提供 20 多种高性能 LLM，并提供预训练、微调和大规模部署的方案。

LIBRARY

用MLX微调医学诊断大模型

本文探讨微调LLM用于医疗诊断预测，硬件为配备 M2 芯片的 Apple Silicon Mac ，使用 LoRA 和 Apple MLX 框架微调，Ollama 运行推理服务。

MODEL-ZOO

Llama-3.1微调实现函数调用

本文探讨如何使用 Unsloth微调 Llama-3.1–8B 模型以实现函数调用功能，并使用 vLLM 进行高性能模型推理和服务。