16 模型微调与知识库专项调研

厂商总览

微调 / 蒸馏 / 行业知识库(RAG + 向量库)专项调研(数据日期 2026-10-20)

序号分类厂商(主体)官网售卖方式服务内容资质门槛相对优势风险与限制适用场景
1云平台阿里云百炼bailian.console.aliyun.com按训练 token / 按推理 token;知识库按容量SFT 微调、模型评测、知识库(RAG)、应用编排实名;生成式 AI 备案国内一站式最全,微调与知识库同平台训练数据需上传云端;私有化需另购国内 To B、需要发票与合规
2云平台腾讯云(TI-ONE / 知识引擎 LKE)cloud.tencent.com按算力时长 + 按 token模型精调、知识引擎、向量库、Agent 编排同上知识引擎产品化程度高训练与推理分散在多个产品线腾讯云生态客户
3云平台火山引擎 方舟volcengine.com按 token 训练与推理SFT、DPO、知识库、评测同上训练效率与价格有竞争力公开价需控制台大规模调用场景
4云平台百度千帆cloud.baidu.com按 token / 按算力SFT 微调、知识库、模型评估同上国内最早做模型平台,工具链完整模型竞争力相对下滑国内政企
5海外平台OpenAI Fine-tuningplatform.openai.com按训练 token + 按推理 tokenSFT、蒸馏(用强模型生成数据)、评测境外主体;数据出境工具链成熟,蒸馏实践丰富数据出境;境内合规受限出海产品
6开源微调LLaMA-Factorygithub.com/hiyouga/LLaMA-Factory开源免费全参/LoRA/QLoRA 微调、100+ 模型、WebUI无上手最快,社区最活跃生产化需自行封装与调度私有化微调、快速验证
7开源加速Unslothunsloth.ai开源免费 + 付费版LoRA 训练加速与显存优化无显存占用低、训练速度快模型覆盖有限单卡微调、成本敏感
8RAG 平台Difydify.ai开源自建免费;云版订阅RAG 应用编排、知识库、Agent、工作流自建需运维开源社区活跃,可视化编排企业级权限与审计需自己补快速搭 RAG 应用
9RAG 平台RAGFlowragflow.io开源免费;企业版深度文档解析、切分优化、知识库自建需运维文档解析(表格/PDF)能力强资源占用较高复杂文档知识库
10RAG 平台FastGPTfastgpt.in开源自建免费;商业版知识库、工作流、问答应用自建需运维国内使用广,中文体验好大规模检索性能需调优企业知识库、客服
11向量库Milvus / Zillizmilvus.io / zilliz.com开源免费;Zilliz Cloud 按量向量检索、混合检索、标量过滤、分布式自建需运维开源事实标准,生态最全自建运维成本高;云版按量计费大规模向量检索
12向量库Pinecone / Qdrant / Weaviatepinecone.io全托管按量订阅;Qdrant/Weaviate 开源托管向量检索、混合检索、多租户境外主体免运维,上线快数据出境;成本随规模上升海外业务、快速上线

能力矩阵

能力矩阵

厂商分类微调蒸馏RAG向量库开源可自建公开价综合推荐度
阿里云百炼云平台✅ SFT△✅✅ 内置✗✅ 按 token★★★★★
腾讯云云平台✅△✅ LKE✅✗△★★★★
火山引擎云平台✅ SFT/DPO△✅✅✗△ 控制台★★★★
百度千帆云平台✅△✅✅✗△★★★☆
OpenAI FT海外平台✅✅ 常见做法△ 需自建✗✗✅ 公开★★★★
LLaMA-Factory开源微调✅ 核心△✗✗✅ 核心免费★★★★★
Unsloth开源加速✅ 加速✗✗✗✅免费★★★★
DifyRAG 平台△ 接入✗✅ 核心✅ 可接✅ 核心免费/订阅★★★★★
RAGFlowRAG 平台✗✗✅ 核心✅✅ 核心免费★★★★
FastGPTRAG 平台✗✗✅ 核心✅✅ 核心免费★★★★
Milvus/Zilliz向量库✗✗△ 基础✅ 核心✅ 核心免费/按量★★★★★
Pinecone/Qdrant向量库✗✗△✅ 核心✅ Qdrant✅ 公开★★★★

原理与实施路径

原理与实施路径 · 微调/RAG/蒸馏怎么选、怎么评估、风险在哪(红底为高风险项)

序号板块要点说明控制措施 / 备注
一、原理:三种手段解决三种不同问题
1原理先 RAG,再微调,最后才蒸馏① 知识时效性/需溯源 → RAG;② 风格、格式、任务特化、领域术语 → 微调;③ 降本提速、把大模型能力搬进小模型 → 蒸馏。顺序反了会花冤枉钱。90% 的「行业知识库」需求本质是 RAG,不是微调
2原理RAG 的五段链路文档解析 → 切分(chunking)→ 向量化(embedding)→ 检索(向量 + 关键词混合)→ 重排(rerank)→ 拼装提示词。任何一段弱,整体效果都差。切分与重排是最容易被忽略的两端
3原理切分决定召回质量按语义/标题切分优于固定长度;块太大召回噪声多,太小丢上下文。常见 300–800 token,带 10%–20% 重叠。表格与 PDF 需专门解析,别直接按字数切
4原理混合检索优于纯向量纯向量对专有名词、编号、代码不敏感,需叠加关键词(BM25)检索再融合。选支持混合检索的向量库
5原理微调两种:全参与 LoRA全参需重训所有权重(显存大、成本高);LoRA/QLoRA 只训练低秩适配器(显存小、可多套并存)。多数企业场景 LoRA 足够
6原理蒸馏两条路① logits 蒸馏:需要教师模型输出分布;② 指令蒸馏:用强模型批量生成「问题-答案」数据训练小模型(更常用、更简单)。指令蒸馏要防「教师幻觉」被学生学走
7原理评估必须有自己的题集至少 200–500 条业务真实问题,指标:准确率、召回率、拒答率、幻觉率、人工满意率。没有评测集就无法判断微调是否有用
二、实施路径:从判断到迭代(6 步)
8实施路径① 判断类型问题属于「知识不足」还是「能力不足」:知识不足用 RAG,能力/风格不足用微调。写一页《问题归类表》再动手
9实施路径② 准备数据RAG:文档清洗与切分;微调:500–5,000 条高质量问答对(质量 >> 数量)。数据准备通常占总工作量 60%
10实施路径③ 选平台合规敏感选云厂商(可开票、可备案);数据不出域选开源自建(Dify/RAGFlow + Milvus)。自建要算运维成本
11实施路径④ 建评测集从业务真实问题中抽 200–500 条,标注标准答案,作为基线。先测基线再改,否则无法归因
12实施路径⑤ 上线与灰度小流量灰度、人工抽检、收集 badcase、按周迭代。上线首月每天看 badcase
13实施路径⑥ 迭代优化RAG 调切分与检索,微调调数据与超参,必要时蒸馏降本。每次只改一个变量,便于归因
三、风险点(红底为高风险项)
14风险⚠ 用微调解决知识问题想让模型「记住」内部制度与产品文档,结果数据一变就过时,还要重训。时效性知识用 RAG;微调只解决风格与任务
15风险⚠ 没有评测集改了半天,无法证明效果变好还是变差。上线前必须建 200–500 条业务评测集
16风险⚠ 数据质量差问答对里有错误答案,模型学得越像越糟。人工审核 + 抽样复核;宁少勿滥
17风险⚠ 灾难性遗忘全参微调后通用能力下降(不会闲聊、不会推理)。优先 LoRA;保留基座模型做兜底
18风险⚠ 切分与解析不当PDF 表格被切碎,召回内容残缺。复杂文档用专用解析(RAGFlow 等)
19风险⚠ 幻觉与无依据回答检索没命中仍强行作答。设置「检索不到就拒答」;要求输出引用来源
20风险⚠ 数据合规训练数据含个人信息或客户数据,未脱敏。脱敏后再入训练/知识库;留存授权
21风险⚠ 成本失控向量库与推理成本随文档与并发线性上升。按月测算 TCO;冷数据分层

价目表

云平台(阿里云/腾讯云/火山/百度) | 云平台 | https://help.aliyun.com/zh/model-studio/models

序号厂商 / 类型分类计费项规格 / 档位公开参考价计费口径官方链接备注
1云平台(阿里云/腾讯云/火山/百度)云平台SFT 微调训练按训练 token未获取(各平台定价页)按千 token训练 + 推理分别计费
2云平台(阿里云/腾讯云/火山/百度)云平台知识库按容量或文档数未获取按 GB / 按文档部分平台含在推理费用中
3云平台(阿里云/腾讯云/火山/百度)云平台推理调用按输入/输出 token未获取按千 token微调模型推理价通常高于基座
4云平台(阿里云/腾讯云/火山/百度)云平台模型评测按次或随平台提供未获取按次—

OpenAI Fine-tuning | 海外平台 | https://platform.openai.com/docs/guides/fine-tuning

5OpenAI Fine-tuning海外平台训练按训练 token未获取(官网定价页)按千 token训练与推理分开计价
6OpenAI Fine-tuning海外平台推理按输入/输出 token未获取按千 token微调模型单价高于基座
7OpenAI Fine-tuning海外平台数据出境—合规评估成本另计—境内业务慎用

开源微调与 RAG 平台 | 开源 | https://github.com/hiyouga/LLaMA-Factory

8开源微调与 RAG 平台开源LLaMA-Factory全参/LoRA/QLoRA 微调0 元—成本在 GPU 与人力
9开源微调与 RAG 平台开源UnslothLoRA 训练加速0 元(有付费版)—显存占用低
10开源微调与 RAG 平台开源DifyRAG 应用编排0 元(云版订阅另计)—企业级权限需自补
11开源微调与 RAG 平台开源RAGFlow深度文档解析 RAG0 元(企业版另计)—资源占用较高
12开源微调与 RAG 平台开源FastGPT知识库与工作流0 元(商业版另计)—中文体验好

向量库 | 向量库 | https://milvus.io/

13向量库向量库Milvus(开源)自建向量检索0 元—运维与硬件成本另计
14向量库向量库Zilliz Cloud托管向量检索未获取(官网定价页)按容量/按量免运维
15向量库向量库Pinecone / Qdrant Cloud托管向量检索未获取(官网定价页)按容量/按量境外主体,数据出境需评估

价目表链接

价目表链接

序号来源 / 厂商分类页面官方链接说明访问状态 2026-10-20
1阿里云百炼云平台模型与计费https://help.aliyun.com/zh/model-studio/models微调与知识库入口200 正常
2腾讯云云平台知识引擎 LKEhttps://cloud.tencent.com/product/lkeRAG 产品200 正常
3火山引擎云平台方舟https://www.volcengine.com/product/ark微调与知识库200 正常
4百度千帆云平台千帆https://cloud.baidu.com/product/wenxinworkshopSFT 与知识库200 正常
5LLaMA-Factory开源微调GitHubhttps://github.com/hiyouga/LLaMA-Factory全参与 LoRA 微调200 正常
6Unsloth开源加速官网https://unsloth.ai/LoRA 加速200 正常
7DifyRAG 平台官网https://dify.ai/RAG 编排200 正常
8RAGFlowRAG 平台官网https://ragflow.io/深度文档解析200 正常
9FastGPTRAG 平台官网https://fastgpt.in/知识库200 正常
10Milvus向量库官网https://milvus.io/开源向量库200 正常
11Zilliz向量库定价https://zilliz.com/pricing托管向量库200 正常
12Pinecone向量库定价https://www.pinecone.io/pricing/托管向量库200 正常

数据说明

数据说明

一、本表用途

调研模型微调、蒸馏、行业知识库(RAG + 向量库)。核心是选对手段:知识时效性问题用 RAG,风格与任务问题用微调,降本提速用蒸馏。原理与风险见「原理与实施路径」表。

二、口径

  1. 决策顺序:先 RAG,再微调,最后蒸馏。90% 的「行业知识库」需求本质是 RAG。

  2. RAG 五段:解析 → 切分 → 向量化 → 检索(混合)→ 重排 → 拼装。任何一段弱,整体都差。

  3. 切分建议 300–800 token、重叠 10%–20%;表格与 PDF 需专用解析。

  4. 微调优先 LoRA/QLoRA(显存小、可多适配器并存);全参微调易灾难性遗忘。

  5. 蒸馏两条路:logits 蒸馏与指令蒸馏(用强模型生成数据训小模型,后者更常用)。

  6. 评估必须有自有题集(200–500 条),指标含准确率、召回率、拒答率、幻觉率。

三、合规

  1. 训练数据与知识库内容含个人信息须脱敏;境外平台涉及数据出境。

  2. 面向公众提供生成式 AI 服务需备案。

  3. 企业知识库需做权限隔离,避免越权检索。

4. 输出引用来源可降低幻觉责任。

四、未获取 / 待核实清单

  1. 各云平台的 SFT 训练与知识库单价:定价页多为一模型一价、动态渲染,本次只记计费口径。

  2. OpenAI 微调训练与推理单价:官网定价页未逐项摘录。

  3. Zilliz / Pinecone / Qdrant Cloud 的档位价:官网定价页。

  4. 自建方案(Dify/RAGFlow/Milvus)的硬件与运维成本:按规模测算,无公开报价。

五、使用建议

· 先花两周做 RAG 原型验证,再决定是否微调——很多需求做完 RAG 就不需要微调了。

· 数据质量比数量重要:500 条精标数据 > 5,000 条脏数据。

· 上线前必须建评测集,否则无法判断迭代是否有效。

· 报价时把「数据准备 + 评测集建设」单列,这部分通常占总工作量 60%,最容易被客户低估。

来源清单

来源清单

序号来源URL用途访问日期
1阿里云百炼https://help.aliyun.com/zh/model-studio/models微调与知识库2026-10-20
2腾讯云 知识引擎https://cloud.tencent.com/product/lkeRAG 产品2026-10-20
3火山引擎 方舟https://www.volcengine.com/product/ark微调与知识库2026-10-20
4LLaMA-Factoryhttps://github.com/hiyouga/LLaMA-Factory开源微调2026-10-20
5Difyhttps://dify.ai/RAG 编排2026-10-20
6RAGFlowhttps://ragflow.io/深度文档解析2026-10-20
7Milvushttps://milvus.io/开源向量库2026-10-20
8Zilliz 定价https://zilliz.com/pricing托管向量库2026-10-20