找回密码
 注册

QQ登录

只需一步,快速开始

扫一扫,访问微社区

巢课
电巢直播8月计划
查看: 93|回复: 14
打印 上一主题 下一主题

RAG+AI工作流+Agent:LLM框架该如何选择,全面对

[复制链接]

34

主题

48

帖子

336

积分

二级会员(20)

Rank: 2Rank: 2

积分
336
跳转到指定楼层
1#
 楼主| 发表于 2024-10-11 10:25 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式

EDA365欢迎您!

您需要 登录 才可以下载或查看,没有帐号?注册

x
RAG+AI工作流+Agent:LLM框架该如何选择,全面对比MaxKB、Dify、FastGPT、RagFlow、Anything-LLM,以及更多推荐- a- o+ w: W7 |  i( T

- h2 k8 v; ?' E( B) K
/ H& c0 G+ ?, ]/ T1.MaxKBMaxKB = Max Knowledge Base,是一款基于 LLM 大语言模型的开源知识库问答系统,旨在成为企业的最强大脑。它能够帮助企业高效地管理知识,并提供智能问答功能。想象一下,你有一个虚拟助手,可以回答各种关于公司内部知识的问题,无论是政策、流程,还是技术文档,MaxKB 都能快速准确地给出答案:比如公司内网如何访问、如何提交视觉设计需求等等
官方网址:https://maxkb.cn/
1.1 简介
    ! k: U0 v- D; m2 d; F: _( k( [
  • 开箱即用:支持直接上传文档、自动爬取在线文档,支持文本自动拆分、向量化、RAG(检索增强生成),智能问答交互体验好;
    ; E2 r& U# m1 K' a! s, d' O- [  `! }, T5 {
  • 无缝嵌入:支持零编码快速嵌入到第三方业务系统,让已有系统快速拥有智能问答能力,提高用户满意度;6 H. n# K2 T, P8 M7 c5 O" _) ~
    & ]  o3 m$ g- ~; h# a
# F' k* }) N. c
$ j' ]2 z; M3 d0 D9 n' m

5 r/ A; S" L/ E: ^5 N. k, ^

    6 x* j4 {) {, N6 f  T" d
  • 灵活编排:内置强大的工作流引擎,支持编排 AI 工作流程,满足复杂业务场景下的需求;
    " ~  s" i9 e$ o3 S+ ^) u6 b% O

/ z  P% n* g2 m
+ }9 @3 V% g% L: a/ f) |4 j& M2 [2 ]5 N9 \: K, B2 Q0 {
    : V/ P% J" i: E7 ?# [1 @- o
  • 模型中立:支持对接各种大语言模型,包括本地私有大模型(Llama 3 / Qwen 2 等)、国内公共大模型(通义千问 / 智谱 AI / 百度千帆 / Kimi / DeepSeek 等)和国外公共大模型(OpenAI / Azure OpenAI / Gemini 等)。

    : u# n5 o+ h3 T5 v( b! p- Y) v- Y
3 h. s. R* d0 p, q! }% s
8 _( x9 `; j- ]0 e3 y& [, p
: ?( m& X  D& Q1 W1 U) |
1.2技术框架和原理
" i) s) b3 S0 I% Z% V3 K$ o$ O/ ?2 r1 L! B$ Y, X: c
( F( y- v8 o* }! `* M$ T2 l: M2 h# C
7 e; i& t7 d9 I/ C
3 S, D. a( B! J' Y: J- X

    1 g! `: y9 d4 _
  • 技术栈

    : v  v6 ^6 p+ ?' C, l( R
      ( J7 R. F) n1 J( M4 \9 [2 I
    • 前端:Vue.js、logicflow

      4 Z' M2 w0 f" o3 C. _- n
    • 后端:Python / Django

      / T% t- P7 z7 `2 F
    • Langchain:Langchain

      & A' {& C: ?# N+ V  o  z" v' M# ^9 K
    • 向量数据库:PostgreSQL / pgvector

      - H0 g# |( }) `4 T; }0 {8 o1 r
    • 大模型:Ollama、Azure OpenAI、OpenAI、通义千问、Kimi、百度千帆大模型、讯飞星火、Gemini、DeepSeek等。

      , Y  e* a# l+ R7 `! \: F
2.DifyDify 是一款开源的大语言模型(LLM) 应用开发平台。它融合了后端即服务(Backend as Service)和 LLMOps 的理念,使开发者可以快速搭建生产级的生成式 AI 应用。即使你是非技术人员,也能参与到 AI 应用的定义和数据运营过程中。
由于 Dify 内置了构建 LLM 应用所需的关键技术栈,包括对数百个模型的支持、直观的 Prompt 编排界面、高质量的 RAG 引擎、稳健的 Agent 框架、灵活的流程编排,并同时提供了一套易用的界面和 API。这为开发者节省了许多重复造轮子的时间,使其可以专注在创新和业务需求上

7 N. U. {; M" E1 G% V$ Q' O+ f% J: U; R

, H% }1 z- c1 P( ~9 {  K. x( t( p2.1 简介Dify 是一个开源的 LLM 应用开发平台。其直观的界面结合了 AI 工作流、RAG 管道、Agent、模型管理、可观测性功能等,让您可以快速从原型到生产。以下是其核心功能列表:

    ' S7 m5 P9 o" {2 l
  • 工作流: 在画布上构建和测试功能强大的 AI 工作流程,利用以下所有功能以及更多功能。
    0 q# ]) }- L; w( F1 q2 \; t$ y

    2 E1 i0 y- B) b$ I! p! N: c
  • 全面的模型支持: 与数百种专有/开源 LLMs 以及数十种推理提供商和自托管解决方案无缝集成,涵盖 GPT、Mistral、Llama3 以及任何与 OpenAI API 兼容的模型。
    3 O  B: ~9 d7 F) M

      N; |0 q( F7 a( O9 ]* F
  • Prompt IDE: 用于制作提示、比较模型性能以及向基于聊天的应用程序添加其他功能(如文本转语音)的直观界面。
    : \" _1 r9 S* E

    % w& V3 S: o3 k* f9 R1 Y
  • RAG Pipeline: 广泛的 RAG 功能,涵盖从文档摄入到检索的所有内容,支持从 PDF、PPT 和其他常见文档格式中提取文本的开箱即用的支持。9 ^( r2 j$ b% S# Y; J9 z
    $ \( U1 ]# f# e1 D
  • Agent 智能体: 您可以基于 LLM 函数调用或 ReAct 定义 Agent,并为 Agent 添加预构建或自定义工具。Dify 为 AI Agent 提供了50多种内置工具,如谷歌搜索、DELL·E、Stable Diffusion 和 WolframAlpha 等。
    ! a; T, y2 ~2 t8 w3 i+ d; ?

    + l4 x3 N2 p1 t8 D( J
  • LLMOps: 随时间监视和分析应用程序日志和性能。您可以根据生产数据和标注持续改进提示、数据集和模型。
    ; E& m$ v, o) E* u! b

    & S) V! d$ o/ F; @
  • 后端即服务: 所有 Dify 的功能都带有相应的 API,因此您可以轻松地将 Dify 集成到自己的业务逻辑中。: F- ~& r# w$ t$ i" ~( m+ O
    9 c0 f- h. Y4 q/ e. ]$ k! y7 N" x# }: V
8 S- F0 i' Y' x1 Y$ o# }
) A! r8 S1 b) b  {6 \8 i$ \5 \
8 b# D1 Y  W, e. @  t- d) A
2.2 系统框架
! d6 r1 O: {. N$ x3 b9 Q- q  o
$ t" A: K. d# m. e3 t4 h, n! W6 ?# r# D9 f% j, I
工作流通过将复杂的任务分解成较小的步骤(节点)降低系统复杂度,减少了对提示词技术和模型推理能力的依赖,提高了 LLM 应用面向复杂任务的性能,提升了系统的可解释性、稳定性和容错性。Dify 工作流分为两种类型:

    * M; R) c+ ]! ^7 T8 D
  • Chatflow:面向对话类情景,包括客户服务、语义搜索、以及其他需要在构建响应时进行多步逻辑的对话式应用程序。" q0 s7 z  S; Y% m2 E2 Z

    ! s4 ]" z3 Y2 }- w8 L0 W
  • Workflow:面向自动化和批处理情景,适合高质量翻译、数据分析、内容生成、电子邮件自动化等应用程序。
      q* @  l0 c4 y
    - f: x- ~3 O- U" M- V
' F% }; X+ ^7 y7 a! ]: K% }0 n$ d

; l! [' n+ r) H: n; ?  d
) M4 W. p- j! Y* X
为解决自然语言输入中用户意图识别的复杂性,Chatflow 提供了问题理解类节点。相对于 Workflow 增加了 Chatbot 特性的支持,如:对话历史(Memory)、标注回复、Answer 节点等。
为解决自动化和批处理情景中复杂业务逻辑,工作流提供了丰富的逻辑节点,如代码节点、IF/ELSE 节点、模板转换、迭代节点等,除此之外也将提供定时和事件触发的能力,方便构建自动化流程

    # s# c4 K- A9 x/ L2 ?; o8 J+ M6 U7 e
  • 常见案例
    0 C4 b* I7 c( a9 a/ l+ \

      P* B( m! d  N
      * {  k, u8 ~8 a" _# P
    • 客户服务:通过将 LLM 集成到您的客户服务系统中,您可以自动化回答常见问题,减轻支持团队的工作负担。 LLM 可以理解客户查询的上下文和意图,并实时生成有帮助且准确的回答。% f5 w5 y1 \8 t$ j0 u; I' O

      + i2 c6 A  t* O4 |8 z' |4 N" Z# l: h
    • 内容生成:无论您需要创建博客文章、产品描述还是营销材料,LLM 都可以通过生成高质量内容来帮助您。只需提供一个大纲或主题,LLM将利用其广泛的知识库来制作引人入胜、信息丰富且结构良好的内容。, {) \# U0 O9 |+ A" S( ?

      ' M, k: X( Z# S$ X7 f+ H( j' l
    • 任务自动化:可以与各种任务管理系统集成,如 Trello、Slack、Lark、以自动化项目和任务管理。通过使用自然语言处理,LLM 可以理解和解释用户输入,创建任务,更新状态和分配优先级,无需手动干预。
      * d6 Q& u( p# I. ~9 U3 U- n& K
      " {+ p0 c- V8 [# g
    • 数据分析和报告:可以用于分析大型数据集并生成报告或摘要。通过提供相关信息给 LLM,它可以识别趋势、模式和洞察力,将原始数据转化为可操作的智能。对于希望做出数据驱动决策的企业来说,这尤其有价值。
      2 j- W/ x% o$ K& W# X% X8 X
      ) a- n" g/ P" R1 `, J
    • 邮件自动化处理:LLM 可以用于起草电子邮件、社交媒体更新和其他形式的沟通。通过提供简要的大纲或关键要点,LLM 可以生成一个结构良好、连贯且与上下文相关的信息。这样可以节省大量时间,并确保您的回复清晰和专业。( D) c  {' O& _4 y
      7 C; D7 g4 A1 q' h$ R' g
3.FastGPT
FastGPT是一个功能强大的平台,专注于知识库训练和自动化工作流程的编排。它提供了一个简单易用的可视化界面,支持自动数据预处理和基于Flow模块的工作流编排。FastGPT支持创建RAG系统,提供自动化工作流程等功能,使得构建和使用RAG系统变得简单,无需编写复杂代码。
3.1 FastGPT 能力
    # n+ C* f% q) c' t9 K
  • 专属 AI 客服 :通过导入文档或已有问答对进行训练,让 AI 模型能根据你的文档以交互式对话方式回答问题。

    * g1 S. ?. ?% m# t
    ( `% m3 s! n, ^: u/ t
  • 多库复用,混用
    . \) Y+ b1 C0 L" i8 \0 F6 T5 c
  • chunk 记录修改和删除
    ' }2 ~( C; y, G; {7 Q& M  x+ O
  • 源文件存储

    4 i% g& Z/ }; z
  • 支持手动输入,直接分段,QA 拆分导入

    + R$ ~" _# k- u3 m& S& H0 x
  • 支持 txt,md,html,pdf,docx,pptx,csv,xlsx (有需要更多可 PR file loader)
    ' T5 q7 E  v* A4 [3 n! {
  • 支持 url 读取、CSV 批量导入
    9 L" B* U$ n! d1 ^, Q
  • 混合检索 & 重排# z. f4 x+ o5 q9 N8 i  @
    + h0 I! M& B9 ?: E
  • 简单易用的可视化界面 :FastGPT 采用直观的可视化界面设计,为各种应用场景提供了丰富实用的功能。通过简洁易懂的操作步骤,可以轻松完成 AI 客服的创建和训练流程。

    0 A3 I- U7 p( Z. S  @" Z
  • 自动数据预处理:提供手动输入、直接分段、LLM 自动处理和 CSV 等多种数据导入途径,其中“直接分段”支持通过 PDF、WORD、Markdown 和 CSV 文档内容作为上下文。FastGPT 会自动对文本数据进行预处理、向量化和 QA 分割,节省手动训练时间,提升效能。

    + r# y2 S, v4 c, A6 T' U; k
  • 工作流编排 :基于 Flow 模块的工作流编排,可以帮助你设计更加复杂的问答流程。例如查询数据库、查询库存、预约实验室等。
    4 C1 r, }, H5 a, G
    8 x4 R6 i6 N7 y/ J. v, ~& S
  • 提供简易模式,无需操作编排
    7 _1 b6 b2 [: ?1 }$ H( H( p0 C% F* \  u
  • 工作流编排
    # d* X0 b& B- p! f$ U
  • 工具调用

    : b) _9 _% A) f" d) X6 W) I
  • 插件 - 工作流封装能力
    ' o! T8 q# ]0 h$ A5 Q9 i$ y
  • Code sandbox. k8 r" w1 @; k
    " o* @! u3 H+ g4 r0 W
  • 强大的 API 集成:FastGPT 对外的 API 接口对齐了 OpenAI 官方接口,可以直接接入现有的 GPT 应用,也可以轻松集成到企业微信、公众号、飞书等平台。

    / f% a( J7 o8 E6 b

“来自电巢APP”

分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友 微信微信
收藏收藏2 支持!支持!2 反对!反对!

0

主题

7

帖子

14

积分

二级会员(20)

Rank: 2Rank: 2

积分
14
2#
发表于 2024-10-16 14:34 | 只看该作者

0

主题

7

帖子

14

积分

二级会员(20)

Rank: 2Rank: 2

积分
14
3#
发表于 2024-10-16 15:04 | 只看该作者
Dcpc8506G9V1S 发表于 2024-10-16 14:34:396 L0 p$ H# d; m3 _9 R
12121221
( \) J  Y' g3 v* `
6 ]8 }* M, v0 w5 @9 Y$ s! b/ \
111212
& }( t- K1 E7 m8 \# Y/ A! w8 X" d. b

“来自电巢APP”

2

主题

5

帖子

31

积分

二级会员(20)

Rank: 2Rank: 2

积分
31
4#
发表于 2024-10-17 14:17 | 只看该作者

2

主题

5

帖子

31

积分

二级会员(20)

Rank: 2Rank: 2

积分
31
5#
发表于 2024-10-17 14:18 | 只看该作者

2

主题

5

帖子

31

积分

二级会员(20)

Rank: 2Rank: 2

积分
31
6#
发表于 2024-10-17 14:19 | 只看该作者
23232323232

“来自电巢APP”

34

主题

48

帖子

336

积分

二级会员(20)

Rank: 2Rank: 2

积分
336
7#
 楼主| 发表于 2024-10-17 14:23 | 只看该作者
今天是周四

“来自电巢APP”

34

主题

48

帖子

336

积分

二级会员(20)

Rank: 2Rank: 2

积分
336
8#
 楼主| 发表于 2024-10-17 14:25 | 只看该作者

34

主题

48

帖子

336

积分

二级会员(20)

Rank: 2Rank: 2

积分
336
9#
 楼主| 发表于 2024-10-17 15:03 | 只看该作者
哈哈哈哈哈哈,系休息系

“来自电巢APP”

34

主题

48

帖子

336

积分

二级会员(20)

Rank: 2Rank: 2

积分
336
10#
 楼主| 发表于 2024-10-17 15:04 | 只看该作者
嗯嗯嗯嫩嗯嗯

“来自电巢APP”

34

主题

48

帖子

336

积分

二级会员(20)

Rank: 2Rank: 2

积分
336
11#
 楼主| 发表于 2024-10-17 15:06 | 只看该作者
西i嘻嘻i

“来自电巢APP”

34

主题

48

帖子

336

积分

二级会员(20)

Rank: 2Rank: 2

积分
336
12#
 楼主| 发表于 2024-10-17 15:07 | 只看该作者
嗯嗯嗯呢

“来自电巢APP”

34

主题

48

帖子

336

积分

二级会员(20)

Rank: 2Rank: 2

积分
336
13#
 楼主| 发表于 2024-10-17 15:13 | 只看该作者
哈哈哈哈哈

“来自电巢APP”

1

主题

6

帖子

51

积分

初级新手(9)

Rank: 1

积分
51
14#
发表于 2024-10-18 14:21 | 只看该作者
32323323232

“来自电巢APP”

您需要登录后才可以回帖 登录 | 注册

本版积分规则

关闭

推荐内容上一条 /1 下一条

巢课

技术风云榜

关于我们|手机版|EDA365 ( 粤ICP备18020198号 )

GMT+8, 2025-4-4 20:27 , Processed in 0.064537 second(s), 31 queries , Gzip On.

深圳市墨知创新科技有限公司

地址:深圳市南山区科技生态园2栋A座805 电话:19926409050

快速回复 返回顶部 返回列表