Dify:完善生态、支持Ollama与本地知识库、企业级拖放式UI构建AI Agent、API集成进业务

Dify 是一款开源的大语言模型(LLM) 应用开发平台,它融合了后端即服务和 LLMOps 的理念,使开发者可以快速搭建生产级的生成式 AI 应用。即使你是非技术人员,也能参与到 AI 应用的定义和数据运营过程中,使用拖放式 UI 构建 AI 应用程序和 RAG 工作流程!

体验地址:https://cloud.dify.ai/apps

为什么使用 Dify?

你或许可以把 LangChain 这类的开发库(Library)想象为有着锤子、钉子的工具箱。与之相比,Dify 提供了更接近生产需要的完整方案,Dify 好比是一套脚手架,并且经过了精良的工程设计和软件测试。

在可视化画布上构建和测试强大的 AI 工作流程,利用以下所有功能及其他功能。

我们的社区用户对 Dify 的产品评价可以归结为简单、克制、迭代迅速。——路宇,Dify.AI CEO

Dify 能做什么?

Dify 一词源自 Define + Modify,意指定义并且持续的改进你的 AI 应用,它是为你而做的(Do it for you)。

创业,快速的将你的 AI 应用创意变成现实,无论成功和失败都需要加速。在真实世界,已经有几十个团队通过 Dify 构建 MVP(最小可用产品)获得投资,或通过 POC(概念验证)赢得了客户的订单。

将 LLM 集成至已有业务,通过引入 LLM 增强现有应用的能力,接入 Dify 的 RESTful API 从而实现 Prompt 与业务代码的解耦,在 Dify 的管理界面是跟踪数据、成本和用量,持续改进应用效果。

作为企业级 LLM 基础设施,一些银行和大型互联网公司正在将 Dify 部署为企业内的 LLM 网关,加速 GenAI 技术在企业内的推广,并实现中心化的监管。

探索 LLM 的能力边界,即使你是一个技术爱好者,通过 Dify 也可以轻松的实践 Prompt 工程和 Agent 技术,在 GPTs 推出以前就已经有超过 60,000 开发者在 Dify 上创建了自己的第一个应用。

知识库

从 Notion 导入数据

Dify 数据集支持从 Notion 导入,并设置 同步 使得数据在 Notion 更新后便自动同步到 Dify。

Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务

通过 API 维护数据集

Dify 中存在知识库数据集的单独 API,这与他的服务 api 不同,你可以单独的使用数据集的 API:

Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务

工作流

工作流通过将复杂的任务分解成较小的步骤,提高了 LLM 应用面向复杂任务的性能。

Dify 工作流按应用情景划分为两种类型:

• Chatflow:面向多步逻辑的对话式应用程序。

  • Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务
  • • Workflow:面向自动化和批处理情景,适合高质量翻译、数据分析、内容生成、电子邮件自动化等应用程序。
  • Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务

• 常见案例:

Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务

官方文档中详细的介绍了各种使用的节点,以及最终形成的工作流是支持导出的,方便我们团队协作。

Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务

接入众多 LLM

模型配置

Dify 目前已支持主流的模型供应商,例如 OpenAI 的 GPT 系列、Anthropic 的 Claude 系列等。

Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务

模型配置教程:https://docs.dify.ai/v/zh-hans/guides/model-configuration

请查看公众号往期文章(有关于免费 OpenAI API 调用的介绍、部署项目的时候如何进行 API 配置)

在 Dify 的 设置 > 模型供应商 中设置要接入的模型。

Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务

配置完模型后,就可以在应用中使用这些模型了:

Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务

除此以外,Dify 对于各种基础 LLM,进行强大的兼容支持,支持各种本地如 ollama 以及第三方的模型,甚至支持你自定义的模型(需要自己重写类,和编写配置 yaml)

Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务

发布你的应用

发布为公开 Web 站点

Dify 还挺给力,用它创建 AI 应用,几分钟就能弄出一个 Web 应用,用户直接用,多方便。

发布 AI 站点

  • • 不管你是自己部署还是用云服务,比如 Udify.app,都能快速上线。
  • • 在应用概览页里,找到那个 AI 站点(WebApp)的卡片,开启访问,就有链接可以分享了。
  • Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务

分享应用

  • • 无论是文本生成还是对话型应用,Dify 都提供了好看的 WebApp 界面。就像是应用的脸,看起来得漂亮。

设置你的 AI 站点

  • • 点击 WebApp 卡片上的设置,可以弄一些东西,比如图标、名称、应用描述、界面语言、版权信息,还有隐私政策链接。这些都是最终用户会看到的。

嵌入你的 AI 站点

  • • Dify 支持把你的 AI 应用嵌入到你的商业网站里。比如想做个 AI 客服或者问答系统,只要点击 WebApp 的嵌入按钮,复制那个嵌入代码,然后粘贴到你网站的合适位置。
  • • 用 iframe 标签,把代码放到网站的<div>、<section>这样的地方。
  • • 或者用 script 标签,复制代码到网站的<head>或<body>中。
  • Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务

比如说,你把 script 代码粘贴到官网的<body>里,这样就能有个官网 AI 机器人了。

Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务

基于 APIs 开发

Dify API 基于“后端即服务”的理念,它让所有应用开发者都能轻松把大型语言模型的能力塞到前端应用里。想象一下,不用搞复杂的后端架构,直接在前端搞定一切。

这 Dify API 的好处多着呢:

  • • 直接在前端安全调用 LLM,免去一堆后端开发麻烦。
  • • 设计应用时候,你看到的可视化界面,改啥都能实时反馈到所有客户端。
  • • 管理 LLM 供应商和密钥?都帮你封装得妥妥的,想换就换。
  • • 还有工具、插件、数据集持续更新,保证你的应用总是跟得上步伐。

怎么用呢?简单得很:

  1. 1. 在应用的左侧导航找到“API Access”。
  2. 2. 看看 Dify 提供的 API 文档,管理下你的 API 凭证。
  3. Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务

想具体操作看看吗?比如你是开发部的,要用公司的数据库给终端用户提供 AI 能力,但你又不想外人摸清你的数据和 AI 逻辑。这时候,API 密钥得后端调用,保证安全,防止被滥用。

搞文本生成型应用?调用 completion-messages 接口,输入点什么,文本结果就出来了。下面是个调用示例:


curl --location --request POST 'https://api.dify.ai/v1/completion-messages' \
--header 'Authorization: Bearer ENTER-YOUR-SECRET-KEY' \
--header 'Content-Type: application/json' \
--data-raw '{
    "inputs": {},
    "response_mode": "streaming",
    "user": "abc-123"
}'

或者是对话型应用,采用一问一答模式,持续对话的那种。启动对话的 API 调用看这里:


curl --location --request POST 'https://api.dify.ai/v1/chat-messages' \
--header 'Authorization: Bearer ENTER-YOUR-SECRET-KEY' \
--header 'Content-Type: application/json' \
--data-raw '{
    "inputs": {},
    "query": "eh",
    "response_mode": "streaming",
    "conversation_id": "1c7e55fb-1ba2-4e10-81b5-30addcea2276"
    "user": "abc-123"
}'

下面提供 Dify 官方的文档介绍、相关资源、部署教程等,进一步支撑你的行动,以提升本文的帮助力。

Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务快速开始

Dify 是一个开源的 LLM 应用开发平台。其直观的界面结合了 AI 工作流、RAG 管道、Agent、模型管理、可观测性功能等,让您可以快速从原型到生产。以下是其核心功能列表:

1. 工作流: 在画布上构建和测试功能强大的 AI 工作流程,利用以下所有功能以及更多功能。

https://github.com/langgenius/dify/assets/13230914/356df23e-1604-483d-80a6-9517ece318aa

2. 全面的模型支持: 与数百种专有/开源 LLMs 以及数十种推理提供商和自托管解决方案无缝集成,涵盖 GPT、Mistral、Llama3 以及任何与 OpenAI API 兼容的模型。完整的支持模型提供商列表可在此处找到。

Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务

3. Prompt IDE: 用于制作提示、比较模型性能以及向基于聊天的应用程序添加其他功能(如文本转语音)的直观界面。

4. RAG Pipeline: 广泛的 RAG 功能,涵盖从文档摄入到检索的所有内容,支持从 PDF、PPT 和其他常见文档格式中提取文本的开箱即用的支持。

5. Agent 智能体: 您可以基于 LLM 函数调用或 ReAct 定义 Agent,并为 Agent 添加预构建或自定义工具。Dify 为 AI Agent 提供了 50 多种内置工具,如谷歌搜索、DELL·E、Stable Diffusion 和 WolframAlpha 等。

6. LLMOps: 随时间监视和分析应用程序日志和性能。您可以根据生产数据和标注持续改进提示、数据集和模型。

7. 后端即服务: 所有 Dify 的功能都带有相应的 API,因此您可以轻松地将 Dify 集成到自己的业务逻辑中。

使用 Dify

  • • 我们提供[ Dify 云服务]:(https://dify.ai),任何人都可以零设置尝试。它提供了自部署版本的所有功能,并在沙盒计划中包含 200 次免费的 GPT-4 调用。
  • • 自托管 Dify 社区版使用这个入门指南快速在您的环境中运行 Dify。使用我们的[文档]:(https://docs.dify.ai)进行进一步的参考和更深入的说明。
  • • 面向企业/组织的 Dify我们提供额外的面向企业的功能。与我们安排会议或给我们发送电子邮件讨论企业需求。

对于使用 AWS 的初创公司和中小型企业,请查看 AWS Marketplace 上的 Dify 高级版,并使用一键部署到您自己的 AWS VPC。它是一个价格实惠的 AMI 产品,提供了使用自定义徽标和品牌创建应用程序的选项。

安装社区版

系统要求

在安装 Dify 之前,请确保您的机器满足以下最低系统要求:

  • • CPU >= 2 Core
  • • RAM >= 4GB

快速启动

启动 Dify 服务器的最简单方法是运行我们的 docker-compose.yml 文件。在运行安装命令之前,请确保您的机器上安装了 Docker 和 Docker Compose:


cd docker
docker compose up -d

运行后,可以在浏览器上访问 http://localhost/install 进入 Dify 控制台并开始初始化安装操作。

Dify:完善生态、支持 Ollama 与本地知识库、企业级拖放式 UI 构建 AI Agent、API 集成进业务

使用 Helm Chart 部署

使用 Helm Chart 版本,可以在 Kubernetes 上部署 Dify。

  • • Helm Chart by @LeoQuote
  • • Helm Chart by @BorisPolonsky

配置

如果您需要自定义配置,请参考我们的 docker-compose.yml 文件中的注释,并手动设置环境配置。更改后,请再次运行 docker-compose up -d。您可以在我们的文档中查看所有环境变量的完整列表。

参考链接:

[1]https://github.com/langgenius/dify/
[2]https://cloud.dify.ai/apps
[3]https://docs.dify.ai/v/zh-hans/getting-started/

© 版权声明

☆ END ☆
喜欢就点个赞吧
点赞0 分享
图片正在生成中,请稍后...