news 2026/5/7 16:58:01

MLflow的使用,以及集成到Dify中

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
MLflow的使用,以及集成到Dify中

目录

1.特点

Open Source 开源

OpenTelemetry 开放遥测

All-in-one Platform 一体化平台

Complete Observability 完全可观测性

Evaluation & Monitoring 评估与监测

Framework Integration 框架集成

2.本地化docker

3.集成dify


MLflow GenAI 是一个开源、一体化的平台,帮助通过端到端的可观察性、评估、AI 网关、提示管理、优化和跟踪,提升agent与生成 AI 应用。

1.特点

Open Source 开源

加入成千上万的团队,利用 MLflow 构建生成式人工智能——拥有 2 万+颗 GitHub 星级和 5 千万+月下载量。作为 Linux 基金会的一部分,MLflow 确保您的 AI 基础设施保持开放且供应商中立。

OpenTelemetry 开放遥测

MLflow Tracing 完全兼容 OpenTelemetry,使其免于厂商锁定,易于与现有的可观测堆栈集成。

All-in-one Platform 一体化平台

管理从实验到生产的整个生成式人工智能旅程。在同一平台上跟踪提示、评估质量、部署模型并监控性能。

Complete Observability 完全可观测性

通过全面的追踪,捕捉提示、检索、工具调用和模型响应,全面了解每一个 AI 决策。自信地调试复杂的工作流程。

Evaluation & Monitoring 评估与监测

Stop manual testing with LLM judges and custom metrics. Systematically evaluate every change to ensure consistent improvements in your AI applications.
停止用大型语言模型评判和自定义指标手动测试。系统地评估每一次变更,确保 AI 应用持续改进。

Framework Integration 框架集成

Use any GenAI framework or model provider. With 30+ integrations and extensible APIs, MLflow adapts to your tech stack, not the other way around.
使用任何生成式 AI 框架或模型提供商。MLflow 拥有 30+集成和可扩展 API,能够适应你的技术栈,而不是反过来。

2.本地化docker

git clone --depth 1 --sparse https://github.com/mlflow/mlflow.git cd mlflow # 手动开启稀疏检出 + 配置规则(完整语法,兼容 PowerShell) git sparse-checkout init --cone git sparse-checkout add docker-compose # 用 add 替代 set,兼容性更好 cd docker-compose cp .env.dev.example .env docker compose up -d

3.集成dify

dify的应用中监测栏右上角中项追踪选项:捕获应用程序执行的完整上下文,包括 LLM 调用、上下文、提示、HTTP 请求等,发送到第三方跟踪平台。

提供了不少平台,考虑到本地部署适用性,可选择mlflow作为追踪平台

配置界面如下:

跟踪 URI*:http://yourIP:5000

实验编号*:1\2\3

MLflow 的实验 ID 是数字(比如默认实验 ID 是0,自定义实验需先查 / 创建),操作如下:

  • 访问 MLflow UI(http://localhost:5000),登录后(若无需登录直接进入):

    • 若已有名为XXX的实验:点击该实验,浏览器地址栏会显示http://localhost:5000/#/experiments/11就是该实验的 ID,是整数);
    • 若没有XXX实验:先在 MLflow UI 点击「Create Experiment」创建名为XXX的实验,创建后会自动生成一个整数 ID(比如1/2)。

用户名和密码可不填

结合你本地 Docker 启动的 MLflow 场景(默认无认证):

  • 若访问http://localhost:5000无需登录:密码框填任意非空值(比如123456/password)即可(界面仅要求非空,实际不校验);
  • 若访问http://localhost:5000需要登录:填 MLflow UI 登录时的密码(若未设置过,需先按前文方法创建用户并设置密码)。

配置成功界面:

配置好后就点击查看可以直接跟踪,集成度还比较高

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/5/3 7:42:53

DiT模型实战指南:3步搞定INT8量化,推理速度显著提升!

还在为DiT模型推理卡顿、显存占用过高而烦恼吗?今天分享一套实测有效的INT8量化方案,让你轻松实现推理速度显著提升,显存占用减半!读完这篇文章,你将掌握从零开始的完整量化流程,避开所有常见问题。 【免费…

作者头像 李华
网站建设 2026/5/7 15:11:57

微软VibeVoice-1.5B:开启语音合成技术的新篇章

微软VibeVoice-1.5B:开启语音合成技术的新篇章 【免费下载链接】VibeVoice-1.5B 项目地址: https://ai.gitcode.com/hf_mirrors/microsoft/VibeVoice-1.5B 在人工智能语音合成领域,微软最新推出的VibeVoice-1.5B模型正以其革命性的架构设计和卓越…

作者头像 李华
网站建设 2026/5/4 19:05:10

Zotero终极指南:从学术小白到文献管理高手

在当今信息爆炸的时代,学术研究面临着前所未有的挑战。每天都有成千上万的新论文发表,如何高效地收集、整理和引用这些文献,成为每个研究者的必修课。Zotero作为一款免费开源的文献管理工具,正在帮助全球数百万用户从文献混乱中解…

作者头像 李华
网站建设 2026/4/30 16:59:02

嵌入式AI革命:TensorRT-LLM如何颠覆智能终端的边缘推理

嵌入式AI革命:TensorRT-LLM如何颠覆智能终端的边缘推理 【免费下载链接】TensorRT-LLM TensorRT-LLM provides users with an easy-to-use Python API to define Large Language Models (LLMs) and build TensorRT engines that contain state-of-the-art optimizat…

作者头像 李华
网站建设 2026/4/30 15:15:18

Windows Shell图像格式完全指南:如何选择最适合的菜单图标

Windows Shell图像格式完全指南:如何选择最适合的菜单图标 【免费下载链接】Shell Powerful context menu manager for Windows File Explorer 项目地址: https://gitcode.com/gh_mirrors/shel/Shell 在Windows操作系统的日常使用中,Shell上下文菜…

作者头像 李华
网站建设 2026/5/1 10:20:05

开源流程图组件库终极指南:从技术架构到企业级实践

开源流程图组件库终极指南:从技术架构到企业级实践 【免费下载链接】butterfly 🦋Butterfly,A JavaScript/React/Vue2 Diagramming library which concentrate on flow layout field. (基于JavaScript/React/Vue2的流程图组件) 项目地址: h…

作者头像 李华