ai-data-science-team

GitHub
5.2k 900 简单 1 次阅读 昨天MIT语言模型数据工具Agent开发框架其他图像
AI 解读 由 AI 自动生成,仅供参考

ai-data-science-team 是一个由多个智能体组成的 AI 数据科学团队,旨在帮助开发者将常见的数据分析任务效率提升十倍。它不仅仅是一个代码库,更包含了一款名为"AI Pipeline Studio"的核心应用,能够将数据处理流程转化为可视化、可复现的流水线。

在传统数据科学工作中,从数据加载、清洗、特征工程到建模评估,往往需要人工编写大量重复代码且难以维护。ai-data-science-team 通过引入分工明确的专业智能体(如数据清洗代理、可视化代理、SQL 交互代理及监督代理等),自动协同完成这些复杂步骤,显著降低了操作门槛并确保了流程的可追溯性。其独特的技术亮点在于支持“手动 +AI"混合工作流,既保留了人工干预的灵活性,又利用了 AI 的自动化能力,同时兼容 OpenAI 云端模型与 Ollama 本地大模型,兼顾了隐私与成本需求。

这款工具非常适合数据科学家、Python 开发者以及希望快速构建自动化分析流程的研究人员使用。无论你是想探索自动化 EDA(探索性数据分析),还是希望搭建端到端的机器学习管道,ai-data-science-team 都能提供一个高效、灵活且可视化的解决方案,让你从繁琐的代码细节中解放出来,专注于业务洞察。

使用场景

某电商公司的数据分析师需要在半天内完成对百万级用户行为数据的清洗、探索性分析(EDA)并构建流失预测模型,以支持即将到来的营销活动决策。

没有 ai-data-science-team 时

  • 重复劳动耗时:手动编写大量 Pandas 代码处理缺失值和异常值,仅数据清洗就耗费了 60% 的项目时间。
  • 分析流程割裂:数据加载、可视化图表生成和特征工程分散在不同脚本中,缺乏统一视图,难以复现和追溯分析路径。
  • 建模门槛较高:尝试集成 H2O 或 MLflow 进行模型训练与评估时,需查阅大量文档配置环境,调试过程繁琐。
  • 协作沟通困难:业务方无法直观理解中间分析步骤,只能等待最终报告,导致需求反馈滞后。

使用 ai-data-science-team 后

  • 自动化流水线:通过 AI Pipeline Studio 的可视化编辑器,自动调用 Data Cleaning Agent 和 Feature Engineering Agent,将数小时的清洗工作压缩至分钟级。
  • 全流程可追溯:在统一的“管道优先”工作区中,从数据加载到模型预测的每一步都自动生成可复现代码和血缘记录,随时调整参数重跑。
  • 智能建模辅助:直接利用内置的 H2O ML Agent 和 MLflow Tools Agent 完成模型训练与评估,无需手动配置复杂环境,快速输出高精度预测结果。
  • 交互式协作:业务人员可通过界面直接查看动态图表和中间结论,实时提出调整建议,大幅缩短决策周期。

ai-data-science-team 将原本需要数天协作的数据科学任务转化为可视化的自动化流水线,让分析师从繁琐编码中解放,专注于高价值的业务洞察。

运行环境要求

操作系统
  • 未说明
GPU
  • 非必需
  • 支持使用本地大模型(如通过 Ollama 运行 Llama 3.1),若使用本地模型则取决于具体模型对 GPU 的需求
  • 若仅使用 OpenAI API 则无需 GPU
内存

未说明

依赖
notes该工具主要作为 Python 库和 Streamlit 应用运行。核心功能依赖外部 LLM 服务:既可使用 OpenAI API(需配置 API Key),也可通过 Ollama 部署本地模型(如 llama3.1:8b)。项目处于 Beta 阶段(0.1.0 之前),可能存在破坏性更新。安装方式为克隆仓库后以可编辑模式安装(pip install -e .)。
python3.10+
langchain-openai
langchain-ollama
streamlit
h2o
mlflow
ai-data-science-team hero image

快速开始

AI Data Science Team + AI Pipeline Studio
PyPI versions license GitHub Repo stars

AI 数据科学团队

AI 数据科学团队是一个用于常见数据科学工作流的专业化智能体 Python 库,同时配备旗舰应用:AI Pipeline Studio。该工作室可将您的工作转化为可视化、可复现的流程管线,而 AI 团队则负责数据加载、清洗、可视化及建模。

状态: 测试版。在 0.1.0 版本发布之前,可能会出现破坏性变更。

请在 GitHub 上为我们点个星(只需 2 秒钟,却意义重大)。

AI Pipeline Studio(旗舰应用)

AI Pipeline Studio 是 AI 数据科学团队实际应用的主要示例。

AI Pipeline Studio

亮点:

  • 以流程管线为核心的开发环境:可视化编辑器、表格、图表、探索性数据分析、代码、模型、预测结果、MLflow
  • 手动与 AI 步骤结合,具备 lineage 追踪和可复现的脚本
  • 多数据集处理与合并工作流
  • 支持项目保存:仅元数据或完整数据
  • 存储占用控制与数据恢复工作流

运行方式:

streamlit run apps/ai-pipeline-studio-app/app.py

完整应用文档:apps/ai-pipeline-studio-app/README.md

快速入门

需求

  • Python 3.10+
  • OpenAI API 密钥(或 Ollama 用于本地模型)

安装应用与库

克隆仓库并以可编辑模式安装:

pip install -e .

运行 AI Pipeline Studio 应用

streamlit run apps/ai-pipeline-studio-app/app.py

库概览

该仓库同时包含 AI Pipeline Studio 应用和底层的 AI 数据科学团队 库。该库提供了构建智能体的基础模块以及多智能体工作流,适用于以下场景:

  • 数据加载与检查
  • 清洗、整理与特征工程
  • 可视化与探索性数据分析
  • 建模与评估(H2O + MLflow 工具)
  • SQL 数据库交互

智能体(快照)

智能体示例位于 examples/ 目录中。值得关注的智能体包括:

  • 数据加载工具智能体
  • 数据整理智能体
  • 数据清洗智能体
  • 数据可视化智能体
  • 探索性数据分析工具智能体
  • 特征工程智能体
  • SQL 数据库智能体
  • H2O 机器学习智能体
  • MLflow 工具智能体
  • 多智能体工作流(例如:Pandas 数据分析师、SQL 数据分析师)
  • 监督智能体(负责协调其他智能体)
  • 面向数据科学任务的自定义工具

应用程序

所有应用程序均可在 apps/ 目录中找到。值得关注的应用程序包括:

  • AI Pipeline Studio:apps/ai-pipeline-studio-app/
  • EDA 探索者应用:apps/exploratory-copilot-app/
  • Pandas 数据分析师应用:apps/pandas-data-analyst-app/

使用 OpenAI

from langchain_openai import ChatOpenAI
llm = ChatOpenAI(
    model_name="gpt-4.1-mini",
)

使用 Ollama(本地 LLM)

ollama serve
ollama pull llama3.1:8b
from langchain_ollama import ChatOllama

llm = ChatOllama(
    model="llama3.1:8b",
)

下一代 AI 智能体工作坊

想学习如何为真实的数据科学工作流构建 AI 智能体和 AI 应用吗?欢迎参加我的下一代 AI 工作坊: https://learn.business-science.io/ai-register

版本历史

0.0.0.90172025/12/20
0.0.0.90162025/04/03
0.0.0.90152025/03/08
0.0.0.90142025/02/23
0.0.0.90132025/02/13
0.0.0.90122025/02/04
0.0.0.90112025/01/31
0.0.0.90102025/01/28
0.0.0.90092025/01/18
0.0.0.90082025/01/13
0.0.0.90072025/01/08
0.0.0.90052024/12/31
0.0.0.90042024/12/25
0.0.0.90032024/12/20
0.0.0.90022024/12/16
0.0.0.90002024/12/13

常见问题

相似工具推荐

openclaw

OpenClaw 是一款专为个人打造的本地化 AI 助手,旨在让你在自己的设备上拥有完全可控的智能伙伴。它打破了传统 AI 助手局限于特定网页或应用的束缚,能够直接接入你日常使用的各类通讯渠道,包括微信、WhatsApp、Telegram、Discord、iMessage 等数十种平台。无论你在哪个聊天软件中发送消息,OpenClaw 都能即时响应,甚至支持在 macOS、iOS 和 Android 设备上进行语音交互,并提供实时的画布渲染功能供你操控。 这款工具主要解决了用户对数据隐私、响应速度以及“始终在线”体验的需求。通过将 AI 部署在本地,用户无需依赖云端服务即可享受快速、私密的智能辅助,真正实现了“你的数据,你做主”。其独特的技术亮点在于强大的网关架构,将控制平面与核心助手分离,确保跨平台通信的流畅性与扩展性。 OpenClaw 非常适合希望构建个性化工作流的技术爱好者、开发者,以及注重隐私保护且不愿被单一生态绑定的普通用户。只要具备基础的终端操作能力(支持 macOS、Linux 及 Windows WSL2),即可通过简单的命令行引导完成部署。如果你渴望拥有一个懂你

349.3k|★★★☆☆|1周前
Agent开发框架图像

stable-diffusion-webui

stable-diffusion-webui 是一个基于 Gradio 构建的网页版操作界面,旨在让用户能够轻松地在本地运行和使用强大的 Stable Diffusion 图像生成模型。它解决了原始模型依赖命令行、操作门槛高且功能分散的痛点,将复杂的 AI 绘图流程整合进一个直观易用的图形化平台。 无论是希望快速上手的普通创作者、需要精细控制画面细节的设计师,还是想要深入探索模型潜力的开发者与研究人员,都能从中获益。其核心亮点在于极高的功能丰富度:不仅支持文生图、图生图、局部重绘(Inpainting)和外绘(Outpainting)等基础模式,还独创了注意力机制调整、提示词矩阵、负向提示词以及“高清修复”等高级功能。此外,它内置了 GFPGAN 和 CodeFormer 等人脸修复工具,支持多种神经网络放大算法,并允许用户通过插件系统无限扩展能力。即使是显存有限的设备,stable-diffusion-webui 也提供了相应的优化选项,让高质量的 AI 艺术创作变得触手可及。

162.1k|★★★☆☆|1周前
开发框架图像Agent

everything-claude-code

everything-claude-code 是一套专为 AI 编程助手(如 Claude Code、Codex、Cursor 等)打造的高性能优化系统。它不仅仅是一组配置文件,而是一个经过长期实战打磨的完整框架,旨在解决 AI 代理在实际开发中面临的效率低下、记忆丢失、安全隐患及缺乏持续学习能力等核心痛点。 通过引入技能模块化、直觉增强、记忆持久化机制以及内置的安全扫描功能,everything-claude-code 能显著提升 AI 在复杂任务中的表现,帮助开发者构建更稳定、更智能的生产级 AI 代理。其独特的“研究优先”开发理念和针对 Token 消耗的优化策略,使得模型响应更快、成本更低,同时有效防御潜在的攻击向量。 这套工具特别适合软件开发者、AI 研究人员以及希望深度定制 AI 工作流的技术团队使用。无论您是在构建大型代码库,还是需要 AI 协助进行安全审计与自动化测试,everything-claude-code 都能提供强大的底层支持。作为一个曾荣获 Anthropic 黑客大奖的开源项目,它融合了多语言支持与丰富的实战钩子(hooks),让 AI 真正成长为懂上

159.3k|★★☆☆☆|今天
开发框架Agent语言模型

opencode

OpenCode 是一款开源的 AI 编程助手(Coding Agent),旨在像一位智能搭档一样融入您的开发流程。它不仅仅是一个代码补全插件,而是一个能够理解项目上下文、自主规划任务并执行复杂编码操作的智能体。无论是生成全新功能、重构现有代码,还是排查难以定位的 Bug,OpenCode 都能通过自然语言交互高效完成,显著减少开发者在重复性劳动和上下文切换上的时间消耗。 这款工具专为软件开发者、工程师及技术研究人员设计,特别适合希望利用大模型能力来提升编码效率、加速原型开发或处理遗留代码维护的专业人群。其核心亮点在于完全开源的架构,这意味着用户可以审查代码逻辑、自定义行为策略,甚至私有化部署以保障数据安全,彻底打破了传统闭源 AI 助手的“黑盒”限制。 在技术体验上,OpenCode 提供了灵活的终端界面(Terminal UI)和正在测试中的桌面应用程序,支持 macOS、Windows 及 Linux 全平台。它兼容多种包管理工具,安装便捷,并能无缝集成到现有的开发环境中。无论您是追求极致控制权的资深极客,还是渴望提升产出的独立开发者,OpenCode 都提供了一个透明、可信

144.3k|★☆☆☆☆|昨天
Agent插件

ComfyUI

ComfyUI 是一款功能强大且高度模块化的视觉 AI 引擎,专为设计和执行复杂的 Stable Diffusion 图像生成流程而打造。它摒弃了传统的代码编写模式,采用直观的节点式流程图界面,让用户通过连接不同的功能模块即可构建个性化的生成管线。 这一设计巧妙解决了高级 AI 绘图工作流配置复杂、灵活性不足的痛点。用户无需具备编程背景,也能自由组合模型、调整参数并实时预览效果,轻松实现从基础文生图到多步骤高清修复等各类复杂任务。ComfyUI 拥有极佳的兼容性,不仅支持 Windows、macOS 和 Linux 全平台,还广泛适配 NVIDIA、AMD、Intel 及苹果 Silicon 等多种硬件架构,并率先支持 SDXL、Flux、SD3 等前沿模型。 无论是希望深入探索算法潜力的研究人员和开发者,还是追求极致创作自由度的设计师与资深 AI 绘画爱好者,ComfyUI 都能提供强大的支持。其独特的模块化架构允许社区不断扩展新功能,使其成为当前最灵活、生态最丰富的开源扩散模型工具之一,帮助用户将创意高效转化为现实。

108.3k|★★☆☆☆|1周前
开发框架图像Agent

gemini-cli

gemini-cli 是一款由谷歌推出的开源 AI 命令行工具,它将强大的 Gemini 大模型能力直接集成到用户的终端环境中。对于习惯在命令行工作的开发者而言,它提供了一条从输入提示词到获取模型响应的最短路径,无需切换窗口即可享受智能辅助。 这款工具主要解决了开发过程中频繁上下文切换的痛点,让用户能在熟悉的终端界面内直接完成代码理解、生成、调试以及自动化运维任务。无论是查询大型代码库、根据草图生成应用,还是执行复杂的 Git 操作,gemini-cli 都能通过自然语言指令高效处理。 它特别适合广大软件工程师、DevOps 人员及技术研究人员使用。其核心亮点包括支持高达 100 万 token 的超长上下文窗口,具备出色的逻辑推理能力;内置 Google 搜索、文件操作及 Shell 命令执行等实用工具;更独特的是,它支持 MCP(模型上下文协议),允许用户灵活扩展自定义集成,连接如图像生成等外部能力。此外,个人谷歌账号即可享受免费的额度支持,且项目基于 Apache 2.0 协议完全开源,是提升终端工作效率的理想助手。

100.8k|★★☆☆☆|1周前
插件Agent图像