AI-in-a-Box

GitHub
597 197 较难 1 次阅读 1周前MIT图像开发框架语言模型Agent
AI 解读 由 AI 自动生成,仅供参考

AI-in-a-Box 是微软全球技术专家共同打造的一套开源解决方案加速器集合,旨在帮助技术人员快速搭建高质量的人工智能与机器学习环境。面对 AI 开发中环境配置复杂、重复造轮子耗时以及部署标准不一等痛点,它提供了一系列经过实战验证的“开箱即用”模板,让用户能以最小摩擦成本启动项目。

这套工具特别适合开发者、架构师及数据科学家使用,无论是需要构建端到端 MLOps 流程,还是致力于将模型部署到边缘设备(Edge AI),亦或是希望自动化处理文档智能分析与音视频内容理解,都能在其中找到对应的参考架构。其独特亮点在于不仅涵盖了从基础设施搭建(Outer Loop)到模型开发部署(Inner Loop)的全生命周期指导,还特别融入了负责任的 AI 原则、生成式应用安全规范以及大规模扩展最佳实践。通过复用这些成熟模式,用户不仅能显著节省预算和时间,还能确保解决方案具备企业级的可靠性与安全性,从而更专注于核心业务逻辑的创新。

使用场景

某制造企业的工程团队急需将质检模型部署到生产线边缘设备上,以实现实时缺陷检测并降低云端延迟。

没有 AI-in-a-Box 时

  • 环境搭建繁琐:工程师需手动配置 IoT Hub、IoT Edge 及容器注册表等基础设施,耗时数周且易出错。
  • 开发流程割裂:从模型训练到边缘端部署缺乏统一模板,内环(代码迭代)与外环(基建)脱节,协作效率低。
  • 部署风险高:缺少经过验证的最佳实践,模型在边缘设备上的兼容性和稳定性难以保证,调试成本巨大。
  • 重复造轮子:团队需从零编写基础设施即代码(IaC)脚本,无法复用成熟模式,导致预算浪费。

使用 AI-in-a-Box 后

  • 一键式基建交付:直接调用"Edge AI in-a-box"加速器,自动完成 IoT 生态链的全套基础设施编排,部署时间缩短至几天。
  • 全生命周期闭环:提供标准化的端到端模板,无缝衔接模型创建、导出(如 ONNX 格式)及设备下发,内外环开发流畅协同。
  • 质量可靠可控:基于微软全球专家验证的真实场景方案,确保模型在边缘侧运行的高可靠性与安全性,大幅减少现场调试。
  • 成本显著优化:复用现有高质量代码模式,避免重复开发,让团队能专注于核心算法优化而非底层架构搭建。

AI-in-a-Box 通过提供经实战验证的加速模板,帮助企业在边缘智能场景中实现从“漫长试错”到“快速落地”的根本性转变。

运行环境要求

GPU

未说明

内存

未说明

依赖
notesAI-in-a-Box 并非单一软件工具,而是一系列针对 Azure 云环境的解决方案加速器(Solution Accelerators)集合。其运行环境主要依赖于 Microsoft Azure 云服务(如 Azure ML、Azure OpenAI、IoT Edge、Azure SQL 等),而非本地硬件配置。具体的操作系统、GPU、内存及依赖库要求因所选用的具体子项目(如 Edge AI、Doc Intelligence 等)而异,需参考各子项目的独立仓库文档。
python未说明
AI-in-a-Box hero image

快速开始

AI-in-a-Box

FTA AI-in-a-Box: 部署加速器

AI-in-a-Box 借助全球微软客户工程师和架构师的集体智慧,为技术社区开发并提供人工智能和机器学习解决方案。

我们的目标是呈现一套精心挑选的解决方案加速器,帮助工程师快速、顺畅地搭建其 AI/ML 环境与解决方案,同时保持最高水准的质量与效率。

随着我们不断从市场中汲取经验,贡献者们将继续为社区提供在日新月异的 AI 和 ML 领域取得成功所需的工具与资源。

为什么选择 AI-in-a-Box?

  • 加速部署:通过我们经过验证、开箱即用的模式,加快您的解决方案落地。
  • 成本节约:通过复用现有代码和模式,最大化预算效益。
  • 更高品质与可靠性:信赖我们经过真实场景验证的解决方案。
  • 竞争优势:通过加速解决方案部署,领先于竞争对手。

FTA AI-in-a-Box: 部署加速器

可用指南

主题 描述
负责任的人工智能 提供关于负责任地使用 AI 和 LLM 技术的重要指导。
生成式 AI 应用程序的安全性 本文档为生成式 AI (GenAI) 应用程序提供了具体的安全指导。
扩展 OpenAI 应用程序 本文档包含在 Azure 中扩展 OpenAI 应用程序的最佳实践。

可用的“-in-a-Box”加速器

模式 描述 支持的用例与功能
Azure ML 运营化 in-a-box 从模型开发到部署和监控的样板数据科学项目
  • 端到端 MLOps 项目模板
  • 外层循环(基础设施搭建)
  • 内层循环(模型创建和部署生命周期)
  • 边缘 AI in-a-box 从模型创建到在边缘设备上部署的边缘 AI
  • 创建模型并部署到边缘设备。
  • 外层循环:基础设施搭建(IoT 中心、IoT Edge、边缘虚拟机、容器注册表、Azure ML)
  • 内层循环(模型创建和部署)
  • AML 边缘 in-a-box 从模型创建到在边缘设备上部署的边缘 AI 利用 Azure ML、IoT Edge 和 IoT 中心编排整个边缘 AI 模型生命周期——从创建到部署——同时借助 Azure ML CLI V2 实现简化管理。
    Custom Vision 边缘 in-a-box 从模型创建到在边缘设备上部署的边缘 AI 边缘 AI 通过将分析移至数据源附近来降低云端延迟,从而实现更快的响应。该加速器演示如何使用 Custom Vision 训练模型,并将其导出为 ONNX 或 Dockerfile 格式以便在边缘部署。
    文档智能 in-a-box 此加速器使企业能够自动化 PDF 表单处理,实现运营现代化,节省时间并降低成本,助力数字化转型之旅。
  • 接收 PDF 表单
  • 用于编排的函数应用和逻辑应用
  • 文档智能模型用于表单处理和内容提取
  • 将 PDF 数据保存到 Azure Cosmos DB
  • 图像与视频分析 in-a-box 使用 Azure AI Vision 从图像和视频中提取信息,并将结果连同提示和系统消息一起发送给具有视觉功能的 Azure GPT-4 Turbo。
  • 通过 Azure 数据工厂进行编排
  • 低代码解决方案,可通过 ADF 参数轻松扩展以适应您自己的用例
  • 可将同一解决方案和已部署资源用于多种不同场景
  • 将 GPT4-V 的结果保存到 Azure CosmosDB
  • 认知服务着陆区 in-a-box 最小化的企业级网络和 AI 服务设置,可在安全环境中支持大多数认知服务场景
  • 中心辐射型 Vnet 架构及对等互连
  • 认知服务部署
  • 专用终结点设置
  • 与 PaaS DNS 解析器集成的专用 DNS
  • 语义核 bot in-a-box 面向高级 Azure OpenAI Bot 的可扩展解决方案加速器
  • 将 Azure OpenAI bot 部署到多个渠道(Web、Teams、Slack 等)
  • 内置检索增强生成 (RAG) 支持
  • 实施自定义 AI 插件
  • NLP 转 SQL in-a-box 借助 Azure OpenAI、语义核和 Azure 语音服务,释放尖端语音驱动的 SQL 查询系统的强大功能。只需用自然语言说出您的数据请求,剩下的就交给它吧。
  • 允许用户以口头方式表达自然语言查询
  • 使用 Azure 语音和 AOAI 将其转换为 SQL 语句
  • 在 Azure SQL 数据库上执行
  • 助手 API 笔记本 借助助手 API 的简洁性,开发者可以无缝地将助手与各种功能集成,从执行代码到检索数据,从而为用户提供灵活且动态的数字助手,满足他们的个性化需求。
  • 提供三大核心能力:代码解释器(技术任务)、检索(查找信息)和函数调用(执行任务)
  • 这些能力结合在一起,形成一个多功能超级助手,可处理各种任务
  • 助手 API bot in-a-box 此示例提供了逐步指南,说明如何部署一个基于 Azure OpenAI 助手 API 的虚拟助手。内容涵盖基础设施部署、在 AI Studio 和 Azure 门户上的配置,以及端到端测试示例。
  • 部署必要的基础设施以支持 Azure OpenAI 助手
  • 配置为具备所需工具的助手。
  • 将 Bot Framework 应用程序连接到您的助手,以便将聊天部署到多个渠道
  • 主要联系人及贡献者

    如果您有任何问题或希望参与贡献,请联系:aibox@microsoft.com

    联系人 GitHub ID 邮箱
    Alex Morales @msalemor alemor@microsoft.com
    Andre Dewes @andredewes andredewes@microsoft.com
    Andrés Padilla @AndresPad andres.padilla@microsoft.com
    Chris Ayers @codebytes chrisayers@microsoft.com
    Eduardo Noriega @EduardoN ednorieg@microsoft.com
    Franklin Guimaraes @franklinlindemberg fguimaraes@microsoft.com
    Jean Hayes @jehayesms jean.hayes@microsoft.com
    Marco Aurélio Bigélli Cardoso @MarcoABCardoso macardoso@microsoft.com
    Maria Vrabie @MariaVrabie mavrabie@microsoft.com
    Neeraj Jhaveri @neerajjhaveri neeraj.jhaveri@microsoft.com
    Thiago Rotta @rottathiago thiago.rotta@microsoft.com
    Victor Santana @Welasco vsantana@microsoft.com
    Sabyasachi Samaddar @ssamadda ssamadda@microsoft.com

    常见问题

    相似工具推荐

    openclaw

    OpenClaw 是一款专为个人打造的本地化 AI 助手,旨在让你在自己的设备上拥有完全可控的智能伙伴。它打破了传统 AI 助手局限于特定网页或应用的束缚,能够直接接入你日常使用的各类通讯渠道,包括微信、WhatsApp、Telegram、Discord、iMessage 等数十种平台。无论你在哪个聊天软件中发送消息,OpenClaw 都能即时响应,甚至支持在 macOS、iOS 和 Android 设备上进行语音交互,并提供实时的画布渲染功能供你操控。 这款工具主要解决了用户对数据隐私、响应速度以及“始终在线”体验的需求。通过将 AI 部署在本地,用户无需依赖云端服务即可享受快速、私密的智能辅助,真正实现了“你的数据,你做主”。其独特的技术亮点在于强大的网关架构,将控制平面与核心助手分离,确保跨平台通信的流畅性与扩展性。 OpenClaw 非常适合希望构建个性化工作流的技术爱好者、开发者,以及注重隐私保护且不愿被单一生态绑定的普通用户。只要具备基础的终端操作能力(支持 macOS、Linux 及 Windows WSL2),即可通过简单的命令行引导完成部署。如果你渴望拥有一个懂你

    349.3k|★★★☆☆|1周前
    Agent开发框架图像

    stable-diffusion-webui

    stable-diffusion-webui 是一个基于 Gradio 构建的网页版操作界面,旨在让用户能够轻松地在本地运行和使用强大的 Stable Diffusion 图像生成模型。它解决了原始模型依赖命令行、操作门槛高且功能分散的痛点,将复杂的 AI 绘图流程整合进一个直观易用的图形化平台。 无论是希望快速上手的普通创作者、需要精细控制画面细节的设计师,还是想要深入探索模型潜力的开发者与研究人员,都能从中获益。其核心亮点在于极高的功能丰富度:不仅支持文生图、图生图、局部重绘(Inpainting)和外绘(Outpainting)等基础模式,还独创了注意力机制调整、提示词矩阵、负向提示词以及“高清修复”等高级功能。此外,它内置了 GFPGAN 和 CodeFormer 等人脸修复工具,支持多种神经网络放大算法,并允许用户通过插件系统无限扩展能力。即使是显存有限的设备,stable-diffusion-webui 也提供了相应的优化选项,让高质量的 AI 艺术创作变得触手可及。

    162.1k|★★★☆☆|1周前
    开发框架图像Agent

    everything-claude-code

    everything-claude-code 是一套专为 AI 编程助手(如 Claude Code、Codex、Cursor 等)打造的高性能优化系统。它不仅仅是一组配置文件,而是一个经过长期实战打磨的完整框架,旨在解决 AI 代理在实际开发中面临的效率低下、记忆丢失、安全隐患及缺乏持续学习能力等核心痛点。 通过引入技能模块化、直觉增强、记忆持久化机制以及内置的安全扫描功能,everything-claude-code 能显著提升 AI 在复杂任务中的表现,帮助开发者构建更稳定、更智能的生产级 AI 代理。其独特的“研究优先”开发理念和针对 Token 消耗的优化策略,使得模型响应更快、成本更低,同时有效防御潜在的攻击向量。 这套工具特别适合软件开发者、AI 研究人员以及希望深度定制 AI 工作流的技术团队使用。无论您是在构建大型代码库,还是需要 AI 协助进行安全审计与自动化测试,everything-claude-code 都能提供强大的底层支持。作为一个曾荣获 Anthropic 黑客大奖的开源项目,它融合了多语言支持与丰富的实战钩子(hooks),让 AI 真正成长为懂上

    160k|★★☆☆☆|今天
    开发框架Agent语言模型

    opencode

    OpenCode 是一款开源的 AI 编程助手(Coding Agent),旨在像一位智能搭档一样融入您的开发流程。它不仅仅是一个代码补全插件,而是一个能够理解项目上下文、自主规划任务并执行复杂编码操作的智能体。无论是生成全新功能、重构现有代码,还是排查难以定位的 Bug,OpenCode 都能通过自然语言交互高效完成,显著减少开发者在重复性劳动和上下文切换上的时间消耗。 这款工具专为软件开发者、工程师及技术研究人员设计,特别适合希望利用大模型能力来提升编码效率、加速原型开发或处理遗留代码维护的专业人群。其核心亮点在于完全开源的架构,这意味着用户可以审查代码逻辑、自定义行为策略,甚至私有化部署以保障数据安全,彻底打破了传统闭源 AI 助手的“黑盒”限制。 在技术体验上,OpenCode 提供了灵活的终端界面(Terminal UI)和正在测试中的桌面应用程序,支持 macOS、Windows 及 Linux 全平台。它兼容多种包管理工具,安装便捷,并能无缝集成到现有的开发环境中。无论您是追求极致控制权的资深极客,还是渴望提升产出的独立开发者,OpenCode 都提供了一个透明、可信

    144.3k|★☆☆☆☆|2天前
    Agent插件

    ComfyUI

    ComfyUI 是一款功能强大且高度模块化的视觉 AI 引擎,专为设计和执行复杂的 Stable Diffusion 图像生成流程而打造。它摒弃了传统的代码编写模式,采用直观的节点式流程图界面,让用户通过连接不同的功能模块即可构建个性化的生成管线。 这一设计巧妙解决了高级 AI 绘图工作流配置复杂、灵活性不足的痛点。用户无需具备编程背景,也能自由组合模型、调整参数并实时预览效果,轻松实现从基础文生图到多步骤高清修复等各类复杂任务。ComfyUI 拥有极佳的兼容性,不仅支持 Windows、macOS 和 Linux 全平台,还广泛适配 NVIDIA、AMD、Intel 及苹果 Silicon 等多种硬件架构,并率先支持 SDXL、Flux、SD3 等前沿模型。 无论是希望深入探索算法潜力的研究人员和开发者,还是追求极致创作自由度的设计师与资深 AI 绘画爱好者,ComfyUI 都能提供强大的支持。其独特的模块化架构允许社区不断扩展新功能,使其成为当前最灵活、生态最丰富的开源扩散模型工具之一,帮助用户将创意高效转化为现实。

    109.2k|★★☆☆☆|今天
    开发框架图像Agent

    gemini-cli

    gemini-cli 是一款由谷歌推出的开源 AI 命令行工具,它将强大的 Gemini 大模型能力直接集成到用户的终端环境中。对于习惯在命令行工作的开发者而言,它提供了一条从输入提示词到获取模型响应的最短路径,无需切换窗口即可享受智能辅助。 这款工具主要解决了开发过程中频繁上下文切换的痛点,让用户能在熟悉的终端界面内直接完成代码理解、生成、调试以及自动化运维任务。无论是查询大型代码库、根据草图生成应用,还是执行复杂的 Git 操作,gemini-cli 都能通过自然语言指令高效处理。 它特别适合广大软件工程师、DevOps 人员及技术研究人员使用。其核心亮点包括支持高达 100 万 token 的超长上下文窗口,具备出色的逻辑推理能力;内置 Google 搜索、文件操作及 Shell 命令执行等实用工具;更独特的是,它支持 MCP(模型上下文协议),允许用户灵活扩展自定义集成,连接如图像生成等外部能力。此外,个人谷歌账号即可享受免费的额度支持,且项目基于 Apache 2.0 协议完全开源,是提升终端工作效率的理想助手。

    100.8k|★★☆☆☆|1周前
    插件Agent图像