adaptive
Adaptive 是一款开源 Python 库,专为数学函数的并行自适应学习而设计。它解决了传统网格采样效率低下的痛点:在面对计算耗时较长(单次评估约需 50 毫秒以上)的复杂函数时,无需盲目计算所有密集网格点,而是能智能识别参数空间中的关键区域,动态选择最具价值的点进行评估。
这一机制显著减少了不必要的计算量,在节省时间与算力资源的同时,确保了结果的高精度。Adaptive 特别适合科研人员、数据科学家及工程开发者使用,尤其是那些需要在计算集群上运行大规模模拟、优化实验或处理多维函数问题的用户。
其核心技术亮点在于“智能自适应采样”算法,能够根据用户定义的损失函数灵活调整策略。此外,Adaptive 原生支持并行执行,可充分利用多核或集群资源加速运算;在 Jupyter 环境中,它还提供了实时绘图与信息组件,让用户能直观监控学习进程并及时调整方向。凭借简洁的接口和对多维标量或向量输出的广泛支持,Adaptive 让复杂的函数探索变得高效且易于上手。
使用场景
某量子物理研究团队正在绘制一个高维参数空间下的能量景观图,以寻找超导材料的最优配置,该函数单次计算耗时约 200 毫秒且计算资源昂贵。
没有 adaptive 时
- 资源浪费严重:为了捕捉细节,研究人员不得不预设极密集的均匀网格,导致在函数变化平缓的区域进行了大量无意义的重复计算。
- 关键特征遗漏:固定步长无法动态调整,极易错过狭窄的尖锐峰值或奇点,最终生成的图像分辨率不足,误导物理结论。
- 调试周期漫长:任务提交后只能被动等待数小时直至全部完成,若中途发现参数范围设置错误,必须推翻重来,无法实时干预。
- 并行效率低下:手动编写多进程脚本管理任务队列复杂且易错,难以充分利用集群的数百个核心进行弹性伸缩。
使用 adaptive 后
- 智能按需采样:adaptive 自动识别函数变化剧烈的区域并密集采样,而在平滑区域稀疏处理,用仅 20% 的计算量达到了更高的精度。
- 精准捕捉细节:算法动态聚焦于“感兴趣”的参数空间,完美还原了微小的能量阱和陡峭边界,确保物理模型准确无误。
- 实时监控进度:结合 Jupyter Notebook 的实时绘图功能,研究者能亲眼看到采样点如何随时间聚集到关键区域,随时调整策略。
- 原生并行加速:只需几行代码即可将评估任务分发至整个计算集群,adaptive 自动负载均衡,将原本需要一整天的计算缩短至一小时。
adaptive 通过将“盲目穷举”转变为“智能探索”,让科研人员在有限的算力预算内,以前所未有的效率和精度解析复杂的数学函数。
运行环境要求
- Linux
- Windows
- macOS
未说明
未说明

快速开始
Adaptive: 数学函数的并行主动学习 :brain::1234:
Adaptive 是一个开源的 Python 库,用于简化自适应并行函数评估。它不会在密集网格上计算所有点,而是根据您提供的函数和边界条件,智能地选择参数空间中“最佳”的点。只需少量代码,您就可以在计算集群上执行评估、显示实时图表,并优化自适应采样算法。
由于需要花费一定时间来选择潜在的有趣点,Adaptive 在每次函数评估至少耗时 ≈50ms 的计算任务中效率最高。
要查看 Adaptive 的实际效果,请尝试 Binder 上的示例笔记本,或浏览 Read the Docs 上的教程。
[目录] 📚
:star: 主要特性
- 🎯 智能自适应采样:Adaptive 专注于函数中的兴趣区域,以更少的评估次数获得更好的结果,从而节省时间和计算资源。
- ⚡ 并行执行:该库利用并行处理加速函数评估,充分利用可用的计算资源。
- 📊 实时绘图与信息小部件:在 Jupyter 笔记本中工作时,Adaptive 提供学习过程的实时可视化,便于监控进度并识别改进方向。
- 🔧 可定制的损失函数:Adaptive 支持多种损失函数,并允许用户自定义,以便根据具体需求调整学习过程。
- 📈 支持多维函数:该库可以处理具有标量或向量输出的一维或多维函数,为各种问题提供了灵活性。
- 🧩 无缝集成:Adaptive 提供简单直观的接口,易于与现有 Python 项目和工作流程集成。
- 💾 灵活的数据导出:该库提供将学习到的数据导出为 NumPy 数组或 Pandas DataFrame 的选项,确保与各种数据处理工具兼容。
- 🌐 开源且社区驱动:Adaptive 是一个开源项目,鼓励社区贡献,以不断改进和扩展库的功能与能力。
:rocket: 使用示例
在 Jupyter 笔记本中自适应地学习一维函数并实时绘制过程:
from adaptive import notebook_extension, Runner, Learner1D
notebook_extension()
def peak(x, a=0.01):
return x + a**2 / (a**2 + x**2)
learner = Learner1D(peak, bounds=(-1, 1))
runner = Runner(learner, loss_goal=0.01)
runner.live_info()
runner.live_plot()
:floppy_disk: 导出数据
您可以将学习到的数据导出为 NumPy 数组:
data = learner.to_numpy()
如果您已安装 Pandas,也可以将数据导出为 DataFrame:
df = learner.to_dataframe()
:test_tube: 已实现的算法
adaptive 的核心概念是 学习器。
学习器 会在其参数空间中最有趣的位置对函数进行采样,从而实现对函数的最优采样。
随着函数在更多点上被评估,学习器会不断改进其对下一步最佳采样位置的理解。
“最佳位置”的定义取决于你的应用领域。
虽然 adaptive 提供了合理的默认选择,但自适应采样过程完全可以自定义。
目前已实现以下学习器:
Learner1D: 用于一维函数f: ℝ → ℝ^N,Learner2D: 用于二维函数f: ℝ^2 → ℝ^N,LearnerND: 用于高维函数f: ℝ^N → ℝ^M,AverageLearner: 用于随机变量,允许在多次评估中对结果取平均,AverageLearner1D: 用于随机一维函数,在每个点上估计均值,IntegratorLearner: 用于对一维函数f: ℝ → ℝ进行积分,BalancingLearner: 用于同时运行多个学习器,并在收集到更多数据点时选择“最佳”学习器。
元学习器(与其他学习器配合使用):
BalancingLearner: 用于同时运行多个学习器,每次获得更多数据点时选择“最优化”的一个,DataSaver: 当你的函数返回的不只是标量或向量时使用。
除了学习器之外,adaptive 还提供了跨多个核心或机器进行并行采样的原语,并内置支持:
concurrent.futures、
mpi4py、
loky、
ipyparallel 以及
distributed。
:package: 安装
adaptive 支持 Python 3.7 及以上版本,可在 Linux、Windows 或 Mac 上运行,并提供可选扩展以与 Jupyter/IPython Notebook 配合使用。
推荐使用 conda 安装 adaptive:
conda install -c conda-forge adaptive
adaptive 也可通过 PyPI 获取:
pip install "adaptive[notebook]"
上述 [notebook] 选项还会安装在 Jupyter Notebook 中运行 adaptive 所需的可选依赖项。
要在 JupyterLab 中使用 Adaptive,你需要安装以下 Lab 扩展:
jupyter labextension install @jupyter-widgets/jupyterlab-manager
jupyter labextension install @pyviz/jupyterlab_pyviz
:wrench: 开发
克隆仓库并运行 pip install -e ".[notebook,test,other]",将克隆的仓库链接添加到你的 Python 路径中:
git clone git@github.com:python-adaptive/adaptive.git
cd adaptive
pip install -e ".[notebook,test,other]"
我们建议在开发 Adaptive 时使用 Conda 环境或 virtualenv 进行包管理。
为避免笔记本输出污染提交历史,请在仓库中运行以下命令设置 Git 过滤器:
python ipynb_filter.py
为了保持一致的代码风格,我们使用 pre-commit。请在仓库中运行以下命令安装它:
pre-commit install
:books: 引用
如果你在科研工作中使用了 Adaptive,请按以下方式引用:
@misc{Nijholt2019,
doi = {10.5281/zenodo.1182437},
author = {Bas Nijholt and Joseph Weston and Jorn Hoofwijk and Anton Akhmerov},
title = {\textit{Adaptive}: 并行主动学习数学函数},
publisher = {Zenodo},
year = {2019}
}
:page_facing_up: 论文草稿
如果你对 Adaptive 背后的科学背景和原理感兴趣,我们建议你查看目前正在撰写的 论文草稿。这篇论文全面概述了 Adaptive 库的概念、算法和应用。
:sparkles: 致谢
我们谨向以下人士致谢:
- Pedro Gonnet,感谢他实现了 CQUAD,即“Increasing the Reliability of Adaptive Quadrature Using Explicit Interpolants”一文中描述的“算法 4”,作者:P. Gonnet,ACM Transactions on Mathematical Software,37(3),文章编号 26,2010 年。
- Pauli Virtanen,感谢他编写的
AdaptiveTriSampling脚本(由于 SciPy Central 已关闭,该脚本目前无法在线获取),该脚本为adaptive.Learner2D的设计提供了灵感。
如需一般性讨论,欢迎加入我们的 Gitter 聊天频道。 如果您发现任何错误或有功能建议,请在 GitHub 上提交 issue 或 pull request。
版本历史
v1.4.22025/12/12v1.4.12025/05/13v1.4.02025/05/13v1.3.22025/03/03v1.3.12025/01/07v1.3.02024/05/31v1.2.02024/04/10v1.1.02023/11/29v1.0.02023/05/15v0.15.02022/12/02v0.15.12022/12/02v0.14.22022/10/14v0.14.12022/10/11v0.14.02022/10/05v0.13.22022/05/31v0.13.12022/01/25v0.13.02021/09/10v0.12.22021/03/23v0.12.12021/03/23v0.12.02021/03/23常见问题
相似工具推荐
openclaw
OpenClaw 是一款专为个人打造的本地化 AI 助手,旨在让你在自己的设备上拥有完全可控的智能伙伴。它打破了传统 AI 助手局限于特定网页或应用的束缚,能够直接接入你日常使用的各类通讯渠道,包括微信、WhatsApp、Telegram、Discord、iMessage 等数十种平台。无论你在哪个聊天软件中发送消息,OpenClaw 都能即时响应,甚至支持在 macOS、iOS 和 Android 设备上进行语音交互,并提供实时的画布渲染功能供你操控。 这款工具主要解决了用户对数据隐私、响应速度以及“始终在线”体验的需求。通过将 AI 部署在本地,用户无需依赖云端服务即可享受快速、私密的智能辅助,真正实现了“你的数据,你做主”。其独特的技术亮点在于强大的网关架构,将控制平面与核心助手分离,确保跨平台通信的流畅性与扩展性。 OpenClaw 非常适合希望构建个性化工作流的技术爱好者、开发者,以及注重隐私保护且不愿被单一生态绑定的普通用户。只要具备基础的终端操作能力(支持 macOS、Linux 及 Windows WSL2),即可通过简单的命令行引导完成部署。如果你渴望拥有一个懂你
stable-diffusion-webui
stable-diffusion-webui 是一个基于 Gradio 构建的网页版操作界面,旨在让用户能够轻松地在本地运行和使用强大的 Stable Diffusion 图像生成模型。它解决了原始模型依赖命令行、操作门槛高且功能分散的痛点,将复杂的 AI 绘图流程整合进一个直观易用的图形化平台。 无论是希望快速上手的普通创作者、需要精细控制画面细节的设计师,还是想要深入探索模型潜力的开发者与研究人员,都能从中获益。其核心亮点在于极高的功能丰富度:不仅支持文生图、图生图、局部重绘(Inpainting)和外绘(Outpainting)等基础模式,还独创了注意力机制调整、提示词矩阵、负向提示词以及“高清修复”等高级功能。此外,它内置了 GFPGAN 和 CodeFormer 等人脸修复工具,支持多种神经网络放大算法,并允许用户通过插件系统无限扩展能力。即使是显存有限的设备,stable-diffusion-webui 也提供了相应的优化选项,让高质量的 AI 艺术创作变得触手可及。
everything-claude-code
everything-claude-code 是一套专为 AI 编程助手(如 Claude Code、Codex、Cursor 等)打造的高性能优化系统。它不仅仅是一组配置文件,而是一个经过长期实战打磨的完整框架,旨在解决 AI 代理在实际开发中面临的效率低下、记忆丢失、安全隐患及缺乏持续学习能力等核心痛点。 通过引入技能模块化、直觉增强、记忆持久化机制以及内置的安全扫描功能,everything-claude-code 能显著提升 AI 在复杂任务中的表现,帮助开发者构建更稳定、更智能的生产级 AI 代理。其独特的“研究优先”开发理念和针对 Token 消耗的优化策略,使得模型响应更快、成本更低,同时有效防御潜在的攻击向量。 这套工具特别适合软件开发者、AI 研究人员以及希望深度定制 AI 工作流的技术团队使用。无论您是在构建大型代码库,还是需要 AI 协助进行安全审计与自动化测试,everything-claude-code 都能提供强大的底层支持。作为一个曾荣获 Anthropic 黑客大奖的开源项目,它融合了多语言支持与丰富的实战钩子(hooks),让 AI 真正成长为懂上
ComfyUI
ComfyUI 是一款功能强大且高度模块化的视觉 AI 引擎,专为设计和执行复杂的 Stable Diffusion 图像生成流程而打造。它摒弃了传统的代码编写模式,采用直观的节点式流程图界面,让用户通过连接不同的功能模块即可构建个性化的生成管线。 这一设计巧妙解决了高级 AI 绘图工作流配置复杂、灵活性不足的痛点。用户无需具备编程背景,也能自由组合模型、调整参数并实时预览效果,轻松实现从基础文生图到多步骤高清修复等各类复杂任务。ComfyUI 拥有极佳的兼容性,不仅支持 Windows、macOS 和 Linux 全平台,还广泛适配 NVIDIA、AMD、Intel 及苹果 Silicon 等多种硬件架构,并率先支持 SDXL、Flux、SD3 等前沿模型。 无论是希望深入探索算法潜力的研究人员和开发者,还是追求极致创作自由度的设计师与资深 AI 绘画爱好者,ComfyUI 都能提供强大的支持。其独特的模块化架构允许社区不断扩展新功能,使其成为当前最灵活、生态最丰富的开源扩散模型工具之一,帮助用户将创意高效转化为现实。
markitdown
MarkItDown 是一款由微软 AutoGen 团队打造的轻量级 Python 工具,专为将各类文件高效转换为 Markdown 格式而设计。它支持 PDF、Word、Excel、PPT、图片(含 OCR)、音频(含语音转录)、HTML 乃至 YouTube 链接等多种格式的解析,能够精准提取文档中的标题、列表、表格和链接等关键结构信息。 在人工智能应用日益普及的今天,大语言模型(LLM)虽擅长处理文本,却难以直接读取复杂的二进制办公文档。MarkItDown 恰好解决了这一痛点,它将非结构化或半结构化的文件转化为模型“原生理解”且 Token 效率极高的 Markdown 格式,成为连接本地文件与 AI 分析 pipeline 的理想桥梁。此外,它还提供了 MCP(模型上下文协议)服务器,可无缝集成到 Claude Desktop 等 LLM 应用中。 这款工具特别适合开发者、数据科学家及 AI 研究人员使用,尤其是那些需要构建文档检索增强生成(RAG)系统、进行批量文本分析或希望让 AI 助手直接“阅读”本地文件的用户。虽然生成的内容也具备一定可读性,但其核心优势在于为机器
LLMs-from-scratch
LLMs-from-scratch 是一个基于 PyTorch 的开源教育项目,旨在引导用户从零开始一步步构建一个类似 ChatGPT 的大型语言模型(LLM)。它不仅是同名技术著作的官方代码库,更提供了一套完整的实践方案,涵盖模型开发、预训练及微调的全过程。 该项目主要解决了大模型领域“黑盒化”的学习痛点。许多开发者虽能调用现成模型,却难以深入理解其内部架构与训练机制。通过亲手编写每一行核心代码,用户能够透彻掌握 Transformer 架构、注意力机制等关键原理,从而真正理解大模型是如何“思考”的。此外,项目还包含了加载大型预训练权重进行微调的代码,帮助用户将理论知识延伸至实际应用。 LLMs-from-scratch 特别适合希望深入底层原理的 AI 开发者、研究人员以及计算机专业的学生。对于不满足于仅使用 API,而是渴望探究模型构建细节的技术人员而言,这是极佳的学习资源。其独特的技术亮点在于“循序渐进”的教学设计:将复杂的系统工程拆解为清晰的步骤,配合详细的图表与示例,让构建一个虽小但功能完备的大模型变得触手可及。无论你是想夯实理论基础,还是为未来研发更大规模的模型做准备
