IsaacLab
Isaac Lab 是一个基于 NVIDIA Isaac Sim 构建的开源统一框架,旨在简化和加速机器人学习的研究工作流。它专为强化学习、模仿学习和运动规划等任务设计,通过提供高度逼真的物理引擎和传感器模拟,有效解决了机器人算法从虚拟仿真到真实世界部署(Sim-to-Real)过程中面临的效率低、精度差及环境复现难等核心痛点。
这款工具非常适合机器人领域的研究人员、算法开发者以及高校师生使用。无论是需要快速验证新算法的学术探索,还是进行大规模数据训练的工程落地,Isaac Lab 都能提供强有力的支持。其独特的技术亮点在于全面的 GPU 加速能力,能够并行运行复杂的计算任务,大幅缩短迭代周期;同时内置了超过 16 种主流机器人模型(如机械臂、四足机器人和人形机器人)及 30 多个开箱即用的训练环境,并支持 RTX 渲染的高精度相机、激光雷达等多种传感器仿真。此外,它还兼容多种流行的强化学习库,既支持本地运行也能扩展至云端,为不同规模的项目提供了极大的灵活性。
使用场景
某机器人初创团队正致力于训练一款四足机器人在复杂废墟环境中自主行走的强化学习策略。
没有 IsaacLab 时
- 仿真速度极慢:在 CPU 上运行物理仿真,单次强化学习迭代需数小时,导致算法验证周期长达数周,严重拖慢研发进度。
- 传感器模拟失真:缺乏高精度的 RTX 光线追踪相机和激光雷达模拟,导致虚拟训练数据与真实世界差异巨大,模型难以迁移到真机(Sim-to-Real 失败)。
- 环境搭建繁琐:每次更换机器人构型或任务场景,都需要重写大量底层代码来配置物理属性和传感器接口,重复劳动占比过高。
- 并发能力受限:无法轻松并行运行数千个环境实例,难以收集足够的多样化数据来训练鲁棒的策略网络。
使用 IsaacLab 后
- GPU 加速提效:利用 GPU 并行计算能力,将仿真速度提升数十倍,原本需要一周的训练任务现在仅需几小时即可完成快速迭代。
- 高保真感知模拟:直接调用内置的 RTX 摄像头和激光雷达模块,生成逼真的深度图与点云数据,显著缩小了虚实差距,真机部署成功率大幅提升。
- 统一框架复用:基于预置的 16+ 种机器人模型和 30+ 个标准环境,团队只需关注核心算法逻辑,无需重复造轮子,新场景搭建时间从几天缩短至几小时。
- 大规模并行训练:轻松在本地或云端分布式启动上千个并行环境,高效采集海量交互数据,使策略能从容应对各种极端地形挑战。
IsaacLab 通过 GPU 加速的高保真仿真与标准化工作流,将机器人强化学习的研发效率从“周级”提升至“小时级”,真正打通了从虚拟训练到现实落地的最后一公里。
运行环境要求
- Linux
- Windows
必需 NVIDIA GPU (基于 Isaac Sim),具体型号和显存未说明,需支持 RTX 渲染
未说明

快速开始

艾萨克实验室
艾萨克实验室 是一个基于 GPU 加速的开源框架,旨在统一并简化机器人研究工作流,例如强化学习、模仿学习和运动规划。它构建于 NVIDIA Isaac Sim 之上,结合了快速且精确的物理与传感器仿真,使其成为机器人领域从仿真到现实迁移的理想选择。
艾萨克实验室为开发者提供了多种用于精确传感器仿真的关键功能,例如基于 RTX 的相机、激光雷达或接触传感器。该框架的 GPU 加速能力使用户能够更快地运行复杂的仿真和计算,这对于强化学习等迭代过程以及数据密集型任务至关重要。此外,艾萨克实验室既可以在本地运行,也可以在云端分布式部署,从而为大规模应用提供灵活性。
有关艾萨克实验室的详细描述,请参阅我们的 arXiv 论文。
核心特性
艾萨克实验室提供了一套全面的工具和环境,专为促进机器人学习而设计:
- 机器人:多样化的机器人集合,涵盖机械臂、四足机器人和人形机器人等多种类型,包含超过 16 种常用模型。
- 环境:超过 30 种即用型训练环境,可与 RSL RL、SKRL、RL Games 或 Stable Baselines 等主流强化学习框架配合使用。我们还支持多智能体强化学习。
- 物理引擎:刚体、关节系统和可变形物体。
- 传感器:RGB/深度/分割相机、相机标注、IMU、接触传感器、射线投射器。
快速入门
文档
我们的 文档页面 提供了您开始所需的一切,包括详细的教程和分步指南。请通过以下链接了解更多:
Isaac Sim 版本依赖
艾萨克实验室构建于 Isaac Sim 之上,因此需要与每个艾萨克实验室版本兼容的特定 Isaac Sim 版本。以下是近期艾萨克实验室发布版本及其对应的 GitHub 分支,以及它们对 Isaac Sim 的版本依赖关系。
| 艾萨克实验室版本 | Isaac Sim 版本 |
|---|---|
main 分支 |
Isaac Sim 4.5 / 5.0 / 5.1 |
v2.3.X |
Isaac Sim 4.5 / 5.0 / 5.1 |
v2.2.X |
Isaac Sim 4.5 / 5.0 |
v2.1.X |
Isaac Sim 4.5 |
v2.0.X |
Isaac Sim 4.5 |
参与艾萨克实验室开发
我们诚挚欢迎社区贡献,以使这一框架更加成熟并惠及所有人。这些贡献可以是漏洞报告、功能请求或代码提交。有关详情,请查阅我们的 贡献指南。
展示与分享:分享您的灵感
我们鼓励您利用此仓库“讨论”版块中的 展示与分享 区域。该空间专为您设计,用于:
- 分享您创建的教程
- 展示您的学习内容
- 呈现您开发的精彩项目
通过分享您的作品,您将激励他人,并为社区的集体知识库做出贡献。您的贡献能够激发新的想法和合作,推动机器人与仿真领域的创新。
故障排除
请参阅 故障排除 部分,获取常见问题的解决方法,或 提交问题。
如遇与 Isaac Sim 相关的问题,建议查阅其 文档 或在其 论坛 上提问。
支持
与 NVIDIA Omniverse 社区建立联系
您是否有想要更广泛分享的项目或资源?我们非常期待您的来信!请发送邮件至 OmniverseCommunity@nvidia.com,与 NVIDIA Omniverse 社区团队探讨如何突出您的工作。
您还可以加入 Omniverse Discord 社区,与其他开发者交流、分享您的项目,并共同打造一个充满活力、协作共生的生态系统,在这里创意与技术交汇融合。您的贡献将对艾萨克实验室社区乃至更广阔的领域产生深远影响!
许可证
Isaac Lab 框架根据 BSD-3 许可证 发布。isaaclab_mimic 扩展及其相应的独立脚本则根据 Apache 2.0 发布。其依赖项和资产的许可证文件位于 docs/licenses 目录中。
请注意,Isaac Lab 需要 Isaac Sim,而 Isaac Sim 包含受专有许可条款约束的组件。有关 Isaac Sim 的许可信息,请参阅 Isaac Sim 许可证。
此外,isaaclab_mimic 扩展需要 cuRobo,cuRobo 也采用专有许可条款,相关许可信息可在 docs/licenses/dependencies/cuRobo-license.txt 中找到。
引用
如果您在研究中使用了 Isaac Lab,请引用以下技术报告:
@article{mittal2025isaaclab,
title={Isaac Lab: A GPU-Accelerated Simulation Framework for Multi-Modal Robot Learning},
author={Mayank Mittal and Pascal Roth and James Tigue and Antoine Richard and Octi Zhang and Peter Du and Antonio Serrano-Muñoz and Xinjie Yao and René Zurbrügg and Nikita Rudin and Lukasz Wawrzyniak and Milad Rakhsha and Alain Denzler and Eric Heiden and Ales Borovicka and Ossama Ahmed and Iretiayo Akinola and Abrar Anwar and Mark T. Carlson and Ji Yuan Feng and Animesh Garg and Renato Gasoto and Lionel Gulich and Yijie Guo and M. Gussert and Alex Hansen and Mihir Kulkarni and Chenran Li and Wei Liu and Viktor Makoviychuk and Grzegorz Malczyk and Hammad Mazhar and Masoud Moghani and Adithyavairavan Murali and Michael Noseworthy and Alexander Poddubny and Nathan Ratliff and Welf Rehberg and Clemens Schwarke and Ritvik Singh and James Latham Smith and Bingjie Tang and Ruchik Thaker and Matthew Trepte and Karl Van Wyk and Fangzhou Yu and Alex Millane and Vikram Ramasamy and Remo Steiner and Sangeeta Subramanian and Clemens Volk and CY Chen and Neel Jawale and Ashwin Varghese Kuruttukulam and Michael A. Lin and Ajay Mandlekar and Karsten Patzwaldt and John Welsh and Huihua Zhao and Fatima Anes and Jean-Francois Lafleche and Nicolas Moënne-Loccoz and Soowan Park and Rob Stepinski and Dirk Van Gelder and Chris Amevor and Jan Carius and Jumyung Chang and Anka He Chen and Pablo de Heras Ciechomski and Gilles Daviet and Mohammad Mohajerani and Julia von Muralt and Viktor Reutskyy and Michael Sauter and Simon Schirm and Eric L. Shi and Pierre Terdiman and Kenny Vilella and Tobias Widmer and Gordon Yeoman and Tiffany Chen and Sergey Grizan and Cathy Li and Lotus Li and Connor Smith and Rafael Wiltz and Kostas Alexis and Yan Chang and David Chu and Linxi "Jim" Fan and Farbod Farshidian and Ankur Handa and Spencer Huang and Marco Hutter and Yashraj Narang and Soha Pouya and Shiwei Sheng and Yuke Zhu and Miles Macklin and Adam Moravanszky and Philipp Reist and Yunrong Guo and David Hoeller and Gavriel State},
journal={arXiv preprint arXiv:2511.04831},
year={2025},
url={https://arxiv.org/abs/2511.04831}
}
致谢
Isaac Lab 的开发始于 Orbit 框架。我们衷心感谢 Orbit 的作者们所作出的基础性贡献。
版本历史
v3.0.0-beta2026/03/17v2.3.22026/02/02v2.3.12025/12/04v2.3.02025/10/28v2.2.12025/08/29v2.2.02025/08/07v2.1.12025/07/30v2.1.02025/04/24v2.0.22025/03/05v2.0.12025/02/26v2.0.02025/01/30v1.4.12025/01/30v1.4.02024/12/20v1.3.02024/11/21v1.2.02024/09/20v1.1.02024/07/26v1.0.02024/06/26v0.3.12024/05/31v0.3.02024/04/17v0.2.02024/02/10常见问题
相似工具推荐
markitdown
MarkItDown 是一款由微软 AutoGen 团队打造的轻量级 Python 工具,专为将各类文件高效转换为 Markdown 格式而设计。它支持 PDF、Word、Excel、PPT、图片(含 OCR)、音频(含语音转录)、HTML 乃至 YouTube 链接等多种格式的解析,能够精准提取文档中的标题、列表、表格和链接等关键结构信息。 在人工智能应用日益普及的今天,大语言模型(LLM)虽擅长处理文本,却难以直接读取复杂的二进制办公文档。MarkItDown 恰好解决了这一痛点,它将非结构化或半结构化的文件转化为模型“原生理解”且 Token 效率极高的 Markdown 格式,成为连接本地文件与 AI 分析 pipeline 的理想桥梁。此外,它还提供了 MCP(模型上下文协议)服务器,可无缝集成到 Claude Desktop 等 LLM 应用中。 这款工具特别适合开发者、数据科学家及 AI 研究人员使用,尤其是那些需要构建文档检索增强生成(RAG)系统、进行批量文本分析或希望让 AI 助手直接“阅读”本地文件的用户。虽然生成的内容也具备一定可读性,但其核心优势在于为机器
ML-For-Beginners
ML-For-Beginners 是由微软推出的一套系统化机器学习入门课程,旨在帮助零基础用户轻松掌握经典机器学习知识。这套课程将学习路径规划为 12 周,包含 26 节精炼课程和 52 道配套测验,内容涵盖从基础概念到实际应用的完整流程,有效解决了初学者面对庞大知识体系时无从下手、缺乏结构化指导的痛点。 无论是希望转型的开发者、需要补充算法背景的研究人员,还是对人工智能充满好奇的普通爱好者,都能从中受益。课程不仅提供了清晰的理论讲解,还强调动手实践,让用户在循序渐进中建立扎实的技能基础。其独特的亮点在于强大的多语言支持,通过自动化机制提供了包括简体中文在内的 50 多种语言版本,极大地降低了全球不同背景用户的学习门槛。此外,项目采用开源协作模式,社区活跃且内容持续更新,确保学习者能获取前沿且准确的技术资讯。如果你正寻找一条清晰、友好且专业的机器学习入门之路,ML-For-Beginners 将是理想的起点。
ragflow
RAGFlow 是一款领先的开源检索增强生成(RAG)引擎,旨在为大语言模型构建更精准、可靠的上下文层。它巧妙地将前沿的 RAG 技术与智能体(Agent)能力相结合,不仅支持从各类文档中高效提取知识,还能让模型基于这些知识进行逻辑推理和任务执行。 在大模型应用中,幻觉问题和知识滞后是常见痛点。RAGFlow 通过深度解析复杂文档结构(如表格、图表及混合排版),显著提升了信息检索的准确度,从而有效减少模型“胡编乱造”的现象,确保回答既有据可依又具备时效性。其内置的智能体机制更进一步,使系统不仅能回答问题,还能自主规划步骤解决复杂问题。 这款工具特别适合开发者、企业技术团队以及 AI 研究人员使用。无论是希望快速搭建私有知识库问答系统,还是致力于探索大模型在垂直领域落地的创新者,都能从中受益。RAGFlow 提供了可视化的工作流编排界面和灵活的 API 接口,既降低了非算法背景用户的上手门槛,也满足了专业开发者对系统深度定制的需求。作为基于 Apache 2.0 协议开源的项目,它正成为连接通用大模型与行业专有知识之间的重要桥梁。
PaddleOCR
PaddleOCR 是一款基于百度飞桨框架开发的高性能开源光学字符识别工具包。它的核心能力是将图片、PDF 等文档中的文字提取出来,转换成计算机可读取的结构化数据,让机器真正“看懂”图文内容。 面对海量纸质或电子文档,PaddleOCR 解决了人工录入效率低、数字化成本高的问题。尤其在人工智能领域,它扮演着连接图像与大型语言模型(LLM)的桥梁角色,能将视觉信息直接转化为文本输入,助力智能问答、文档分析等应用场景落地。 PaddleOCR 适合开发者、算法研究人员以及有文档自动化需求的普通用户。其技术优势十分明显:不仅支持全球 100 多种语言的识别,还能在 Windows、Linux、macOS 等多个系统上运行,并灵活适配 CPU、GPU、NPU 等各类硬件。作为一个轻量级且社区活跃的开源项目,PaddleOCR 既能满足快速集成的需求,也能支撑前沿的视觉语言研究,是处理文字识别任务的理想选择。
awesome-machine-learning
awesome-machine-learning 是一份精心整理的机器学习资源清单,汇集了全球优秀的机器学习框架、库和软件工具。面对机器学习领域技术迭代快、资源分散且难以甄选的痛点,这份清单按编程语言(如 Python、C++、Go 等)和应用场景(如计算机视觉、自然语言处理、深度学习等)进行了系统化分类,帮助使用者快速定位高质量项目。 它特别适合开发者、数据科学家及研究人员使用。无论是初学者寻找入门库,还是资深工程师对比不同语言的技术选型,都能从中获得极具价值的参考。此外,清单还延伸提供了免费书籍、在线课程、行业会议、技术博客及线下聚会等丰富资源,构建了从学习到实践的全链路支持体系。 其独特亮点在于严格的维护标准:明确标记已停止维护或长期未更新的项目,确保推荐内容的时效性与可靠性。作为机器学习领域的“导航图”,awesome-machine-learning 以开源协作的方式持续更新,旨在降低技术探索门槛,让每一位从业者都能高效地站在巨人的肩膀上创新。
OpenHands
OpenHands 是一个专注于 AI 驱动开发的开源平台,旨在让智能体(Agent)像人类开发者一样理解、编写和调试代码。它解决了传统编程中重复性劳动多、环境配置复杂以及人机协作效率低等痛点,通过自动化流程显著提升开发速度。 无论是希望提升编码效率的软件工程师、探索智能体技术的研究人员,还是需要快速原型验证的技术团队,都能从中受益。OpenHands 提供了灵活多样的使用方式:既可以通过命令行(CLI)或本地图形界面在个人电脑上轻松上手,体验类似 Devin 的流畅交互;也能利用其强大的 Python SDK 自定义智能体逻辑,甚至在云端大规模部署上千个智能体并行工作。 其核心技术亮点在于模块化的软件智能体 SDK,这不仅构成了平台的引擎,还支持高度可组合的开发模式。此外,OpenHands 在 SWE-bench 基准测试中取得了 77.6% 的优异成绩,证明了其解决真实世界软件工程问题的能力。平台还具备完善的企业级功能,支持与 Slack、Jira 等工具集成,并提供细粒度的权限管理,适合从个人开发者到大型企业的各类用户场景。