deepinv

GitHub
715 163 非常简单 1 次阅读 2天前BSD-3-Clause开发框架图像
AI 解读 由 AI 自动生成,仅供参考

deepinv 是一个基于 PyTorch 的开源深度学习库,专门用于解决成像领域的“逆问题”。在医学影像、天文观测或显微摄影中,我们往往只能获取模糊、噪声大或不完整的原始数据,而 deepinv 的核心任务就是利用先进的深度学习算法,从这些劣质数据中高质量地还原出清晰图像。

这款工具非常适合从事计算机视觉研究的科研人员、算法工程师以及希望探索图像重建技术的开发者使用。它极大地降低了该领域的入门门槛,让用户无需从零构建复杂的数学模型,即可快速复现前沿研究成果。

deepinv 的技术亮点在于其高度模块化的设计:内置了丰富的预定义成像算子来模拟各种退化过程;集成了多种最先进的深度神经网络,并提供开箱即用的预训练重建模型与去噪器;支持即插即用恢复、优化算法及展开式架构等多种主流技术路线。此外,它还涵盖了针对逆问题的专用训练损失函数、用于不确定性量化的扩散模型采样算法,以及便捷的数据集构建框架。无论是进行学术实验还是开发实际应用,deepinv 都能提供高效、可复现且灵活的解决方案。

使用场景

某医学影像实验室的研究团队正致力于开发一套低剂量 CT 扫描重建系统,旨在利用深度学习从稀疏采样的噪声数据中恢复高质量图像。

没有 deepinv 时

  • 物理建模繁琐:研究人员需手动编写复杂的矩阵运算来模拟 CT 成像过程(如射线变换),极易出错且难以适配不同扫描几何结构。
  • 算法复现困难:尝试对比最新的“即插即用”或“展开式”重建算法时,因缺乏统一框架,需重复造轮子重写大量底层代码,耗时数周。
  • 基线缺失:缺少预训练的去噪器和重建模型作为基准,难以快速验证新提出损失函数的有效性,实验迭代周期漫长。
  • 不确定性量化空白:想要评估重建结果的置信度(如使用扩散模型采样)时,因缺乏现成的采样算法库,只能放弃该维度的分析。

使用 deepinv 后

  • 算子调用便捷:直接调用 deepinv 内置的预定义成像算子,几行代码即可精确模拟各种 CT 扫描物理过程,大幅降低建模门槛。
  • 框架模块化:利用其统一的优化与展开架构模块,团队在一天内便完成了多种前沿重建算法的搭建与对比实验,效率提升显著。
  • 开箱即用模型:直接加载 deepinv 提供的预训练去噪器和重建模型作为强力基线,迅速定位了新方法的性能边界。
  • 完整不确定性分析:借助集成的采样算法和扩散模型框架,轻松实现了对重建图像的不确定性量化,为临床诊断提供了更可靠的依据。

deepinv 通过提供标准化的物理算子与前沿算法库,将医学影像重建的研发周期从数月缩短至数天,让研究者能专注于核心创新而非底层实现。

运行环境要求

操作系统
  • 未说明
GPU

非必需(基于 PyTorch,支持 CPU 和 GPU),具体显卡型号、显存大小及 CUDA 版本未在文档中明确指定

内存

未说明

依赖
notes该库是用于解决成像逆问题的 PyTorch 基础开源库。支持通过 pip 安装稳定版或夜间构建版,可选安装数据集和去噪器等依赖。官方推荐使用 uv、pixi 或 conda 进行环境管理。项目处于活跃开发中,遇到问题可通过 Discord 或 GitHub Issues 联系开发者。
python3.10+
torch
deepinv hero image

快速开始

.. image:: https://github.com/deepinv/deepinv/raw/main/docs/source/figures/deepinv_logolarge.png :width: 500px :alt: deepinv logo :align: center

|pip install| |stars| |discord| |colab| |youtube| |paper|

|测试状态| |GPU测试状态| |文档状态| |GPU文档状态| |Python版本| |Black| |codecov|

简介

DeepInverse <https://deepinv.github.io/deepinv>_ 是一个基于 PyTorch 的开源库,用于通过深度学习求解成像逆问题。该库是 官方 PyTorch 生态系统 <https://pytorch.landscape2.io/?item=modeling--computer-vision--deepinverse>_ 的一部分。deepinv 加速了跨成像领域的深度学习研究,通过通用的模块化问题和算法框架提高了研究的可重复性,并降低了新从业者入门的门槛。

.. image:: https://github.com/deepinv/deepinv/raw/main/docs/source/figures/deepinv_schematic.png :width: 1000px :alt: deepinv 示意图 :align: center

开始使用

请在 deepinv.github.io <https://deepinv.github.io>_ 阅读我们的 文档。您还可以查看我们的 5 分钟快速入门教程 <https://deepinv.github.io/deepinv/auto_examples/basics/demo_quickstart.html>全面示例 <https://deepinv.github.io/deepinv/auto_examples/index.html> 或者 用户指南 <https://deepinv.github.io/deepinv/user_guide.html>_。

deepinv 的主要特性包括:

  • 一个庞大的 预定义成像算子框架 <https://deepinv.github.io/deepinv/user_guide/physics/physics.html>_
  • 许多 最先进的深度神经网络 <https://deepinv.github.io/deepinv/user_guide/reconstruction/introduction.html>,包括开箱即用的预训练 重建模型 <https://deepinv.github.io/deepinv/user_guide/reconstruction/pretrained-models.html>去噪器 <https://deepinv.github.io/deepinv/user_guide/reconstruction/denoisers.html>_
  • 用于 即插即用复原 <https://deepinv.github.io/deepinv/user_guide/reconstruction/iterative.html>优化 <https://deepinv.github.io/deepinv/user_guide/reconstruction/optimization.html>展开架构 <https://deepinv.github.io/deepinv/user_guide/reconstruction/unfolded.html>_ 的综合框架
  • 用于逆问题的 训练损失函数 <https://deepinv.github.io/deepinv/user_guide/training/loss.html>_
  • 用于不确定性量化的一系列 采样算法和扩散模型 <https://deepinv.github.io/deepinv/user_guide/reconstruction/sampling.html>_
  • 一个用于为逆问题 构建数据集 <https://deepinv.github.io/deepinv/user_guide/training/datasets.html>_ 的框架

邮件列表


`加入我们的邮件列表 <https://forms.gle/TFyT7M2HAWkJYfvQ7>`_,以获取有关发布和新功能的定期更新。

安装
-----

使用 Python 3.10 或更高版本安装 ``deepinv`` 的最新稳定版
(请参阅 `文档 <https://deepinv.github.io/deepinv/#install>`_ 中关于使用 `uv`、`pixi` 和 `conda` 进行安装的内容):

.. code-block:: bash

   pip install deepinv

或者,如果您还想安装可选依赖项:

.. code-block:: bash

   pip install deepinv[dataset,denoisers]

由于 ``deepinv`` 处于积极开发中,您也可以通过以下命令安装最新的夜间版本:

.. code-block:: bash

   pip install git+https://github.com/deepinv/deepinv.git#egg=deepinv

或者,如果您需要更新现有安装:

.. code-block:: bash

   pip install --upgrade --force-reinstall --no-deps git+https://github.com/deepinv/deepinv.git#egg=deepinv


寻求帮助
--------

如果您有任何问题或建议,请加入我们的
`Discord 服务器 <https://discord.gg/qBqY5jKw3p>`_ 进行交流。对于任何错误或问题,我们推荐您通过
`提交 issue <https://github.com/deepinv/deepinv/issues>`_ 来联系开发者。

维护者
~~~~~~~

请与我们的 `维护者 <https://github.com/deepinv/deepinv/blob/main/MAINTAINERS.md>`_ 联系。


贡献
----

DeepInverse 是一个 `社区驱动的项目 <https://deepinv.github.io/deepinv/community.html>`_,我们鼓励各种形式的贡献。我们正在构建一个全面的逆问题与深度学习库,而实现这一目标离不开您的帮助! 

感兴趣吗?`查看如何参与贡献 <https://deepinv.github.io/deepinv/contributing.html>`_!

引用
----
如果您在研究中使用了 DeepInverse,请引用我们在 JOSS 上发表的论文:

.. code-block:: bash

    @article{tachella2025deepinverse,
        title = {DeepInverse: A Python package for solving imaging inverse problems with deep learning},
        journal = {Journal of Open Source Software},
        doi = {10.21105/joss.08923},
        url = {https://doi.org/10.21105/joss.08923},
        year = {2025},
        publisher = {The Open Journal},
        volume = {10},
        number = {115},
        pages = {8923},
        author = {Tachella, Julián and Terris, Matthieu and Hurault, Samuel and Wang, Andrew and Davy, Leo and Scanvic, Jérémy and Sechaud, Victor and Vo, Romain and Moreau, Thomas and Davies, Thomas and Chen, Dongdong and Laurent, Nils and Monroy, Brayan and Dong, Jonathan and Hu, Zhiyuan and Nguyen, Minh-Hai and Sarron, Florian and Weiss, Pierre and Escande, Paul and Massias, Mathurin and Modrzyk, Thibaut and Levac, Brett and Liaudat, Tobías I. and Song, Maxime and Hertrich, Johannes and Neumayer, Sebastian and Schramm, Georg},
    }

星标历史
--------

.. image:: https://api.star-history.com/svg?repos=deepinv/deepinv&type=Date
   :alt: 星标历史图表
   :target: https://www.star-history.com/#deepinv/deepinv&Date

.. |Black| image:: https://img.shields.io/badge/code%20style-black-000000.svg
    :target: https://github.com/psf/black
.. |测试状态| image:: https://github.com/deepinv/deepinv/actions/workflows/test_cpu.yml/badge.svg?branch=main&event=push
   :target: https://github.com/deepinv/deepinv/actions/workflows/test_cpu.yml
.. |GPU测试状态| image:: https://github.com/deepinv/deepinv/actions/workflows/test_gpu.yml/badge.svg?branch=main&event=push
   :target: https://github.com/deepinv/deepinv/actions/workflows/test_gpu.yml
.. |文档状态| image:: https://github.com/deepinv/deepinv/actions/workflows/docs_cpu.yml/badge.svg
   :target: https://github.com/deepinv/deepinv/actions/workflows/docs_cpu.yml
.. |GPU文档状态| image:: https://github.com/deepinv/deepinv/actions/workflows/docs_gpu.yml/badge.svg?branch=main&event=push
   :target: https://github.com/deepinv/deepinv/actions/workflows/docs_gpu.yml
.. |Python版本| image:: https://img.shields.io/badge/python-3.10%2B-blue
   :target: https://www.python.org/downloads/release/python-3100/
.. |codecov| image:: https://codecov.io/gh/deepinv/deepinv/branch/main/graph/badge.svg?token=77JRvUhQzh
   :target: https://codecov.io/gh/deepinv/deepinv
.. |pip安装| image:: https://img.shields.io/pypi/dm/deepinv.svg?logo=pypi&label=pip%20install&color=fedcba
   :target: https://pypistats.org/packages/deepinv
.. |discord| image:: https://dcbadge.limes.pink/api/server/qBqY5jKw3p?style=flat
   :target: https://discord.gg/qBqY5jKw3p
.. |colab| image:: https://colab.research.google.com/assets/colab-badge.svg
   :target: https://colab.research.google.com/github/deepinv/deepinv/blob/gh-pages/auto_examples/_notebooks/basics/demo_quickstart.ipynb
.. |youtube| image:: https://img.shields.io/badge/YouTube-deepinv-red?logo=youtube
   :target: https://www.youtube.com/@deepinv
.. |论文| image:: https://joss.theoj.org/papers/10.21105/joss.08923/status.svg
   :target: https://doi.org/10.21105/joss.08923
.. |星标| image:: https://img.shields.io/github/stars/deepinv/deepinv?style=flat&label=%E2%AD%90%20Star%20us%20on%20GitHub
   :target: https://github.com/deepinv/deepinv

版本历史

v0.3.32025/08/06
v0.4.02026/03/11
v0.3.72025/12/15
v0.3.62025/11/09
v0.3.52025/10/08
v0.3.42025/09/08
v0.3.22025/07/03
v0.3.12025/06/05
v0.3.02025/04/12
v.0.2.22024/12/12
v.0.2.12024/09/03
v.0.2.02024/04/23
v.0.1.12024/02/23
v.0.1.02023/12/11
v0.0.12023/07/01

常见问题

相似工具推荐

openclaw

OpenClaw 是一款专为个人打造的本地化 AI 助手,旨在让你在自己的设备上拥有完全可控的智能伙伴。它打破了传统 AI 助手局限于特定网页或应用的束缚,能够直接接入你日常使用的各类通讯渠道,包括微信、WhatsApp、Telegram、Discord、iMessage 等数十种平台。无论你在哪个聊天软件中发送消息,OpenClaw 都能即时响应,甚至支持在 macOS、iOS 和 Android 设备上进行语音交互,并提供实时的画布渲染功能供你操控。 这款工具主要解决了用户对数据隐私、响应速度以及“始终在线”体验的需求。通过将 AI 部署在本地,用户无需依赖云端服务即可享受快速、私密的智能辅助,真正实现了“你的数据,你做主”。其独特的技术亮点在于强大的网关架构,将控制平面与核心助手分离,确保跨平台通信的流畅性与扩展性。 OpenClaw 非常适合希望构建个性化工作流的技术爱好者、开发者,以及注重隐私保护且不愿被单一生态绑定的普通用户。只要具备基础的终端操作能力(支持 macOS、Linux 及 Windows WSL2),即可通过简单的命令行引导完成部署。如果你渴望拥有一个懂你

349.3k|★★★☆☆|1周前
Agent开发框架图像

stable-diffusion-webui

stable-diffusion-webui 是一个基于 Gradio 构建的网页版操作界面,旨在让用户能够轻松地在本地运行和使用强大的 Stable Diffusion 图像生成模型。它解决了原始模型依赖命令行、操作门槛高且功能分散的痛点,将复杂的 AI 绘图流程整合进一个直观易用的图形化平台。 无论是希望快速上手的普通创作者、需要精细控制画面细节的设计师,还是想要深入探索模型潜力的开发者与研究人员,都能从中获益。其核心亮点在于极高的功能丰富度:不仅支持文生图、图生图、局部重绘(Inpainting)和外绘(Outpainting)等基础模式,还独创了注意力机制调整、提示词矩阵、负向提示词以及“高清修复”等高级功能。此外,它内置了 GFPGAN 和 CodeFormer 等人脸修复工具,支持多种神经网络放大算法,并允许用户通过插件系统无限扩展能力。即使是显存有限的设备,stable-diffusion-webui 也提供了相应的优化选项,让高质量的 AI 艺术创作变得触手可及。

162.1k|★★★☆☆|2周前
开发框架图像Agent

everything-claude-code

everything-claude-code 是一套专为 AI 编程助手(如 Claude Code、Codex、Cursor 等)打造的高性能优化系统。它不仅仅是一组配置文件,而是一个经过长期实战打磨的完整框架,旨在解决 AI 代理在实际开发中面临的效率低下、记忆丢失、安全隐患及缺乏持续学习能力等核心痛点。 通过引入技能模块化、直觉增强、记忆持久化机制以及内置的安全扫描功能,everything-claude-code 能显著提升 AI 在复杂任务中的表现,帮助开发者构建更稳定、更智能的生产级 AI 代理。其独特的“研究优先”开发理念和针对 Token 消耗的优化策略,使得模型响应更快、成本更低,同时有效防御潜在的攻击向量。 这套工具特别适合软件开发者、AI 研究人员以及希望深度定制 AI 工作流的技术团队使用。无论您是在构建大型代码库,还是需要 AI 协助进行安全审计与自动化测试,everything-claude-code 都能提供强大的底层支持。作为一个曾荣获 Anthropic 黑客大奖的开源项目,它融合了多语言支持与丰富的实战钩子(hooks),让 AI 真正成长为懂上

160.8k|★★☆☆☆|今天
开发框架Agent语言模型

ComfyUI

ComfyUI 是一款功能强大且高度模块化的视觉 AI 引擎,专为设计和执行复杂的 Stable Diffusion 图像生成流程而打造。它摒弃了传统的代码编写模式,采用直观的节点式流程图界面,让用户通过连接不同的功能模块即可构建个性化的生成管线。 这一设计巧妙解决了高级 AI 绘图工作流配置复杂、灵活性不足的痛点。用户无需具备编程背景,也能自由组合模型、调整参数并实时预览效果,轻松实现从基础文生图到多步骤高清修复等各类复杂任务。ComfyUI 拥有极佳的兼容性,不仅支持 Windows、macOS 和 Linux 全平台,还广泛适配 NVIDIA、AMD、Intel 及苹果 Silicon 等多种硬件架构,并率先支持 SDXL、Flux、SD3 等前沿模型。 无论是希望深入探索算法潜力的研究人员和开发者,还是追求极致创作自由度的设计师与资深 AI 绘画爱好者,ComfyUI 都能提供强大的支持。其独特的模块化架构允许社区不断扩展新功能,使其成为当前最灵活、生态最丰富的开源扩散模型工具之一,帮助用户将创意高效转化为现实。

109.2k|★★☆☆☆|昨天
开发框架图像Agent

gemini-cli

gemini-cli 是一款由谷歌推出的开源 AI 命令行工具,它将强大的 Gemini 大模型能力直接集成到用户的终端环境中。对于习惯在命令行工作的开发者而言,它提供了一条从输入提示词到获取模型响应的最短路径,无需切换窗口即可享受智能辅助。 这款工具主要解决了开发过程中频繁上下文切换的痛点,让用户能在熟悉的终端界面内直接完成代码理解、生成、调试以及自动化运维任务。无论是查询大型代码库、根据草图生成应用,还是执行复杂的 Git 操作,gemini-cli 都能通过自然语言指令高效处理。 它特别适合广大软件工程师、DevOps 人员及技术研究人员使用。其核心亮点包括支持高达 100 万 token 的超长上下文窗口,具备出色的逻辑推理能力;内置 Google 搜索、文件操作及 Shell 命令执行等实用工具;更独特的是,它支持 MCP(模型上下文协议),允许用户灵活扩展自定义集成,连接如图像生成等外部能力。此外,个人谷歌账号即可享受免费的额度支持,且项目基于 Apache 2.0 协议完全开源,是提升终端工作效率的理想助手。

100.8k|★★☆☆☆|1周前
插件Agent图像

markitdown

MarkItDown 是一款由微软 AutoGen 团队打造的轻量级 Python 工具,专为将各类文件高效转换为 Markdown 格式而设计。它支持 PDF、Word、Excel、PPT、图片(含 OCR)、音频(含语音转录)、HTML 乃至 YouTube 链接等多种格式的解析,能够精准提取文档中的标题、列表、表格和链接等关键结构信息。 在人工智能应用日益普及的今天,大语言模型(LLM)虽擅长处理文本,却难以直接读取复杂的二进制办公文档。MarkItDown 恰好解决了这一痛点,它将非结构化或半结构化的文件转化为模型“原生理解”且 Token 效率极高的 Markdown 格式,成为连接本地文件与 AI 分析 pipeline 的理想桥梁。此外,它还提供了 MCP(模型上下文协议)服务器,可无缝集成到 Claude Desktop 等 LLM 应用中。 这款工具特别适合开发者、数据科学家及 AI 研究人员使用,尤其是那些需要构建文档检索增强生成(RAG)系统、进行批量文本分析或希望让 AI 助手直接“阅读”本地文件的用户。虽然生成的内容也具备一定可读性,但其核心优势在于为机器

93.4k|★★☆☆☆|1周前
插件开发框架