InsightFace_Pytorch

GitHub
1.9k 427 中等 1 次阅读 昨天MIT图像
AI 解读 由 AI 自动生成,仅供参考

InsightFace_Pytorch 是一个基于 PyTorch 框架开源的人脸识别工具包,旨在将经典的 ArcFace 算法及 InsightFace 项目从 MXNet 平台迁移至更主流的 PyTorch 生态。它主要解决了开发者在复现顶尖人脸识别模型时面临的框架转换难题,提供了包括 IR-SE50 和轻量级 MobileFacenet 在内的多种骨干网络实现,并配套了从数据格式转换、模型训练到摄像头实时检测的全流程代码。

该工具特别适合人工智能研究人员、算法工程师以及希望深入理解人脸识别技术的开发者使用。通过内置的数据处理脚本,用户可以轻松将复杂的 MXNet 记录转换为标准的图像文件夹格式,快速搭建训练环境。其独特的技术亮点在于不仅完整复现了原论文中的高精度模型,还发布了在 LFW、CFP-FP 等多个权威测试集上表现优异的预训练权重,其中 IR-SE50 模型在 LFW 数据集上的准确率高达 99.52%。无论是用于学术研究验证、自定义人脸库构建,还是开发实时人脸验证应用,InsightFace_Pytorch 都提供了一套高效、可靠且易于扩展的解决方案,帮助用户低成本地落地高性能人脸识别功能。

使用场景

某智慧园区安保团队需要升级门禁系统,实现员工在无感通行时的精准人脸识别与身份核验。

没有 InsightFace_Pytorch 时

  • 识别准确率不足:传统算法在侧脸、光照变化或遮挡场景下误识率高,导致员工频繁被拒之门外,需人工介入核实。
  • 开发门槛极高:团队缺乏复现顶级论文(如 ArcFace)的能力,从零训练高精度模型耗时数月且难以收敛。
  • 部署灵活性差:现有方案多依赖特定框架或闭源 SDK,难以适配团队现有的 PyTorch 技术栈,集成成本高昂。
  • 数据预处理繁琐:缺乏自动化工具将原始人脸数据转换为标准训练格式,数据清洗占用大量研发时间。

使用 InsightFace_Pytorch 后

  • 精度显著提升:直接加载预训练的 IR-SE50 模型,在 LFW 等测试集上准确率超 99.5%,轻松应对复杂光线和角度挑战。
  • 快速落地应用:利用成熟的 PyTorch 代码库,团队仅需数天即可完成从数据准备(facebank 构建)到摄像头实时检测的全流程部署。
  • 无缝技术集成:原生支持 PyTorch 框架,完美契合现有后端架构,并提供 MobileFacenet 等轻量模型供边缘设备选择。
  • 流程自动化:内置脚本一键完成 MXNET 数据转换及数据集整理,大幅缩短模型训练前的准备周期。

InsightFace_Pytorch 通过提供工业级精度的预训练模型与完整的 PyTorch 复现方案,让高精度人脸识别系统的构建从“科研难题”变为“即插即用”的工程实践。

运行环境要求

操作系统
  • 未说明
GPU

未说明(基于 PyTorch 0.4.1,通常建议配备支持 CUDA 的 NVIDIA GPU 以进行训练和实时推理)

内存

未说明

依赖
notes该项目是较旧的复现版本(基于 PyTorch 0.4.1),主要依赖 MXNet 格式的数据集转换工具。使用前需克隆 mtcnn-pytorch 仓库。提供的人脸识别模型包括 MobileFacenet 和 IR-SE50,需手动下载预训练权重至指定目录。若使用 MS1M 或 VGG2 数据集需遵循原始论文引用规范。
python未说明(兼容 PyTorch 0.4.1,推测为 Python 2.7 或 Python 3.6)
torch==0.4.1
mxnet (用于数据记录转换)
opencv-python (推测用于摄像头和视频处理)
mtcnn-pytorch (人脸检测依赖)
InsightFace_Pytorch hero image

快速开始

InsightFace_Pytorch

用于 InsightFace 的 PyTorch 0.4.1 代码库


1. 简介

  • 本仓库是对 Arcface(论文) 或 Insightface(GitHub) 的重新实现。
  • 包含模型,其中包括 Arcface 和 MobileFacenet 主干模块的 PyTorch 实现。
  • 提供了将 Insightface(GitHub) 中 MXNET 数据记录转换为图像数据文件夹的代码。
  • 已发布预训练模型,包括原始论文中的 MobileFacenet 和 IR-SE50。

2. 预训练模型及性能

IR-SE50 @ 百度网盘IR-SE50 @ OneDrive

LFW(%) CFP-FF(%) CFP-FP(%) AgeDB-30(%) calfw(%) cplfw(%) vgg2_fp(%)
0.9952 0.9962 0.9504 0.9622 0.9557 0.9107 0.9386

Mobilefacenet @ 百度网盘Mobilefacenet @ OneDrive

LFW(%) CFP-FF(%) CFP-FP(%) AgeDB-30(%) calfw(%) cplfw(%) vgg2_fp(%)
0.9918 0.9891 0.8986 0.9347 0.9402 0.866 0.9100

3. 使用方法

  • 克隆

    git clone https://github.com/TropComplique/mtcnn-pytorch.git
    

3.1 数据准备

3.1.1 准备人脸库(用于摄像头或视频检测)

将您想要检测的人脸图像放入 data/face_bank 文件夹中,并确保其结构如下:

data/facebank/
        ---> id1/
            ---> id1_1.jpg
        ---> id2/
            ---> id2_1.jpg
        ---> id3/
            ---> id3_1.jpg
           ---> id3_2.jpg

3.1.2 下载预训练模型至 work_space/model 目录

如果一个文件夹中有多张图片,则会计算它们的平均嵌入向量。

3.2.3 准备数据集(用于训练)

下载精炼后的数据集:(推荐使用 emore)

注意: 如果您使用精炼后的 MS1M 数据集和裁剪后的 VGG2 数据集,请引用原始论文。

  • 解压文件到 'data' 路径后,运行:

    python prepare_data.py
    

    执行完成后,您应该会看到以下结构:

faces_emore/
            ---> agedb_30
            ---> calfw
            ---> cfp_ff
            --->  cfp_fp
            ---> cplfw
            --->imgs
            ---> lfw
            ---> vgg2_fp

3.2 摄像头检测:

- facebank/
         name1/
             photo1.jpg
             photo2.jpg
             ...
         name2/
             photo1.jpg
             photo2.jpg
             ...
         .....
    如果目录中有多张图片,将会计算平均嵌入向量。
    1. 开始检测
    python face_verify.py 
    

3.3 视频检测:

​```
python infer_on_video.py -f [视频文件名] -s [保存文件名]
​```

视频文件应位于 data/face_bank 文件夹内。

3.4 训练:

​```
python train.py -b [batch_size] -lr [学习率] -e [epochs]

# python train.py -net mobilefacenet -b 200 -w 4
​```

4. 参考文献

补充说明

  • 欢迎提交 PR,以防我没有资源来训练一些大型模型,比如 100 层和 151 层的模型。
  • 邮箱:treb1en@qq.com

常见问题

相似工具推荐

openclaw

OpenClaw 是一款专为个人打造的本地化 AI 助手,旨在让你在自己的设备上拥有完全可控的智能伙伴。它打破了传统 AI 助手局限于特定网页或应用的束缚,能够直接接入你日常使用的各类通讯渠道,包括微信、WhatsApp、Telegram、Discord、iMessage 等数十种平台。无论你在哪个聊天软件中发送消息,OpenClaw 都能即时响应,甚至支持在 macOS、iOS 和 Android 设备上进行语音交互,并提供实时的画布渲染功能供你操控。 这款工具主要解决了用户对数据隐私、响应速度以及“始终在线”体验的需求。通过将 AI 部署在本地,用户无需依赖云端服务即可享受快速、私密的智能辅助,真正实现了“你的数据,你做主”。其独特的技术亮点在于强大的网关架构,将控制平面与核心助手分离,确保跨平台通信的流畅性与扩展性。 OpenClaw 非常适合希望构建个性化工作流的技术爱好者、开发者,以及注重隐私保护且不愿被单一生态绑定的普通用户。只要具备基础的终端操作能力(支持 macOS、Linux 及 Windows WSL2),即可通过简单的命令行引导完成部署。如果你渴望拥有一个懂你

349.3k|★★★☆☆|2天前
Agent开发框架图像

stable-diffusion-webui

stable-diffusion-webui 是一个基于 Gradio 构建的网页版操作界面,旨在让用户能够轻松地在本地运行和使用强大的 Stable Diffusion 图像生成模型。它解决了原始模型依赖命令行、操作门槛高且功能分散的痛点,将复杂的 AI 绘图流程整合进一个直观易用的图形化平台。 无论是希望快速上手的普通创作者、需要精细控制画面细节的设计师,还是想要深入探索模型潜力的开发者与研究人员,都能从中获益。其核心亮点在于极高的功能丰富度:不仅支持文生图、图生图、局部重绘(Inpainting)和外绘(Outpainting)等基础模式,还独创了注意力机制调整、提示词矩阵、负向提示词以及“高清修复”等高级功能。此外,它内置了 GFPGAN 和 CodeFormer 等人脸修复工具,支持多种神经网络放大算法,并允许用户通过插件系统无限扩展能力。即使是显存有限的设备,stable-diffusion-webui 也提供了相应的优化选项,让高质量的 AI 艺术创作变得触手可及。

162.1k|★★★☆☆|3天前
开发框架图像Agent

ComfyUI

ComfyUI 是一款功能强大且高度模块化的视觉 AI 引擎,专为设计和执行复杂的 Stable Diffusion 图像生成流程而打造。它摒弃了传统的代码编写模式,采用直观的节点式流程图界面,让用户通过连接不同的功能模块即可构建个性化的生成管线。 这一设计巧妙解决了高级 AI 绘图工作流配置复杂、灵活性不足的痛点。用户无需具备编程背景,也能自由组合模型、调整参数并实时预览效果,轻松实现从基础文生图到多步骤高清修复等各类复杂任务。ComfyUI 拥有极佳的兼容性,不仅支持 Windows、macOS 和 Linux 全平台,还广泛适配 NVIDIA、AMD、Intel 及苹果 Silicon 等多种硬件架构,并率先支持 SDXL、Flux、SD3 等前沿模型。 无论是希望深入探索算法潜力的研究人员和开发者,还是追求极致创作自由度的设计师与资深 AI 绘画爱好者,ComfyUI 都能提供强大的支持。其独特的模块化架构允许社区不断扩展新功能,使其成为当前最灵活、生态最丰富的开源扩散模型工具之一,帮助用户将创意高效转化为现实。

107.9k|★★☆☆☆|2天前
开发框架图像Agent

LLMs-from-scratch

LLMs-from-scratch 是一个基于 PyTorch 的开源教育项目,旨在引导用户从零开始一步步构建一个类似 ChatGPT 的大型语言模型(LLM)。它不仅是同名技术著作的官方代码库,更提供了一套完整的实践方案,涵盖模型开发、预训练及微调的全过程。 该项目主要解决了大模型领域“黑盒化”的学习痛点。许多开发者虽能调用现成模型,却难以深入理解其内部架构与训练机制。通过亲手编写每一行核心代码,用户能够透彻掌握 Transformer 架构、注意力机制等关键原理,从而真正理解大模型是如何“思考”的。此外,项目还包含了加载大型预训练权重进行微调的代码,帮助用户将理论知识延伸至实际应用。 LLMs-from-scratch 特别适合希望深入底层原理的 AI 开发者、研究人员以及计算机专业的学生。对于不满足于仅使用 API,而是渴望探究模型构建细节的技术人员而言,这是极佳的学习资源。其独特的技术亮点在于“循序渐进”的教学设计:将复杂的系统工程拆解为清晰的步骤,配合详细的图表与示例,让构建一个虽小但功能完备的大模型变得触手可及。无论你是想夯实理论基础,还是为未来研发更大规模的模型做准备

90.1k|★★★☆☆|2天前
语言模型图像Agent

Deep-Live-Cam

Deep-Live-Cam 是一款专注于实时换脸与视频生成的开源工具,用户仅需一张静态照片,即可通过“一键操作”实现摄像头画面的即时变脸或制作深度伪造视频。它有效解决了传统换脸技术流程繁琐、对硬件配置要求极高以及难以实时预览的痛点,让高质量的数字内容创作变得触手可及。 这款工具不仅适合开发者和技术研究人员探索算法边界,更因其极简的操作逻辑(仅需三步:选脸、选摄像头、启动),广泛适用于普通用户、内容创作者、设计师及直播主播。无论是为了动画角色定制、服装展示模特替换,还是制作趣味短视频和直播互动,Deep-Live-Cam 都能提供流畅的支持。 其核心技术亮点在于强大的实时处理能力,支持口型遮罩(Mouth Mask)以保留使用者原始的嘴部动作,确保表情自然精准;同时具备“人脸映射”功能,可同时对画面中的多个主体应用不同面孔。此外,项目内置了严格的内容安全过滤机制,自动拦截涉及裸露、暴力等不当素材,并倡导用户在获得授权及明确标注的前提下合规使用,体现了技术发展与伦理责任的平衡。

88.9k|★★★☆☆|2天前
开发框架图像Agent

ML-For-Beginners

ML-For-Beginners 是由微软推出的一套系统化机器学习入门课程,旨在帮助零基础用户轻松掌握经典机器学习知识。这套课程将学习路径规划为 12 周,包含 26 节精炼课程和 52 道配套测验,内容涵盖从基础概念到实际应用的完整流程,有效解决了初学者面对庞大知识体系时无从下手、缺乏结构化指导的痛点。 无论是希望转型的开发者、需要补充算法背景的研究人员,还是对人工智能充满好奇的普通爱好者,都能从中受益。课程不仅提供了清晰的理论讲解,还强调动手实践,让用户在循序渐进中建立扎实的技能基础。其独特的亮点在于强大的多语言支持,通过自动化机制提供了包括简体中文在内的 50 多种语言版本,极大地降低了全球不同背景用户的学习门槛。此外,项目采用开源协作模式,社区活跃且内容持续更新,确保学习者能获取前沿且准确的技术资讯。如果你正寻找一条清晰、友好且专业的机器学习入门之路,ML-For-Beginners 将是理想的起点。

85k|★★☆☆☆|2天前
图像数据工具视频