Real-time-ML-Project

GitHub
755 275 非常简单 1 次阅读 昨天开发框架数据工具插件
AI 解读 由 AI 自动生成,仅供参考

Real-time-ML-Project 是一个精心整理的开源资源库,汇集了面向不同行业的应用机器学习与数据科学实战笔记(Notebooks)及代码库。它主要解决了从业者在将理论算法转化为具体行业解决方案时,缺乏高质量参考案例和现成代码的痛点。通过提供覆盖住宿餐饮、农业、金融保险、医疗健康、制造业等二十多个垂直领域的 Python 代码示例,该项目帮助用户快速理解如何在真实业务场景中落地人工智能技术。

这份资源特别适合数据科学家、机器学习工程师、量化分析师以及相关领域的研究人员使用。无论是希望跨行业寻找灵感的开发者,还是急需特定领域(如欺诈检测、生物测序分析或风险评估)实现方案的专业人士,都能从中获得直接可用的 Jupyter Notebook 代码和学习路径。其核心亮点在于极强的行业针对性与社区共建模式:内容不仅按细分领域结构化分类,还鼓励领域专家持续贡献最新成果,确保代码的实用性与时效性。作为一个受"awesome-machine-learning"启发的项目,Real-time-ML-Project 致力于成为连接学术算法与产业应用的桥梁,让技术真正服务于千行百业。

使用场景

某金融科技公司数据团队正急需为消费信贷业务构建反欺诈模型,但团队成员缺乏跨行业落地经验,难以快速找到经过验证的代码参考。

没有 Real-time-ML-Project 时

  • 搜索效率极低:工程师需在 GitHub 海量仓库中盲目关键词搜索,耗费数天筛选,却常找到过时或缺乏文档的“僵尸项目”。
  • 行业适配困难:找到的通用机器学习教程缺乏金融场景特异性,无法直接解决信贷欺诈中的不平衡样本或特征工程难题。
  • 重复造轮子:因缺少可复用的 Jupyter Notebook 范例,团队不得不从零编写基础数据清洗和建模代码,严重拖慢原型验证进度。
  • 技术选型迷茫:面对众多算法库不知如何选择最适合银行业务的工具栈,缺乏权威的行业应用清单作为决策依据。

使用 Real-time-ML-Project 后

  • 精准定位资源:团队直接查阅"Banking & Insurance"章节,瞬间锁定多个专注于"Consumer Financial"和"Fraud"的高质量开源笔记本。
  • 场景无缝对接:下载现成的欺诈检测代码模板,其中已包含针对金融数据的特定预处理逻辑和模型调优参数,大幅降低迁移成本。
  • 加速开发迭代:基于成熟的行业案例进行修改而非从头开发,将模型原型构建时间从两周缩短至两天,快速上线测试。
  • 明确技术路径:参考列表中 curated 的库和最佳实践,迅速确定了适合当前业务的技术栈,避免了试错成本。

Real-time-ML-Project 通过提供分行业的实战代码清单,将数据科学家从繁琐的资源搜寻中解放出来,使其能专注于核心业务逻辑的创新与落地。

运行环境要求

GPU

未说明

内存

未说明

依赖
notes该项目是一个跨行业的机器学习和数据科学应用笔记本(Notebooks)及库的精选列表,而非单一的独立软件工具。代码主要以 Python 编写并在 Jupyter Notebook 环境中运行。由于包含多个不同行业和应用场景的独立项目,具体的依赖库、硬件需求(如 GPU、内存)需参考各个子项目的具体说明,整个集合没有统一的运行环境要求。
pythonPython (主要使用 Jupyter Notebooks)
Real-time-ML-Project hero image

快速开始

机器学习与数据科学在工业中的应用

Twitter

请将您的工具和笔记本添加到这个 Google 表格 中。

这是一份精选的跨不同行业的应用机器学习和数据科学笔记本及库列表。本仓库中的代码主要使用 Python(以 Jupyter 笔记本为主),除非另有说明。该目录受到 awesome-machine-learning 的启发。

注意: 这是一个持续更新中的项目,请大家积极贡献,尤其是如果您是下列行业中某一领域的专家。如果您是 [分析、计算、统计、量化] 领域的研究人员或分析师,或者您是 X 领域的 [机器学习工程师、数据科学家、建模师、程序员],那么您的贡献将不胜感激。

如果您想为这份列表做出贡献(请务必这样做),可以向我发送拉取请求,或者通过 @dereknowLinkedIn 联系我。 此外,如果出现以下情况,已列出的仓库应被标记为已弃用:

  • 仓库的所有者明确表示“此库不再维护”。
  • 长时间未进行提交(2~3 年)。

需要帮助: 如果有贡献者愿意先填充再维护以下任一子行业或行业的 Python 分析部分,请与我联系。同时,也欢迎联系我以添加 其他行业


住宿与餐饮 农业 银行与保险
生物技术与生命科学 建筑与工程 教育与研究
应急与救援 金融 制造业
政府与公共工程 医疗保健 媒体与出版
司法、法律与法规 其他 会计
房地产、租赁与出租 公用事业 批发与零售

目录

行业应用

住宿与餐饮

餐饮

餐厅

会计

机器学习

分析

文本分析

数据、解析与API

研究与文章

  • 理解会计分析 - 一篇文章探讨了会计分析的重要性。
  • VLFeat - VLFeat是一个开源且跨平台的计算机视觉算法库,附带Matlab工具箱。

网站

  • 罗格斯Raw - 来自罗格斯大学的良好数字会计研究资源。

课程

农业

经济学

开发

银行与保险

消费金融

管理与运营

估值

欺诈检测

保险与风险

实体业务

生物技术与生命科学

概述

测序

  • DNA、RNA和蛋白质测序 - 利用深度学习为生物序列创建新表示方法。
  • CNN测序 - 使用卷积神经网络从DNA/RNA序列数据中学习基序的工具箱。
  • NLP测序 - 用于基因组学的语言迁移学习模型。

化学信息学与药物发现

基因组学

生命科学

  • 植物病害 - 使用深度学习模型检测植物疾病的应用程序。
  • 叶片识别 - 根据形状、颜色和纹理识别植物叶片。
  • 作物分析 - 用于检测并追踪玉米植株上穗未来位置的成像库。
  • 幼苗分类 - 来自Kaggle竞赛的植物幼苗分类任务。
  • 植物胁迫 - 包含生物性和非生物性植物胁迫的本体论。
  • 动物等级制度 - 用于计算动物支配等级制度的软件包。
  • 动物识别 - 用于动物识别的深度学习。
  • 物种 - 不同动物物种的大数据分析。
  • 动物发声 - 用于生成动物发声的生成网络。
  • 进化算法 - 进化策略工具。
  • 冰川 - 关于冰川的教育材料。

建筑与工程

建筑

工程:

材料科学

经济学

概述

机器学习

  • EconML - 用于因果推断和经济学的自动化学习与智能工具。
  • 拍卖 - 使用深度学习实现最优拍卖。

计算

教育与研究

学生

学校

紧急情况与警察

预防与应对

犯罪

  • 犯罪分类 - LAPD误分类的重大袭击案件时间分析。
  • 文章标签 - 芝加哥新闻文章的自然语言处理
  • 犯罪分析 - 基于空间数据的关联规则挖掘用于犯罪分析
  • 芝加哥犯罪 - 在Python中探索芝加哥公开的犯罪数据集
  • 图分析 - 海牙犯罪。
  • 犯罪预测 - 印多尔市的犯罪分类、分析及预测。
  • 犯罪预测 - 开发了犯罪率的预测模型。
  • 犯罪回顾 - 犯罪回顾数据分析。
  • 犯罪趋势 - 犯罪趋势分析工具可分析犯罪趋势并揭示有问题的犯罪状况
  • 犯罪分析 - 对西雅图和旧金山的犯罪数据进行分析。

救护车:

  • 救护车分析 - 维多利亚州地方政府区域救护车时间变化的研究
  • 站点选址 - 救护车站点位置。
  • 调度 - 应用博弈论和离散事件仿真寻找救护车调度的最优解
  • 救护车分配 - 圣地亚哥市救护车派遣的时间序列分析。
  • 响应时间 - 关于救护车响应时间改进的分析。
  • 最优路线 - 伊萨卡市救护车最优路线规划项目。
  • 车祸分析 - 预测特定路段在特定时间发生事故的概率。

灾害管理

金融

交易与投资

数据

医疗保健

通用

司法、法律与法规

工具

政策与监管

司法应用

制造业

通用

维护

故障

质量

媒体与出版

营销

杂项

艺术

  • 绘画鉴证 - 分析绘画作品以确定其创作年代。

旅游

  • Flickr - 用于旅游研究的元数据挖掘工具。
  • 时尚 - 面向时尚图像的服装检索与视觉推荐模型

物理学

综合

机器学习

政府与公共工程

社会政策

慈善机构

  • 人口普查数据API - 从五年期美国社区调查中提取变量。
  • 慈善捐赠 - 多位DataKind志愿者利用990表格数据开展的工作。
  • 慈善推荐 - 基于隐式数据集的纽约市慈善协作推荐系统。
  • 捐赠者识别 - 一项机器学习项目,旨在为慈善机构寻找捐赠者。
  • 美国慈善机构 - 慈善机构探索与机器学习。
  • 慈善机构有效性
    • 抓取关于慈善机构的在线数据,以了解其有效性。

选举分析

政治

房地产、租赁与出租

房地产

租赁与出租

公用事业

电力

  • 电价 - 新加坡电价比较。
  • 电力与煤炭相关性 - 确定过去十年各州电价与煤炭发电之间的相关性。
  • 电力容量 - 《洛杉矶时报》对加州昂贵电力过剩的分析。
  • 电力系统 - 欧洲各国最优的风电+氢能+其他能源+电池+太阳能(WHOBS)电力系统。
  • 负荷分解 - 使用隐马尔可夫模型进行智能电表负荷分解。
  • 价格预测 - 利用深度神经网络预测德国竞价区的次日电力价格。
  • 碳排放指数 - 计算2001年至今国家、州及NERC区域的电力CO₂强度。
  • 需求预测 - 奥斯汀市电力需求预测。
  • 电力消费 - 从家庭调查中估算电力消耗。
  • 家庭用电量 - 基于LSTM的家庭用电量预测。
  • 法国电力分配 - 对法国配电网络(RTE)提供的电力数据的分析。
  • 可再生能源电站 - 累计装机容量的时间序列。
  • 风电场流场 - 与FUSED-Wind相连的风电场流场模型库。
  • 发电厂 - 数据集包含从联合循环发电厂在6年间(2006-2011年)收集的9568个数据点。

煤炭、石油和天然气

水与污染

  • 安全用水 - 预测美国基于健康标准的饮用水违规事件。
  • 水文数据 - 一套用于在Python中探索水文数据的便捷函数。
  • 水观测站 - 利用卫星影像监测湖泊和水库的水位。
  • 供水管道 - 使用机器学习在航拍图像中识别供水管道。
  • 水资源建模 - 澳大利亚水资源评估(AWRA)社区建模系统。
  • 干旱限制 - 《洛杉矶时报》对加州解除干旱限制后用水情况的分析。
  • 洪水预测 - 将LSTM应用于河流水位数据。
  • 污水溢流 - 关于卫生污水溢流(SSO)的见解。
  • 水资源核算 - 整合现有数据源,编制美国水资源预算数据。
  • 空气质量预测 - 预测北京和伦敦未来48小时的空气质量(AQ)。

交通运输

批发与零售

批发

  • 客户分析 - 批发客户的分析。
  • 分销 - JB批发分销分析。
  • 聚类分析 - 对收集到的客户产品消费数据应用无监督学习技术。
  • 市场篮子分析 - 使用Instacart公开数据集,报告哪些产品经常被一起购买。

零售

相似工具推荐

openclaw

OpenClaw 是一款专为个人打造的本地化 AI 助手,旨在让你在自己的设备上拥有完全可控的智能伙伴。它打破了传统 AI 助手局限于特定网页或应用的束缚,能够直接接入你日常使用的各类通讯渠道,包括微信、WhatsApp、Telegram、Discord、iMessage 等数十种平台。无论你在哪个聊天软件中发送消息,OpenClaw 都能即时响应,甚至支持在 macOS、iOS 和 Android 设备上进行语音交互,并提供实时的画布渲染功能供你操控。 这款工具主要解决了用户对数据隐私、响应速度以及“始终在线”体验的需求。通过将 AI 部署在本地,用户无需依赖云端服务即可享受快速、私密的智能辅助,真正实现了“你的数据,你做主”。其独特的技术亮点在于强大的网关架构,将控制平面与核心助手分离,确保跨平台通信的流畅性与扩展性。 OpenClaw 非常适合希望构建个性化工作流的技术爱好者、开发者,以及注重隐私保护且不愿被单一生态绑定的普通用户。只要具备基础的终端操作能力(支持 macOS、Linux 及 Windows WSL2),即可通过简单的命令行引导完成部署。如果你渴望拥有一个懂你

349.3k|★★★☆☆|4天前
Agent开发框架图像

stable-diffusion-webui

stable-diffusion-webui 是一个基于 Gradio 构建的网页版操作界面,旨在让用户能够轻松地在本地运行和使用强大的 Stable Diffusion 图像生成模型。它解决了原始模型依赖命令行、操作门槛高且功能分散的痛点,将复杂的 AI 绘图流程整合进一个直观易用的图形化平台。 无论是希望快速上手的普通创作者、需要精细控制画面细节的设计师,还是想要深入探索模型潜力的开发者与研究人员,都能从中获益。其核心亮点在于极高的功能丰富度:不仅支持文生图、图生图、局部重绘(Inpainting)和外绘(Outpainting)等基础模式,还独创了注意力机制调整、提示词矩阵、负向提示词以及“高清修复”等高级功能。此外,它内置了 GFPGAN 和 CodeFormer 等人脸修复工具,支持多种神经网络放大算法,并允许用户通过插件系统无限扩展能力。即使是显存有限的设备,stable-diffusion-webui 也提供了相应的优化选项,让高质量的 AI 艺术创作变得触手可及。

162.1k|★★★☆☆|4天前
开发框架图像Agent

everything-claude-code

everything-claude-code 是一套专为 AI 编程助手(如 Claude Code、Codex、Cursor 等)打造的高性能优化系统。它不仅仅是一组配置文件,而是一个经过长期实战打磨的完整框架,旨在解决 AI 代理在实际开发中面临的效率低下、记忆丢失、安全隐患及缺乏持续学习能力等核心痛点。 通过引入技能模块化、直觉增强、记忆持久化机制以及内置的安全扫描功能,everything-claude-code 能显著提升 AI 在复杂任务中的表现,帮助开发者构建更稳定、更智能的生产级 AI 代理。其独特的“研究优先”开发理念和针对 Token 消耗的优化策略,使得模型响应更快、成本更低,同时有效防御潜在的攻击向量。 这套工具特别适合软件开发者、AI 研究人员以及希望深度定制 AI 工作流的技术团队使用。无论您是在构建大型代码库,还是需要 AI 协助进行安全审计与自动化测试,everything-claude-code 都能提供强大的底层支持。作为一个曾荣获 Anthropic 黑客大奖的开源项目,它融合了多语言支持与丰富的实战钩子(hooks),让 AI 真正成长为懂上

148.6k|★★☆☆☆|今天
开发框架Agent语言模型

ComfyUI

ComfyUI 是一款功能强大且高度模块化的视觉 AI 引擎,专为设计和执行复杂的 Stable Diffusion 图像生成流程而打造。它摒弃了传统的代码编写模式,采用直观的节点式流程图界面,让用户通过连接不同的功能模块即可构建个性化的生成管线。 这一设计巧妙解决了高级 AI 绘图工作流配置复杂、灵活性不足的痛点。用户无需具备编程背景,也能自由组合模型、调整参数并实时预览效果,轻松实现从基础文生图到多步骤高清修复等各类复杂任务。ComfyUI 拥有极佳的兼容性,不仅支持 Windows、macOS 和 Linux 全平台,还广泛适配 NVIDIA、AMD、Intel 及苹果 Silicon 等多种硬件架构,并率先支持 SDXL、Flux、SD3 等前沿模型。 无论是希望深入探索算法潜力的研究人员和开发者,还是追求极致创作自由度的设计师与资深 AI 绘画爱好者,ComfyUI 都能提供强大的支持。其独特的模块化架构允许社区不断扩展新功能,使其成为当前最灵活、生态最丰富的开源扩散模型工具之一,帮助用户将创意高效转化为现实。

108.1k|★★☆☆☆|昨天
开发框架图像Agent

markitdown

MarkItDown 是一款由微软 AutoGen 团队打造的轻量级 Python 工具,专为将各类文件高效转换为 Markdown 格式而设计。它支持 PDF、Word、Excel、PPT、图片(含 OCR)、音频(含语音转录)、HTML 乃至 YouTube 链接等多种格式的解析,能够精准提取文档中的标题、列表、表格和链接等关键结构信息。 在人工智能应用日益普及的今天,大语言模型(LLM)虽擅长处理文本,却难以直接读取复杂的二进制办公文档。MarkItDown 恰好解决了这一痛点,它将非结构化或半结构化的文件转化为模型“原生理解”且 Token 效率极高的 Markdown 格式,成为连接本地文件与 AI 分析 pipeline 的理想桥梁。此外,它还提供了 MCP(模型上下文协议)服务器,可无缝集成到 Claude Desktop 等 LLM 应用中。 这款工具特别适合开发者、数据科学家及 AI 研究人员使用,尤其是那些需要构建文档检索增强生成(RAG)系统、进行批量文本分析或希望让 AI 助手直接“阅读”本地文件的用户。虽然生成的内容也具备一定可读性,但其核心优势在于为机器

93.4k|★★☆☆☆|3天前
插件开发框架

LLMs-from-scratch

LLMs-from-scratch 是一个基于 PyTorch 的开源教育项目,旨在引导用户从零开始一步步构建一个类似 ChatGPT 的大型语言模型(LLM)。它不仅是同名技术著作的官方代码库,更提供了一套完整的实践方案,涵盖模型开发、预训练及微调的全过程。 该项目主要解决了大模型领域“黑盒化”的学习痛点。许多开发者虽能调用现成模型,却难以深入理解其内部架构与训练机制。通过亲手编写每一行核心代码,用户能够透彻掌握 Transformer 架构、注意力机制等关键原理,从而真正理解大模型是如何“思考”的。此外,项目还包含了加载大型预训练权重进行微调的代码,帮助用户将理论知识延伸至实际应用。 LLMs-from-scratch 特别适合希望深入底层原理的 AI 开发者、研究人员以及计算机专业的学生。对于不满足于仅使用 API,而是渴望探究模型构建细节的技术人员而言,这是极佳的学习资源。其独特的技术亮点在于“循序渐进”的教学设计:将复杂的系统工程拆解为清晰的步骤,配合详细的图表与示例,让构建一个虽小但功能完备的大模型变得触手可及。无论你是想夯实理论基础,还是为未来研发更大规模的模型做准备

90.1k|★★★☆☆|3天前
语言模型图像Agent