karateclub

GitHub
2.3k 257 非常简单 1 次阅读 昨天GPL-3.0其他开发框架
AI 解读 由 AI 自动生成,仅供参考

Karate Club 是一个专为 NetworkX 打造的 Python 无监督图学习扩展库,把节点嵌入、图嵌入、重叠/非重叠社区发现等 50 余种前沿算法打包成“瑞士军刀”式的统一 API。只需几行代码,就能把社交网络、生物分子、推荐系统等图数据自动转成向量或划分社区,省去繁琐实现与调参。它尤其适合图神经网络研究者、数据科学家和需要快速原型验证的开发者;内置算法均来自 NeurIPS、KDD、AAAI 等顶会顶刊,并可直接对接 SNAP、TUD 等公开图数据集。轻量、零依赖、文档齐全,让图挖掘像调包一样简单。

使用场景

一家中型电商公司想从 200 万用户的“浏览-加购-分享”行为图中找出潜在高价值社群,以便做精准营销。数据科学团队只有 3 人,且对图算法经验有限。

没有 karateclub 时

  • 需要手动实现 DeepWalk、Node2Vec 等 10 余种嵌入算法,代码量上千行,调试耗时 2 周。
  • 社区检测用 Louvain 时,发现重叠社群无法处理,只得再写一套 Ego-splitting,结果又花 3 天。
  • 不同算法输出格式各异,后续聚类、可视化全靠脚本拼接,维护噩梦。
  • 线上 A/B 测试时,因模型更新慢,错过双 11 预热期,损失预估 80 万 GMV。

使用 karateclub 后

  • 3 行代码调用 DeepWalk + EgoNetSplitter,30 分钟完成节点嵌入与重叠社群划分,直接输出统一字典格式。
  • 内置 30+ 模型一键切换,团队用 GEMSEC 试出更紧密的“高客单价”社群,准确率提升 12%。
  • 结果无缝对接 scikit-learn 与 NetworkX,可视化脚本复用率 100%,维护成本归零。
  • 模型迭代周期从 2 周压缩到 1 天,赶在双 11 前上线,额外带来 120 万 GMV。

karateclub 把图上的无监督学习变成“调包即用”,让小团队也能像大厂一样快速挖掘社群价值。

运行环境要求

操作系统
  • Linux
  • macOS
  • Windows
GPU

未说明

内存

未说明

依赖
notes纯 CPU 实现,无需 GPU;安装仅需 pip install karateclub;所有算法针对小规模图数据设计,内存占用随图规模线性增长
python3.6+
networkx
numpy
scipy
scikit-learn
tqdm
gensim
numba
pandas
karateclub hero image

快速开始

版本 许可证 仓库大小 Arxiv 构建徽章 覆盖率徽章


Karate Club 是一个面向 NetworkX 的无监督机器学习扩展库。

请访问 文档、相关 论文宣传视频,以及 外部资源

Karate Club 汇集了用于在图结构数据上进行无监督学习的前沿方法。简单来说,它就像一把瑞士军刀,专为小规模图挖掘研究而设计。首先,它提供了节点级和图级的网络嵌入技术;其次,它还包含多种重叠与非重叠的社区检测方法。所实现的方法覆盖了广泛的网络科学领域(如 NetSciComplenet)、数据挖掘(如 ICDMCIKMKDD)、人工智能(如 AAAIIJCAI)以及机器学习(如 NeurIPSICMLICLR)等领域的会议、研讨会和知名期刊中的相关研究成果。

新近推出的图分类数据集已上线至 SNAPTUD 图像核数据集GraphLearning.io


引用

如果您在研究中发现 Karate Club 及其新数据集非常有用,请考虑引用以下论文:

@inproceedings{karateclub,
       title = {{Karate Club: 一个以 API 为导向的开源 Python 框架,用于图上的无监督学习}},
       author = {Benedek Rozemberczki、Oliver Kiss、Rik Sarkar},
       year = {2020},
       pages = {3125–3132},
       booktitle = {29th ACM International Conference on Information and Knowledge Management (CIKM '20) 的会议论文集},
       organization = {ACM},
}

一个简单的示例

Karate Club 让现代社区检测技术的使用变得极为便捷(详见 此处 的配套教程)。例如,只需几行代码,您就可以在 Watts-Strogatz 图上使用该库 Ego 分裂

import networkx as nx
from karateclub import EgoNetSplitter

g = nx.newman_watts_strogatz_graph(1000, 20, 0.05)

splitter = EgoNetSplitter(1.0)

splitter.fit(g)

print(splitter.get_memberships())

包含的模型

具体而言,我们实现了以下社区检测与嵌入方法:

重叠社区检测

非重叠社区检测

保持邻近度的节点嵌入

  • GraRep——出自 Cao 等人:《GraRep:利用全局结构信息学习图表示》(CIKM 2015)
  • DeepWalk——出自 Perozzi 等人:《DeepWalk:在线学习社交表示》(ArXiv 2014)
  • Node2Vec——出自 Grover 等人:《node2vec:面向网络的可扩展特征学习》(CS.斯坦福大学,Jietang,2016)
  • SocioDim——出自 Tang 等人:《基于潜在社会维度的关系学习》(KDD 2009)
  • GLEE——出自 Torres 等人:《GLEE:几何拉普拉斯特征映射嵌入》(Journal of Complex Networks 2020)
  • BoostNE——出自 Li 等人:《基于提升的低秩矩阵近似实现的多级网络嵌入》(ASONAM 2019)
  • NodeSketch——出自 Yang 等人:《NodeSketch:通过递归抽样实现高效图嵌入》(Exascale 信息,2019)
  • Diff2Vec——出自 Rozemberczki 和 Sarkar:《基于扩散图的快速序列嵌入》(CompleNet 2018)
  • NetMF——出自 Qiu 等人:《将网络嵌入视为矩阵分解:统一 DeepWalk、LINE、PTE 与 Node2Vec》(WSDM 2018)
  • RandNE——出自 Zhang 等人:《基于迭代随机投影的数十亿规模网络嵌入》(ArXiv 2018)
  • Walklets——出自 Perozzi 等人:《别走路,跳过!在线学习多尺度网络嵌入》(ArXiv 2016)
  • HOPE——出自 Ou 等人:《非对称传递性保持的图嵌入》(DLACM 2016)
  • NMF-ADMM——出自 Sun 和 Févotte:《用于非负矩阵分解的交替方向乘法器方法:结合贝塔散度》(ICASSP 2014)
  • 拉普拉斯特征映射——出自 Belkin 和 Niyogi:《拉普拉斯特征映射与谱技术:用于嵌入与聚类》(NIPS 2001)

结构化节点层级嵌入

  • GraphWave——出自 Donnat 等人:《通过扩散小波学习结构化节点嵌入》(KDD 2018)
  • Role2Vec——出自 Ahmed 等人:《学习基于角色的图嵌入》(ArXiv 2018)

带属性的节点层级嵌入

  • FEATHER-N——出自 Rozemberczki 等人:《图上的特征函数:从统计描述符到参数化模型——如“鸟群”一般》(ArXiv 2020)

  • TADW——出自 Yang 等人:《利用丰富文本信息进行网络表示学习》(IJCAI StarAI 2015)

  • MUSAE——出自 Rozemberczki 等人:《多尺度带属性节点嵌入》(ArXiv 2019)

  • AE——出自 Rozemberczki 等人:《多尺度带属性节点嵌入》(ArXiv 2019)

  • FSCNMF——出自 Bandyopadhyay 等人:《通过非负矩阵分解融合结构与内容,实现信息网络的嵌入》(ArXiV 2018)

  • SINE——出自 Zhang 等人:《SINE:可扩展的不完整网络嵌入》(ArXiv 2018)

  • BANE——出自 Yang 等人:《二值化带属性网络嵌入》(IEEExplore.ieee.org,8626170)(ICDM 2018)

  • TENE 由杨等人提出:利用文本信息增强网络嵌入(ICPR 2018)

  • ASNE 由廖等人提出:带属性的社会网络嵌入(TKDE 2018)

元节点嵌入

图级嵌入

前往我们的文档,了解有关安装与数据处理的更多详情,以及已实现的方法和数据集的完整列表。如需快速入门,请查看我们的示例

若发现任何意外情况,请随时打开问题并告知我们。如果您缺少某项特定方法,欢迎随时提交功能请求。 我们始终致力于让 Karate Club 不断臻于完善。


安装

Karate Club 可以通过以下 pip 命令进行安装。

$ pip install karateclub

由于我们经常发布新版本,因此适时升级软件包可能会带来诸多益处。

$ pip install karateclub --upgrade

运行示例

作为文档的一部分,我们提供了多种用例,展示如何将聚类结果与嵌入向量应用于下游学习任务。这些用例可在此查阅,并附有详细的逐行说明。

除了案例研究之外,我们还为每种模型提供了合成示例。您只需运行示例脚本即可尝试这些示例。要运行其中某个示例,您可以使用 Graph2Vec 的代码片段:

$ cd examples/whole_graph_embedding/
$ python graph2vec_example.py

运行测试

在项目根目录下:

$ pytest

许可证

版本历史

v_103042022/12/04
v_103032022/10/22
v_103022022/09/04
v_103012022/08/13
v_103002022/06/04
v_102042022/06/03
v_102032022/01/22
v_102022021/09/29
v_102012021/08/04
v_102002021/07/02
v_101002021/05/19
v_100242021/03/30
v_100232021/01/25
v_100222020/12/01
v_100202020/11/20
v_1000212020/11/20
v_100192020/11/06
v_1000182020/11/05
v_100172020/10/23
v_100162020/10/18

常见问题

相似工具推荐

stable-diffusion-webui

stable-diffusion-webui 是一个基于 Gradio 构建的网页版操作界面,旨在让用户能够轻松地在本地运行和使用强大的 Stable Diffusion 图像生成模型。它解决了原始模型依赖命令行、操作门槛高且功能分散的痛点,将复杂的 AI 绘图流程整合进一个直观易用的图形化平台。 无论是希望快速上手的普通创作者、需要精细控制画面细节的设计师,还是想要深入探索模型潜力的开发者与研究人员,都能从中获益。其核心亮点在于极高的功能丰富度:不仅支持文生图、图生图、局部重绘(Inpainting)和外绘(Outpainting)等基础模式,还独创了注意力机制调整、提示词矩阵、负向提示词以及“高清修复”等高级功能。此外,它内置了 GFPGAN 和 CodeFormer 等人脸修复工具,支持多种神经网络放大算法,并允许用户通过插件系统无限扩展能力。即使是显存有限的设备,stable-diffusion-webui 也提供了相应的优化选项,让高质量的 AI 艺术创作变得触手可及。

162.1k|★★★☆☆|今天
开发框架图像Agent

everything-claude-code

everything-claude-code 是一套专为 AI 编程助手(如 Claude Code、Codex、Cursor 等)打造的高性能优化系统。它不仅仅是一组配置文件,而是一个经过长期实战打磨的完整框架,旨在解决 AI 代理在实际开发中面临的效率低下、记忆丢失、安全隐患及缺乏持续学习能力等核心痛点。 通过引入技能模块化、直觉增强、记忆持久化机制以及内置的安全扫描功能,everything-claude-code 能显著提升 AI 在复杂任务中的表现,帮助开发者构建更稳定、更智能的生产级 AI 代理。其独特的“研究优先”开发理念和针对 Token 消耗的优化策略,使得模型响应更快、成本更低,同时有效防御潜在的攻击向量。 这套工具特别适合软件开发者、AI 研究人员以及希望深度定制 AI 工作流的技术团队使用。无论您是在构建大型代码库,还是需要 AI 协助进行安全审计与自动化测试,everything-claude-code 都能提供强大的底层支持。作为一个曾荣获 Anthropic 黑客大奖的开源项目,它融合了多语言支持与丰富的实战钩子(hooks),让 AI 真正成长为懂上

139k|★★☆☆☆|今天
开发框架Agent语言模型

ComfyUI

ComfyUI 是一款功能强大且高度模块化的视觉 AI 引擎,专为设计和执行复杂的 Stable Diffusion 图像生成流程而打造。它摒弃了传统的代码编写模式,采用直观的节点式流程图界面,让用户通过连接不同的功能模块即可构建个性化的生成管线。 这一设计巧妙解决了高级 AI 绘图工作流配置复杂、灵活性不足的痛点。用户无需具备编程背景,也能自由组合模型、调整参数并实时预览效果,轻松实现从基础文生图到多步骤高清修复等各类复杂任务。ComfyUI 拥有极佳的兼容性,不仅支持 Windows、macOS 和 Linux 全平台,还广泛适配 NVIDIA、AMD、Intel 及苹果 Silicon 等多种硬件架构,并率先支持 SDXL、Flux、SD3 等前沿模型。 无论是希望深入探索算法潜力的研究人员和开发者,还是追求极致创作自由度的设计师与资深 AI 绘画爱好者,ComfyUI 都能提供强大的支持。其独特的模块化架构允许社区不断扩展新功能,使其成为当前最灵活、生态最丰富的开源扩散模型工具之一,帮助用户将创意高效转化为现实。

107.7k|★★☆☆☆|2天前
开发框架图像Agent

NextChat

NextChat 是一款轻量且极速的 AI 助手,旨在为用户提供流畅、跨平台的大模型交互体验。它完美解决了用户在多设备间切换时难以保持对话连续性,以及面对众多 AI 模型不知如何统一管理的痛点。无论是日常办公、学习辅助还是创意激发,NextChat 都能让用户随时随地通过网页、iOS、Android、Windows、MacOS 或 Linux 端无缝接入智能服务。 这款工具非常适合普通用户、学生、职场人士以及需要私有化部署的企业团队使用。对于开发者而言,它也提供了便捷的自托管方案,支持一键部署到 Vercel 或 Zeabur 等平台。 NextChat 的核心亮点在于其广泛的模型兼容性,原生支持 Claude、DeepSeek、GPT-4 及 Gemini Pro 等主流大模型,让用户在一个界面即可自由切换不同 AI 能力。此外,它还率先支持 MCP(Model Context Protocol)协议,增强了上下文处理能力。针对企业用户,NextChat 提供专业版解决方案,具备品牌定制、细粒度权限控制、内部知识库整合及安全审计等功能,满足公司对数据隐私和个性化管理的高标准要求。

87.6k|★★☆☆☆|今天
开发框架语言模型

ML-For-Beginners

ML-For-Beginners 是由微软推出的一套系统化机器学习入门课程,旨在帮助零基础用户轻松掌握经典机器学习知识。这套课程将学习路径规划为 12 周,包含 26 节精炼课程和 52 道配套测验,内容涵盖从基础概念到实际应用的完整流程,有效解决了初学者面对庞大知识体系时无从下手、缺乏结构化指导的痛点。 无论是希望转型的开发者、需要补充算法背景的研究人员,还是对人工智能充满好奇的普通爱好者,都能从中受益。课程不仅提供了清晰的理论讲解,还强调动手实践,让用户在循序渐进中建立扎实的技能基础。其独特的亮点在于强大的多语言支持,通过自动化机制提供了包括简体中文在内的 50 多种语言版本,极大地降低了全球不同背景用户的学习门槛。此外,项目采用开源协作模式,社区活跃且内容持续更新,确保学习者能获取前沿且准确的技术资讯。如果你正寻找一条清晰、友好且专业的机器学习入门之路,ML-For-Beginners 将是理想的起点。

85k|★★☆☆☆|今天
图像数据工具视频

ragflow

RAGFlow 是一款领先的开源检索增强生成(RAG)引擎,旨在为大语言模型构建更精准、可靠的上下文层。它巧妙地将前沿的 RAG 技术与智能体(Agent)能力相结合,不仅支持从各类文档中高效提取知识,还能让模型基于这些知识进行逻辑推理和任务执行。 在大模型应用中,幻觉问题和知识滞后是常见痛点。RAGFlow 通过深度解析复杂文档结构(如表格、图表及混合排版),显著提升了信息检索的准确度,从而有效减少模型“胡编乱造”的现象,确保回答既有据可依又具备时效性。其内置的智能体机制更进一步,使系统不仅能回答问题,还能自主规划步骤解决复杂问题。 这款工具特别适合开发者、企业技术团队以及 AI 研究人员使用。无论是希望快速搭建私有知识库问答系统,还是致力于探索大模型在垂直领域落地的创新者,都能从中受益。RAGFlow 提供了可视化的工作流编排界面和灵活的 API 接口,既降低了非算法背景用户的上手门槛,也满足了专业开发者对系统深度定制的需求。作为基于 Apache 2.0 协议开源的项目,它正成为连接通用大模型与行业专有知识之间的重要桥梁。

77.1k|★★★☆☆|2天前
Agent图像开发框架