sgan
sgan 是一个基于生成对抗网络(GAN)的开源项目,旨在解决人群运动中未来轨迹预测的难题。在复杂的社交场景中,人类的移动不仅具有多模态特性,还遵循着避免碰撞、保持间距等社会规范。sgan 通过结合序列预测与 GAN 技术,能够根据观察到的历史运动数据,生成既符合物理规律又具备“社会可接受性”的未来轨迹,有效避免了传统模型中常见的路径交叉或不自然行为。
该工具的核心架构包含生成器、判别器以及一个独特的池化模块(Pooling Module)。其中,池化模块是关键创新点,它允许模型聚合场景中所有行人的信息,从而让每个个体的轨迹预测都能感知到周围人群的动态交互。这种机制使得 sgan 在处理拥挤或复杂互动场景时表现尤为出色。
sgan 主要面向计算机视觉领域的研究人员、算法工程师及高校学生。如果你正在从事行人行为分析、自动驾驶路径规划、机器人导航或群体仿真等相关研究,sgan 提供了基于 PyTorch 的完整代码实现、预训练模型及详细的训练评估脚本,能帮助你快速复现 CVPR 2018 的经典成果,并在此基础上进行进一步的探索与创新。
使用场景
某自动驾驶研发团队正在优化车辆在城市密集人流中的路径规划算法,以确保行车安全且符合人类社交礼仪。
没有 sgan 时
- 预测轨迹单一僵化:传统模型往往只输出一种最可能的直线或简单曲线轨迹,无法涵盖行人突然变向、停顿或绕行的多种可能性(多模态特性缺失)。
- 忽视群体交互逻辑:算法将每个行人视为独立个体,无法理解两人并排行走、避让或对向穿梭时的相互影响,导致预测路径经常穿过人体。
- 生成反社会行为:模型可能预测出行人直接穿墙、原地瞬移或无视拥挤人群直行的“物理可行但社交不可接受”的诡异路线。
- 长时预测误差累积:随着预测时间窗口拉长,缺乏对抗网络约束的序列模型容易发散,生成的轨迹逐渐偏离真实人类行为模式。
使用 sgan 后
- 输出多样化合理轨迹:sgan 利用生成对抗网络特性,能同时生成多条符合概率分布的未来轨迹,准确覆盖行人犹豫、加速或转向的不同意图。
- 精准建模社交聚合:通过独特的池化机制(Pooling Module),sgan 能实时聚合场景中所有行人的状态,让预测结果体现出自然的避让和跟随行为。
- 确保社交可接受性:判别器强制筛选掉违反人类运动惯例的样本,确保输出的轨迹不仅物理可达,更符合人类在拥挤环境下的潜规则。
- 提升复杂场景鲁棒性:在十字路口或人流交织的高难度场景下,sgan 依然能保持长时间步长的预测稳定性,大幅降低碰撞误报率。
sgan 通过将社交规范融入生成式学习,让机器真正学会了像人一样理解和预测复杂的群体运动行为。
运行环境要求
- Linux
未说明(基于 PyTorch 0.4,通常建议配备支持 CUDA 的 NVIDIA GPU,但 README 未明确具体型号或显存要求)
未说明

快速开始
社交GAN
这是论文的代码实现。
社交GAN:基于生成对抗网络的社会可接受轨迹
阿格里姆·古普塔,
贾斯汀·约翰逊,
李飞飞,
西尔维奥·萨瓦雷斯,
亚历山大·阿拉伊
发表于 CVPR 2018
人类运动具有人际交互性、多模态特性,并且遵循社会规范。在本文中,我们结合序列预测和生成对抗网络的方法来解决这一问题:一个循环的序列到序列模型会观察运动历史并预测未来行为,同时使用一种新颖的池化机制来聚合跨个体的信息。
下面展示了我们的模型在复杂场景中生成的社会可接受预测示例。每个人用不同的颜色表示。观测到的轨迹用点表示,预测的轨迹用星号表示。
如果您在研究中使用了这段代码,请引用:
@inproceedings{gupta2018social,
title={Social GAN: Socially Acceptable Trajectories with Generative Adversarial Networks},
author={Gupta, Agrim and Johnson, Justin and Fei-Fei, Li and Savarese, Silvio and Alahi, Alexandre},
booktitle={IEEE Conference on Computer Vision and Pattern Recognition (CVPR)},
number={CONF},
year={2018}
}
模型
我们的模型由三个关键组件组成:生成器(G)、池化模块(PM)和判别器(D)。生成器基于编码器-解码器框架,通过池化模块将编码器和解码器的隐藏状态连接起来。生成器以场景中所有人的轨迹作为输入,输出相应的预测轨迹。判别器则接收包含输入轨迹和未来预测的完整序列,并将其分类为“真实”或“虚假”。
环境搭建
所有代码均在 Ubuntu 16.04 上使用 Python 3.5 和 PyTorch 0.4 开发并测试。
您可以按照以下步骤设置虚拟环境来运行代码:
python3 -m venv env # 创建虚拟环境
source env/bin/activate # 激活虚拟环境
pip install -r requirements.txt # 安装依赖项
echo $PWD > env/lib/python3.5/site-packages/sgan.pth # 将当前目录添加到 Python 路径
# 进行一段时间的工作 ...
deactivate # 退出虚拟环境
预训练模型
您可以通过运行脚本 bash scripts/download_models.sh 下载预训练模型。这将下载以下模型:
sgan-models/<dataset_name>_<pred_len>.pt:包含针对所有五个数据集的10个预训练模型。这些模型对应于表1中的 SGAN-20V-20。sgan-p-models/<dataset_name>_<pred_len>.pt:包含针对所有五个数据集的10个预训练模型。这些模型对应于表1中的 SGAN-20VP-20。
有关结果,请参阅 模型库。
模型运行
您可以使用脚本 scripts/evaluate_model.py 轻松地在任何数据集上运行任意一个预训练模型。例如,要复现表1中所有数据集关于 SGAN-20V-20 的结果,可以执行以下命令:
python scripts/evaluate_model.py \
--model_path models/sgan-models
训练新模型
训练新模型的说明可以在这里找到。
常见问题
相似工具推荐
openclaw
OpenClaw 是一款专为个人打造的本地化 AI 助手,旨在让你在自己的设备上拥有完全可控的智能伙伴。它打破了传统 AI 助手局限于特定网页或应用的束缚,能够直接接入你日常使用的各类通讯渠道,包括微信、WhatsApp、Telegram、Discord、iMessage 等数十种平台。无论你在哪个聊天软件中发送消息,OpenClaw 都能即时响应,甚至支持在 macOS、iOS 和 Android 设备上进行语音交互,并提供实时的画布渲染功能供你操控。 这款工具主要解决了用户对数据隐私、响应速度以及“始终在线”体验的需求。通过将 AI 部署在本地,用户无需依赖云端服务即可享受快速、私密的智能辅助,真正实现了“你的数据,你做主”。其独特的技术亮点在于强大的网关架构,将控制平面与核心助手分离,确保跨平台通信的流畅性与扩展性。 OpenClaw 非常适合希望构建个性化工作流的技术爱好者、开发者,以及注重隐私保护且不愿被单一生态绑定的普通用户。只要具备基础的终端操作能力(支持 macOS、Linux 及 Windows WSL2),即可通过简单的命令行引导完成部署。如果你渴望拥有一个懂你
stable-diffusion-webui
stable-diffusion-webui 是一个基于 Gradio 构建的网页版操作界面,旨在让用户能够轻松地在本地运行和使用强大的 Stable Diffusion 图像生成模型。它解决了原始模型依赖命令行、操作门槛高且功能分散的痛点,将复杂的 AI 绘图流程整合进一个直观易用的图形化平台。 无论是希望快速上手的普通创作者、需要精细控制画面细节的设计师,还是想要深入探索模型潜力的开发者与研究人员,都能从中获益。其核心亮点在于极高的功能丰富度:不仅支持文生图、图生图、局部重绘(Inpainting)和外绘(Outpainting)等基础模式,还独创了注意力机制调整、提示词矩阵、负向提示词以及“高清修复”等高级功能。此外,它内置了 GFPGAN 和 CodeFormer 等人脸修复工具,支持多种神经网络放大算法,并允许用户通过插件系统无限扩展能力。即使是显存有限的设备,stable-diffusion-webui 也提供了相应的优化选项,让高质量的 AI 艺术创作变得触手可及。
everything-claude-code
everything-claude-code 是一套专为 AI 编程助手(如 Claude Code、Codex、Cursor 等)打造的高性能优化系统。它不仅仅是一组配置文件,而是一个经过长期实战打磨的完整框架,旨在解决 AI 代理在实际开发中面临的效率低下、记忆丢失、安全隐患及缺乏持续学习能力等核心痛点。 通过引入技能模块化、直觉增强、记忆持久化机制以及内置的安全扫描功能,everything-claude-code 能显著提升 AI 在复杂任务中的表现,帮助开发者构建更稳定、更智能的生产级 AI 代理。其独特的“研究优先”开发理念和针对 Token 消耗的优化策略,使得模型响应更快、成本更低,同时有效防御潜在的攻击向量。 这套工具特别适合软件开发者、AI 研究人员以及希望深度定制 AI 工作流的技术团队使用。无论您是在构建大型代码库,还是需要 AI 协助进行安全审计与自动化测试,everything-claude-code 都能提供强大的底层支持。作为一个曾荣获 Anthropic 黑客大奖的开源项目,它融合了多语言支持与丰富的实战钩子(hooks),让 AI 真正成长为懂上
ComfyUI
ComfyUI 是一款功能强大且高度模块化的视觉 AI 引擎,专为设计和执行复杂的 Stable Diffusion 图像生成流程而打造。它摒弃了传统的代码编写模式,采用直观的节点式流程图界面,让用户通过连接不同的功能模块即可构建个性化的生成管线。 这一设计巧妙解决了高级 AI 绘图工作流配置复杂、灵活性不足的痛点。用户无需具备编程背景,也能自由组合模型、调整参数并实时预览效果,轻松实现从基础文生图到多步骤高清修复等各类复杂任务。ComfyUI 拥有极佳的兼容性,不仅支持 Windows、macOS 和 Linux 全平台,还广泛适配 NVIDIA、AMD、Intel 及苹果 Silicon 等多种硬件架构,并率先支持 SDXL、Flux、SD3 等前沿模型。 无论是希望深入探索算法潜力的研究人员和开发者,还是追求极致创作自由度的设计师与资深 AI 绘画爱好者,ComfyUI 都能提供强大的支持。其独特的模块化架构允许社区不断扩展新功能,使其成为当前最灵活、生态最丰富的开源扩散模型工具之一,帮助用户将创意高效转化为现实。
gemini-cli
gemini-cli 是一款由谷歌推出的开源 AI 命令行工具,它将强大的 Gemini 大模型能力直接集成到用户的终端环境中。对于习惯在命令行工作的开发者而言,它提供了一条从输入提示词到获取模型响应的最短路径,无需切换窗口即可享受智能辅助。 这款工具主要解决了开发过程中频繁上下文切换的痛点,让用户能在熟悉的终端界面内直接完成代码理解、生成、调试以及自动化运维任务。无论是查询大型代码库、根据草图生成应用,还是执行复杂的 Git 操作,gemini-cli 都能通过自然语言指令高效处理。 它特别适合广大软件工程师、DevOps 人员及技术研究人员使用。其核心亮点包括支持高达 100 万 token 的超长上下文窗口,具备出色的逻辑推理能力;内置 Google 搜索、文件操作及 Shell 命令执行等实用工具;更独特的是,它支持 MCP(模型上下文协议),允许用户灵活扩展自定义集成,连接如图像生成等外部能力。此外,个人谷歌账号即可享受免费的额度支持,且项目基于 Apache 2.0 协议完全开源,是提升终端工作效率的理想助手。
markitdown
MarkItDown 是一款由微软 AutoGen 团队打造的轻量级 Python 工具,专为将各类文件高效转换为 Markdown 格式而设计。它支持 PDF、Word、Excel、PPT、图片(含 OCR)、音频(含语音转录)、HTML 乃至 YouTube 链接等多种格式的解析,能够精准提取文档中的标题、列表、表格和链接等关键结构信息。 在人工智能应用日益普及的今天,大语言模型(LLM)虽擅长处理文本,却难以直接读取复杂的二进制办公文档。MarkItDown 恰好解决了这一痛点,它将非结构化或半结构化的文件转化为模型“原生理解”且 Token 效率极高的 Markdown 格式,成为连接本地文件与 AI 分析 pipeline 的理想桥梁。此外,它还提供了 MCP(模型上下文协议)服务器,可无缝集成到 Claude Desktop 等 LLM 应用中。 这款工具特别适合开发者、数据科学家及 AI 研究人员使用,尤其是那些需要构建文档检索增强生成(RAG)系统、进行批量文本分析或希望让 AI 助手直接“阅读”本地文件的用户。虽然生成的内容也具备一定可读性,但其核心优势在于为机器