Gunrock:GPU图分析的强大工具
2024-09-18 18:38:05作者:宣利权Counsellor
项目介绍
Gunrock 是一个专为GPU设计的CUDA库,专注于图处理。它采用了一种高层次、批量同步/异步、数据中心抽象的方法,特别关注顶点或边前沿的操作。Gunrock通过结合高性能GPU计算原语和优化策略(特别是在细粒度负载均衡方面),以及一种允许程序员快速开发新图原语的高层次编程模型,实现了性能和表达性之间的平衡。这使得开发者能够轻松地从单个GPU扩展到多个GPU,而无需深入了解GPU编程。
项目技术分析
Gunrock的核心技术在于其高效的GPU计算原语和优化策略。它利用CUDA的并行计算能力,通过高层次的编程模型简化了图算法的实现。Gunrock支持多种图算法,如广度优先搜索(BFS)、单源最短路径(SSSP)等,并且提供了丰富的示例和文档,帮助开发者快速上手。
Gunrock的架构设计灵活,支持从单个GPU到多个GPU的扩展,适用于不同的计算场景。其自动化的依赖管理(如NVIDIA/thrust
和NVIDIA/cub
)进一步简化了项目的构建和维护。
项目及技术应用场景
Gunrock适用于需要高性能图处理的多种场景,包括但不限于:
- 社交网络分析:快速分析大规模社交网络中的关系和影响力。
- 生物信息学:处理复杂的生物网络,如蛋白质相互作用网络。
- 推荐系统:通过图算法优化推荐系统的准确性和效率。
- 金融风控:分析交易网络中的异常行为和潜在风险。
项目特点
- 高性能:利用CUDA的并行计算能力,Gunrock在GPU上实现了高效的图处理。
- 易用性:高层次的编程模型和丰富的文档使得开发者能够快速上手,无需深入了解GPU编程。
- 灵活性:支持从单个GPU到多个GPU的扩展,适用于不同的计算需求。
- 自动化依赖管理:自动获取和配置外部依赖,简化了项目的构建和维护。
- 丰富的示例和文档:提供了多种图算法的示例和详细的文档,帮助开发者快速理解和使用Gunrock。
快速开始
在开始构建Gunrock之前,请确保您的系统上已安装CUDA Toolkit(推荐版本为v11.5.1或更高)。其他外部依赖(如NVIDIA/thrust
和NVIDIA/cub
)将通过cmake
自动获取。
git clone https://github.com/gunrock/gunrock.git
cd gunrock
mkdir build && cd build
cmake ..
make sssp # 或者使用 make -j$(nproc) 编译所有算法
bin/sssp ../datasets/chesapeake/chesapeake.mtx
实现图算法
Gunrock提供了详细的文档,帮助开发者理解和实现新的图算法。以下是一个简单的示例,展示了如何在GPU上使用Gunrock的数据中心、批量同步编程模型实现广度优先搜索(BFS)。
void prepare_frontier(frontier_t* f,
gcuda::multi_context_t& context) override {
auto P = this->get_problem();
f->push_back(P->param.single_source);
}
void loop(gcuda::multi_context_t& context) override {
auto E = this->get_enactor();
auto P = this->get_problem();
auto G = P->get_graph();
auto single_source = P->param.single_source;
auto distances = P->result.distances;
auto visited = P->visited.data().get();
auto iteration = this->iteration;
auto search = [=] __host__ __device__(
vertex_t const& source,
vertex_t const& neighbor,
edge_t const& edge,
weight_t const& weight) -> bool {
auto old_distance =
math::atomic::min(&distances[neighbor], iteration + 1);
return (iteration + 1 < old_distance);
};
operators::advance::execute<operators::load_balance_t::block_mapped>(
G, E, search, context);
}
引用Gunrock
感谢您对Gunrock的关注和支持。如果您在研究中使用了Gunrock,请引用以下文献:
@article{Wang:2017:GGG,
author = {Yangzihao Wang and Yuechao Pan and Andrew Davidson
and Yuduo Wu and Carl Yang and Leyuan Wang and
Muhammad Osama and Chenshan Yuan and Weitang Liu and
Andy T. Riffel and John D. Owens},
title = {{G}unrock: {GPU} Graph Analytics},
journal = {ACM Transactions on Parallel Computing},
year = 2017,
volume = 4,
number = 1,
month = aug,
pages = {3:1--3:49},
doi = {10.1145/3108140},
ee = {http://arxiv.org/abs/1701.01170},
acmauthorize = {https://dl.acm.org/doi/10.1145/3108140?cid=81100458295},
url = {http://escholarship.org/uc/item/9gj6r1dj},
code = {https://github.com/gunrock/gunrock},
ucdcite = {a115},
}
版权与许可
Gunrock由加利福尼亚大学董事会所有。该库、示例和所有源代码均在Apache 2.0许可下发布。
登录后查看全文
热门项目推荐
GLM-4.6
GLM-4.6在GLM-4.5基础上全面升级:200K超长上下文窗口支持复杂任务,代码性能大幅提升,前端页面生成更优。推理能力增强且支持工具调用,智能体表现更出色,写作风格更贴合人类偏好。八项公开基准测试显示其全面超越GLM-4.5,比肩DeepSeek-V3.1-Terminus等国内外领先模型。【此简介由AI生成】Jinja00- DDeepSeek-V3.2-ExpDeepSeek-V3.2-Exp是DeepSeek推出的实验性模型,基于V3.1-Terminus架构,创新引入DeepSeek Sparse Attention稀疏注意力机制,在保持模型输出质量的同时,大幅提升长文本场景下的训练与推理效率。该模型在MMLU-Pro、GPQA-Diamond等多领域公开基准测试中表现与V3.1-Terminus相当,支持HuggingFace、SGLang、vLLM等多种本地运行方式,开源内核设计便于研究,采用MIT许可证。【此简介由AI生成】Python00
GLM-V
GLM-4.5V and GLM-4.1V-Thinking: Towards Versatile Multimodal Reasoning with Scalable Reinforcement LearningPython00ops-transformer
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。C++0107AI内容魔方
AI内容专区,汇集全球AI开源项目,集结模块、可组合的内容,致力于分享、交流。02Spark-Chemistry-X1-13B
科大讯飞星火化学-X1-13B (iFLYTEK Spark Chemistry-X1-13B) 是一款专为化学领域优化的大语言模型。它由星火-X1 (Spark-X1) 基础模型微调而来,在化学知识问答、分子性质预测、化学名称转换和科学推理方面展现出强大的能力,同时保持了强大的通用语言理解与生成能力。Python00GOT-OCR-2.0-hf
阶跃星辰StepFun推出的GOT-OCR-2.0-hf是一款强大的多语言OCR开源模型,支持从普通文档到复杂场景的文字识别。它能精准处理表格、图表、数学公式、几何图形甚至乐谱等特殊内容,输出结果可通过第三方工具渲染成多种格式。模型支持1024×1024高分辨率输入,具备多页批量处理、动态分块识别和交互式区域选择等创新功能,用户可通过坐标或颜色指定识别区域。基于Apache 2.0协议开源,提供Hugging Face演示和完整代码,适用于学术研究到工业应用的广泛场景,为OCR领域带来突破性解决方案。00- HHowToCook程序员在家做饭方法指南。Programmer's guide about how to cook at home (Chinese only).Dockerfile010
- PpathwayPathway is an open framework for high-throughput and low-latency real-time data processing.Python00
项目优选
收起

deepin linux kernel
C
22
6

OpenHarmony documentation | OpenHarmony开发者文档
Dockerfile
213
2.21 K

暂无简介
Dart
521
115

Nop Platform 2.0是基于可逆计算理论实现的采用面向语言编程范式的新一代低代码开发平台,包含基于全新原理从零开始研发的GraphQL引擎、ORM引擎、工作流引擎、报表引擎、规则引擎、批处理引引擎等完整设计。nop-entropy是它的后端部分,采用java语言实现,可选择集成Spring框架或者Quarkus框架。中小企业可以免费商用
Java
9
1

🎉 (RuoYi)官方仓库 基于SpringBoot,Spring Security,JWT,Vue3 & Vite、Element Plus 的前后端分离权限管理系统
Vue
978
578

本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
552
86

Ascend Extension for PyTorch
Python
65
94

React Native鸿蒙化仓库
JavaScript
209
285

openGauss kernel ~ openGauss is an open source relational database management system
C++
147
194

旨在打造算法先进、性能卓越、高效敏捷、安全可靠的密码套件,通过轻量级、可剪裁的软件技术架构满足各行业不同场景的多样化要求,让密码技术应用更简单,同时探索后量子等先进算法创新实践,构建密码前沿技术底座!
C
1.02 K
399