HeteroFL 项目使用文档
2024-08-17 19:52:02作者:董斯意
1. 项目的目录结构及介绍
HeteroFL-Computation-and-Communication-Efficient-Federated-Learning-for-Heterogeneous-Clients/
├── config/
│ └── config.yml
├── data/
│ └── ...
├── models/
│ └── ...
├── utils/
│ └── ...
├── train_classifier_fed.py
├── requirements.txt
└── README.md
- config/: 包含项目的配置文件
config.yml。 - data/: 用于存放数据集的目录。
- models/: 包含模型定义的文件。
- utils/: 包含辅助函数和工具类。
- train_classifier_fed.py: 项目的启动文件,用于训练分类器。
- requirements.txt: 列出了项目依赖的Python包。
- README.md: 项目的说明文档。
2. 项目的启动文件介绍
train_classifier_fed.py
train_classifier_fed.py 是项目的启动文件,用于训练分类器。以下是该文件的主要功能和使用方法:
- 数据加载: 支持加载不同的数据集,如 MNIST 和 CIFAR-10。
- 模型选择: 可以选择不同的模型进行训练,如 CNN 和 ResNet。
- 参数配置: 通过命令行参数配置训练参数,如数据集名称、模型名称、用户活跃率等。
示例命令:
python train_classifier_fed.py --data_name MNIST --model_name conv --control_name 1_100_0.1_iid_fix_a2-b8_bn_1_1
3. 项目的配置文件介绍
config.yml
config.yml 是项目的配置文件,包含了全局超参数的配置。以下是该文件的主要内容和配置项:
- 数据集配置: 配置数据集的路径和预处理方法。
- 模型配置: 配置模型的类型和参数。
- 训练配置: 配置训练的批次大小、学习率、迭代次数等。
- 聚合策略: 配置联邦学习中的聚合和分离策略。
示例配置:
dataset:
name: MNIST
path: data/MNIST
model:
name: conv
parameters:
batch_size: 64
learning_rate: 0.001
training:
epochs: 100
active_rate: 0.1
aggregation:
strategy: fix
split_mode: a-b
split_ratio: 20%-80%
通过修改 config.yml 文件,可以灵活地调整项目的配置,以适应不同的训练需求。
登录后查看全文
热门项目推荐
Kimi-K2.5Kimi K2.5 是一款开源的原生多模态智能体模型,它在 Kimi-K2-Base 的基础上,通过对约 15 万亿混合视觉和文本 tokens 进行持续预训练构建而成。该模型将视觉与语言理解、高级智能体能力、即时模式与思考模式,以及对话式与智能体范式无缝融合。Python00- QQwen3-Coder-Next2026年2月4日,正式发布的Qwen3-Coder-Next,一款专为编码智能体和本地开发场景设计的开源语言模型。Python00
xw-cli实现国产算力大模型零门槛部署,一键跑通 Qwen、GLM-4.7、Minimax-2.1、DeepSeek-OCR 等模型Go06
PaddleOCR-VL-1.5PaddleOCR-VL-1.5 是 PaddleOCR-VL 的新一代进阶模型,在 OmniDocBench v1.5 上实现了 94.5% 的全新 state-of-the-art 准确率。 为了严格评估模型在真实物理畸变下的鲁棒性——包括扫描伪影、倾斜、扭曲、屏幕拍摄和光照变化——我们提出了 Real5-OmniDocBench 基准测试集。实验结果表明,该增强模型在新构建的基准测试集上达到了 SOTA 性能。此外,我们通过整合印章识别和文本检测识别(text spotting)任务扩展了模型的能力,同时保持 0.9B 的超紧凑 VLM 规模,具备高效率特性。Python00
Baichuan-M3-235BBaichuan-M3 是百川智能推出的新一代医疗增强型大型语言模型,是继 Baichuan-M2 之后的又一重要里程碑。Python00
VLOOKVLOOK™ 是优雅好用的 Typora/Markdown 主题包和增强插件。 VLOOK™ is an elegant and practical THEME PACKAGE × ENHANCEMENT PLUGIN for Typora/Markdown.Less00
项目优选
收起
deepin linux kernel
C
27
11
OpenHarmony documentation | OpenHarmony开发者文档
Dockerfile
539
3.76 K
Ascend Extension for PyTorch
Python
348
414
本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
889
609
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
338
185
openJiuwen agent-studio提供零码、低码可视化开发和工作流编排,模型、知识库、插件等各资源管理能力
TSX
986
252
openGauss kernel ~ openGauss is an open source relational database management system
C++
169
233
暂无简介
Dart
778
193
🎉 (RuoYi)官方仓库 基于SpringBoot,Spring Security,JWT,Vue3 & Vite、Element Plus 的前后端分离权限管理系统
Vue
1.34 K
758
华为昇腾面向大规模分布式训练的多模态大模型套件,支撑多模态生成、多模态理解。
Python
114
140