首页
/ MIDAS 开源项目使用教程

MIDAS 开源项目使用教程

2024-09-22 22:42:15作者:侯霆垣
MIDAS
Anomaly Detection on Dynamic (time-evolving) Graphs in Real-time and Streaming manner. Detecting intrusions (DoS and DDoS attacks), frauds, fake rating anomalies.

1. 项目目录结构及介绍

MIDAS 项目的目录结构如下:

MIDAS/
├── data/
│   ├── raw/
│   └── processed/
├── models/
│   ├── midas.py
│   └── utils.py
├── notebooks/
│   └── example.ipynb
├── scripts/
│   ├── train.py
│   └── evaluate.py
├── config/
│   └── config.yaml
├── README.md
├── requirements.txt
└── setup.py

目录介绍

  • data/: 存放数据文件的目录,包含原始数据 (raw/) 和处理后的数据 (processed/)。
  • models/: 存放模型相关的代码文件,midas.py 是主模型文件,utils.py 包含一些辅助函数。
  • notebooks/: 存放 Jupyter Notebook 文件,example.ipynb 是一个示例 Notebook。
  • scripts/: 存放脚本文件,train.py 用于训练模型,evaluate.py 用于评估模型。
  • config/: 存放配置文件,config.yaml 是主要的配置文件。
  • README.md: 项目的说明文档。
  • requirements.txt: 项目依赖的 Python 包列表。
  • setup.py: 用于安装项目的脚本。

2. 项目启动文件介绍

项目的启动文件主要是 scripts/train.pyscripts/evaluate.py

train.py

train.py 是用于训练模型的脚本。它读取配置文件 (config/config.yaml) 中的参数,加载数据,初始化模型,并进行训练。训练完成后,模型会被保存到指定目录。

evaluate.py

evaluate.py 是用于评估模型的脚本。它加载训练好的模型,并使用测试数据进行评估,输出评估结果。

3. 项目配置文件介绍

项目的配置文件是 config/config.yaml,它包含了模型的各种参数设置。

config.yaml 示例

data:
  raw_data_path: "data/raw/dataset.csv"
  processed_data_path: "data/processed/dataset.csv"

model:
  hidden_size: 128
  num_layers: 2
  dropout: 0.2

training:
  batch_size: 32
  epochs: 10
  learning_rate: 0.001

evaluation:
  metrics: ["accuracy", "f1_score"]

配置文件参数介绍

  • data: 数据相关的配置,包括原始数据路径 (raw_data_path) 和处理后的数据路径 (processed_data_path)。
  • model: 模型相关的配置,包括隐藏层大小 (hidden_size)、层数 (num_layers) 和 dropout 率 (dropout)。
  • training: 训练相关的配置,包括批次大小 (batch_size)、训练轮数 (epochs) 和学习率 (learning_rate)。
  • evaluation: 评估相关的配置,包括评估指标 (metrics)。

通过修改 config.yaml 文件中的参数,可以调整模型的行为和训练过程。

MIDAS
Anomaly Detection on Dynamic (time-evolving) Graphs in Real-time and Streaming manner. Detecting intrusions (DoS and DDoS attacks), frauds, fake rating anomalies.
热门项目推荐
相关项目推荐

项目优选

收起
CangjieCommunity
为仓颉编程语言开发者打造活跃、开放、高质量的社区环境
Markdown
672
0
RuoYi-Vue
🎉 基于SpringBoot,Spring Security,JWT,Vue & Element 的前后端分离权限管理系统,同时提供了 Vue3 的版本
Java
136
18
openHiTLS
旨在打造算法先进、性能卓越、高效敏捷、安全可靠的密码套件,通过轻量级、可剪裁的软件技术架构满足各行业不同场景的多样化要求,让密码技术应用更简单,同时探索后量子等先进算法创新实践,构建密码前沿技术底座!
C
12
8
redis-sdk
仓颉语言实现的Redis客户端SDK。已适配仓颉0.53.4 Beta版本。接口设计兼容jedis接口语义,支持RESP2和RESP3协议,支持发布订阅模式,支持哨兵模式和集群模式。
Cangjie
322
26
advanced-java
Advanced-Java是一个Java进阶教程,适合用于学习Java高级特性和编程技巧。特点:内容深入、实例丰富、适合进阶学习。
JavaScript
75.83 K
19.04 K
qwerty-learner
为键盘工作者设计的单词记忆与英语肌肉记忆锻炼软件 / Words learning and English muscle memory training software designed for keyboard workers
TSX
15.56 K
1.44 K
Jpom
🚀简而轻的低侵入式在线构建、自动部署、日常运维、项目监控软件
Java
1.41 K
292
Yi-Coder
Yi Coder 编程模型,小而强大的编程助手
HTML
30
5
easy-es
Elasticsearch 国内Top1 elasticsearch搜索引擎框架es ORM框架,索引全自动智能托管,如丝般顺滑,与Mybatis-plus一致的API,屏蔽语言差异,开发者只需要会MySQL语法即可完成对Es的相关操作,零额外学习成本.底层采用RestHighLevelClient,兼具低码,易用,易拓展等特性,支持es独有的高亮,权重,分词,Geo,嵌套,父子类型等功能...
Java
1.42 K
231
taro
开放式跨端跨框架解决方案,支持使用 React/Vue/Nerv 等框架来开发微信/京东/百度/支付宝/字节跳动/ QQ 小程序/H5/React Native 等应用。 https://taro.zone/
TypeScript
35.34 K
4.77 K