OpenSIEM-Logstash-Parsing 的项目扩展与二次开发

项目的基础介绍

OpenSIEM-Logstash-Parsing 是一个开源项目，旨在为使用 Elasticsearch 作为 SIEM（安全事件和 incident 管理系统）的用户提供 Logstash 解析配置。该项目由 Cargill SIEM 团队开发，包含了许多针对知名日志厂商的 Logstash 解析处理器，以及日志收集程序和设置脚本，用于生成 pipeline-to-pipeline 架构。

项目的核心功能

该项目的主要功能是减少在 Elasticsearch 中使用 SIEM 时实施 Logstash 解析和应用 Elastic Common Schema（ECS）的复杂性。具体功能包括：

• 提供了针对多种日志类型的 Logstash 解析配置。
• 包含日志收集程序，支持 API-based 日志收集。
• 提供了生成 pipeline-to-pipeline 架构的设置脚本。

项目使用了哪些框架或库？

OpenSIEM-Logstash-Parsing 项目主要使用了以下框架或库：

• Python：用于编写日志收集程序和部分解析逻辑。
• Ruby：用于编写 Logstash 解析配置。

项目的代码目录及介绍

项目的代码目录结构如下：

• .github/：包含 GitHub 工作流程和贡献指南。
• build_scripts/：包含构建和部署脚本，以及项目架构的详细文档。
• config/：包含 Logstash 解析配置文件。
• doc/：包含项目文档，包括快速启动指南和贡献指南。
• .gitignore：指定 Git 忽略的文件。
• CONTRIBUTING.md：提供贡献项目的方式和指南。
• GETTING_STARTED.md：提供项目安装和配置的快速入门指南。
• LICENSE：项目的 Apache-2.0 许可证。
• README.md：项目的自述文件，包含项目介绍和基本使用方法。

对项目进行扩展或者二次开发的方向

1. 扩展解析配置：可以根据需求添加更多日志类型的解析配置，以支持更多的日志数据源。
2. 增加日志收集方式：可以根据不同场景的需求，扩展或优化日志收集程序，支持更多类型的日志收集。
3. 优化性能：对现有的解析配置和脚本进行优化，提高处理效率和性能。
4. 增强可定制性：提供更多可配置的选项，让用户可以根据自己的需求调整解析逻辑和收集行为。
5. 集成其他工具：将项目与更多的监控、分析工具集成，以构建更完善的安全事件管理系统。