Drizzle Spark 教程

1. 项目目录结构及介绍

Drizzle Spark 是一个针对流处理和迭代工作负载的低延迟执行引擎。它通过引入分组调度技术，将多个批次的计算任务同时调度执行，从而减少任务调度开销，提高吞吐量和降低延迟。

Drizzle Spark 的项目目录结构如下：

drizzle-spark/
├── assembly
├── bin
├── build
├── common
├── conf
├── core
├── data
├── dev
├── docs
├── examples
├── external
├── graphx
├── launcher
├── licenses
├── mesos
├── mllib-local
├── mllib
├── project
├── python
├── repl
├── sbin
├── sql
├── streaming
├── tools
├── yarn
├── gitattributes
├── gitignore
├── travis.yml
├── CONTRIBUTING.md
├── LICENSE
├── NOTICE
├── README.md
├── SPARK-README.md
├── appveyor.yml
├── pom.xml
├── scalastyle-config.xml
└── .gitignore

2. 项目的启动文件介绍

Drizzle Spark 的启动文件位于 bin 目录下，主要包括以下几个脚本：

• run-example: 运行 Drizzle Spark 示例程序。
• spark-class: Spark 程序的入口点。

3. 项目的配置文件介绍

Drizzle Spark 的配置文件位于 conf 目录下，主要包括以下几个文件：

• spark-env.sh: Spark 环境配置文件。
• spark-defaults.conf: Spark 默认配置文件。
• log4j.properties: 日志配置文件。

总结

本文介绍了 Drizzle Spark 项目的目录结构、启动文件和配置文件，帮助用户快速了解和使用 Drizzle Spark。