首页
/ Apache Pulsar 项目教程

Apache Pulsar 项目教程

2024-09-02 12:57:56作者:冯爽妲Honey
pulsar
Pulsar是一个分布式的流处理引擎,主要用于消息传递和事件驱动架构。它的特点是高性能、低延迟、可扩展性强等。适用于实时数据处理场景。

1. 项目的目录结构及介绍

Apache Pulsar 是一个开源的分布式消息和流处理平台。项目的目录结构如下:

pulsar/
├── bin/                # 包含启动和管理 Pulsar 的脚本
├── conf/               # 配置文件目录
├── lib/                # 项目依赖的库文件
├── pulsar-broker/      # Pulsar 核心模块
├── pulsar-client/      # 客户端相关模块
├── pulsar-common/      # 通用工具和库
├── pulsar-discovery/   # 服务发现模块
├── pulsar-proxy/       # 代理模块
├── pulsar-websocket/   # WebSocket 支持模块
├── site2/              # 文档和网站相关内容
├── tests/              # 测试代码
└── tools/              # 工具和实用程序

主要目录介绍

  • bin/: 包含启动和管理 Pulsar 的脚本,如 pulsar-daemon.shpulsar-admin.sh
  • conf/: 包含 Pulsar 的配置文件,如 broker.confstandalone.conf
  • lib/: 包含项目依赖的库文件。
  • pulsar-broker/: Pulsar 核心模块,负责消息的存储和分发。
  • pulsar-client/: 客户端相关模块,提供各种语言的客户端库。
  • pulsar-common/: 通用工具和库,包含一些共享的代码和工具类。
  • pulsar-discovery/: 服务发现模块,用于发现和管理 Pulsar 集群中的节点。
  • pulsar-proxy/: 代理模块,提供一个透明的代理层,用于跨数据中心的消息传递。
  • pulsar-websocket/: WebSocket 支持模块,提供基于 WebSocket 的消息传递接口。
  • site2/: 文档和网站相关内容,包含项目的文档和网站源码。
  • tests/: 测试代码,包含单元测试和集成测试。
  • tools/: 工具和实用程序,包含一些管理和监控工具。

2. 项目的启动文件介绍

Pulsar 的启动文件主要位于 bin/ 目录下,以下是一些常用的启动脚本:

  • pulsar-daemon.sh: 用于启动和管理 Pulsar 的各种服务,如 Broker、BookKeeper 等。
  • pulsar-admin.sh: 用于管理 Pulsar 集群的命令行工具。
  • pulsar-client.sh: 用于发送和接收消息的命令行工具。
  • pulsar-perf.sh: 用于性能测试的命令行工具。

启动示例

启动 Pulsar Broker:

bin/pulsar-daemon.sh start broker

启动 Pulsar Standalone 模式:

bin/pulsar-daemon.sh start standalone

3. 项目的配置文件介绍

Pulsar 的配置文件位于 conf/ 目录下,以下是一些主要的配置文件:

  • broker.conf: Broker 的配置文件,包含 Broker 的各种配置选项,如端口、存储路径等。
  • standalone.conf: Standalone 模式的配置文件,用于单机模式的配置。
  • bookkeeper.conf: BookKeeper 的配置文件,用于配置 BookKeeper 服务。
  • zookeeper.conf: ZooKeeper 的配置文件,用于配置 ZooKeeper 服务。

配置文件示例

以下是 broker.conf 文件的部分配置示例:

# Broker 服务端口
brokerServicePort=6650
# Web 服务端口
webServicePort=8080
# 存储路径
managedLedgerDefaultAckQuorum=2
managedLedgerDefaultEnsembleSize=3
managedLedgerDefaultWriteQuorum=2
# ZooKeeper 地址
zookeeperServers=localhost:2181
# BookKeeper 地址
bookkeeperMetadataServiceUri=zk+hierarchical://localhost:2181/ledgers

通过修改这些配置文件,可以调整 Pulsar 的行为和性能。


以上是 Apache Pulsar 项目的目录结构、启动文件和配置文件的介绍。希望这份教程能帮助你更好地理解和使用 Apache Pulsar。

pulsar
Pulsar是一个分布式的流处理引擎,主要用于消息传递和事件驱动架构。它的特点是高性能、低延迟、可扩展性强等。适用于实时数据处理场景。
热门项目推荐
相关项目推荐

项目优选

收起
CangjieCommunity
为仓颉编程语言开发者打造活跃、开放、高质量的社区环境
Markdown
669
0
RuoYi-Vue
🎉 基于SpringBoot,Spring Security,JWT,Vue & Element 的前后端分离权限管理系统,同时提供了 Vue3 的版本
Java
136
18
openHiTLS
旨在打造算法先进、性能卓越、高效敏捷、安全可靠的密码套件,通过轻量级、可剪裁的软件技术架构满足各行业不同场景的多样化要求,让密码技术应用更简单,同时探索后量子等先进算法创新实践,构建密码前沿技术底座!
C
10
4
redis-sdk
仓颉语言实现的Redis客户端SDK。已适配仓颉0.53.4 Beta版本。接口设计兼容jedis接口语义,支持RESP2和RESP3协议,支持发布订阅模式,支持哨兵模式和集群模式。
Cangjie
322
26
advanced-java
Advanced-Java是一个Java进阶教程,适合用于学习Java高级特性和编程技巧。特点:内容深入、实例丰富、适合进阶学习。
JavaScript
75.83 K
19.04 K
qwerty-learner
为键盘工作者设计的单词记忆与英语肌肉记忆锻炼软件 / Words learning and English muscle memory training software designed for keyboard workers
TSX
15.56 K
1.44 K
Jpom
🚀简而轻的低侵入式在线构建、自动部署、日常运维、项目监控软件
Java
1.41 K
292
Yi-Coder
Yi Coder 编程模型,小而强大的编程助手
HTML
30
5
easy-es
Elasticsearch 国内Top1 elasticsearch搜索引擎框架es ORM框架,索引全自动智能托管,如丝般顺滑,与Mybatis-plus一致的API,屏蔽语言差异,开发者只需要会MySQL语法即可完成对Es的相关操作,零额外学习成本.底层采用RestHighLevelClient,兼具低码,易用,易拓展等特性,支持es独有的高亮,权重,分词,Geo,嵌套,父子类型等功能...
Java
1.42 K
231
taro
开放式跨端跨框架解决方案,支持使用 React/Vue/Nerv 等框架来开发微信/京东/百度/支付宝/字节跳动/ QQ 小程序/H5/React Native 等应用。 https://taro.zone/
TypeScript
35.34 K
4.77 K