Pulsar项目技术文档
2024-12-23 12:25:42作者:庞队千Virginia
1. 安装指南
Pulsar项目是一个分布式的发布-订阅消息平台,具有灵活的消息模型和直观的客户端API。以下是安装Pulsar的步骤:
系统要求
- JDK版本根据Pulsar版本有所不同,具体如下:
- master分支和2.11及以上版本:推荐JDK 17
- 2.8至2.10版本:推荐JDK 11
- 2.7及以下版本:推荐JDK 8
- Maven 3.6.1及以上版本
安装步骤
-
克隆Pulsar仓库:
git clone https://github.com/apache/pulsar.git -
编译和安装Pulsar:
cd pulsar mvn install -DskipTests如果需要编译某个特定模块,可以使用以下命令:
mvn -pl module-name install -DskipTests -
启动独立Pulsar服务:
bin/pulsar standalone
2. 项目使用说明
Pulsar是一个支持水平扩展的发布-订阅消息系统,具有以下主要特性:
- 支持数百万个独立主题和每秒数百万条消息的发布
- 提供强排序和一致性保证
- 低延迟的持久化存储
- 主题和队列语义
- 负载均衡器
- 多租户、认证、授权、配额等功能,适合作为托管服务部署
- 支持消息消费者游标位置跟踪
- 提供REST API进行配置、管理和统计
- 支持地理复制
- 支持分区主题的透明处理
- 支持消息的透明批处理
用户可以通过官方文档和示例来学习和使用Pulsar。
3. 项目API使用文档
Pulsar提供了多种语言的客户端库,包括Java、C++、Python、Go等。以下是Java客户端API的基本使用示例:
发布消息
PulsarClient client = PulsarClient.builder()
.serviceUrl("pulsar://localhost:6650")
.build();
Producer<String> producer = client.newProducer(Schema.STRING)
.topic("my-topic")
.create();
producer.send("Hello, Pulsar!");
消费消息
Consumer<String> consumer = client.newConsumer(Schema.STRING)
.topic("my-topic")
.subscriptionName("my-subscription")
.subscribe();
while (true) {
Message<String> msg = consumer.receive();
System.out.println("Message received: " + new String(msg.getValue()));
consumer.acknowledge(msg);
}
更多关于API的使用,可以参考官方文档。
4. 项目安装方式
除了上述的源码编译安装方式,Pulsar还提供了以下几种安装方式:
Docker安装
可以使用Docker来运行Pulsar,以下是构建和运行Pulsar Docker镜像的示例命令:
mvn clean install -DskipTests
export DOCKER_CLI_EXPERIMENTAL=enabled
mvn package -Pdocker,-main -am -pl docker/pulsar-all -DskipTests
构建完成后,可以使用以下命令启动Pulsar服务:
docker run -p 6650:6650 apachepulsar/pulsar:latest
Helm Chart安装
如果使用Kubernetes,可以通过Helm Chart来安装Pulsar。首先,添加Pulsar的Helm仓库:
helm repo add apachepulsar https://github.com/apache/pulsar-helm-chart
helm repo update
然后,使用以下命令安装Pulsar:
helm install pulsar apachepulsar/pulsar
以上就是Pulsar项目的技术文档,希望对您使用Pulsar有所帮助。
登录后查看全文
热门项目推荐
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust0213
cann-learning-hubCANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。Jupyter Notebook0137
JoyAI-EchoJoyAI-Echo,这是一个独立的、仅用于推理的版本,旨在实现分钟级多镜头音视频生成。它采用了经过蒸馏的DMD生成器、配对的跨模态记忆以及故事级别的一致性。其性能的核心在于,一个跨模态视听记忆库能够在长达五分钟的视频中保持角色外观和语音音色的一致性。同时,一个训练后处理流程将基于记忆的强化学习与分布匹配蒸馏相结合,实现了7.5倍的速度提升,显著增强了视觉质量和对齐效果。00
GLM-5.2智谱开源 GLM-5.2,这是针对长文本任务的最新旗舰模型。相较于前代产品 GLM-5.1,它在长文本任务处理能力上实现了显著飞跃,并且首次在稳定的 100 万 token 上下文中提供这一能力。Jinja00
SwanLab⚡️SwanLab - an open-source, modern-design AI training tracking and visualization tool. Supports Cloud / Self-hosted use. Integrated with PyTorch / Transformers / LLaMA Factory / veRL/ Swift / Ultralytics / MMEngine / Keras etc.Python00
tiny-universe《大模型白盒子构建指南》:一个全手搓的Tiny-UniverseJupyter Notebook03
项目优选
收起
deepin linux kernel
C
32
16
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
468
461
暂无描述
Dockerfile
776
5.07 K
Ascend Extension for PyTorch
Python
756
961
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。
C++
872
2.01 K
本项目是CANN提供的神经网络类计算算子库,实现网络在NPU上加速计算。
C++
696
1.4 K
昇腾LLM分布式训练框架
Python
183
230
本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
1.1 K
1.14 K
本仓库是 Flutter SDK 与 Flutter Engine 的 OpenHarmony 适配版本,由 CPF-Flutter 团队维护。开发者可使用熟悉的 Flutter 技术栈开发 OpenHarmony 应用,3.35.7 及以后的适配版本可基于本仓库源码构建支持 OpenHarmony 的 Flutter Engine。
Dart
1.04 K
271
Oohos_react_native
React Native鸿蒙化仓库
C++
361
430