Greplin Bloom Filter 技术文档
2024-12-24 10:50:52作者:盛欣凯Ernestine
1. 安装指南
1.1 环境准备
在安装和使用 Greplin Bloom Filter 之前,请确保您的系统已经安装了以下工具:
- Maven:用于构建和管理 Java 项目。
1.2 安装步骤
- 打开终端或命令行工具。
- 克隆项目代码库:
git clone https://github.com/Greplin/greplin-bloom-filter.git - 进入项目目录:
cd greplin-bloom-filter - 使用 Maven 安装项目:
mvn install
2. 项目的使用说明
2.1 创建 Bloom Filter
您可以通过以下代码创建一个 Bloom Filter 实例:
final File onDiskFile = new File("/tmp/greplin-bloom-filter.bin");
final int expectedItems = 10000;
final double desiredFalsePositiveRate = 0.000001;
BloomFilter bloomFilter = new BloomFilter.NewBuilder(onDiskFile, expectedItems, desiredFalsePositiveRate)
.force(true) // 强制覆盖已有文件
.build();
2.2 添加和查询元素
您可以向 Bloom Filter 中添加元素,并检查元素是否存在:
final byte[] exampleItemA = "Hello World!".getBytes(Charset.forName("UTF-8"));
final byte[] exampleItemB = "Goodbye Cruel world".getBytes(Charset.forName("UTF-8"));
bloomFilter.add(exampleItemA);
bloomFilter.add(exampleItemB);
System.out.println(bloomFilter.contains(exampleItemA)); // true
System.out.println(bloomFilter.contains(exampleItemB)); // true
2.3 删除元素
如果使用的是计数桶(counting buckets),您可以删除元素:
bloomFilter.remove(exampleItemB);
System.out.println(bloomFilter.contains(exampleItemB)); // false
2.4 关闭和重新打开 Bloom Filter
您可以关闭 Bloom Filter 并从磁盘文件中重新打开它:
bloomFilter.close();
bloomFilter = null;
bloomFilter = new BloomFilter.OpenBuilder(onDiskFile).build();
System.out.println(bloomFilter.contains(exampleItemA)); // true
3. 项目API使用文档
3.1 BloomFilter 类
NewBuilder(File file, int expectedItems, double falsePositiveRate): 创建一个新的 Bloom Filter 构建器。file: 磁盘文件路径,如果为null,则 Bloom Filter 仅在内存中。expectedItems: 预计存储的元素数量。falsePositiveRate: 期望的误报率。
OpenBuilder(File file): 从磁盘文件中打开一个已有的 Bloom Filter。add(byte[] item): 向 Bloom Filter 中添加元素。contains(byte[] item): 检查元素是否存在于 Bloom Filter 中。remove(byte[] item): 从 Bloom Filter 中删除元素(仅在计数桶模式下有效)。close(): 关闭 Bloom Filter 并释放资源。
3.2 构建器选项
force(boolean force): 强制覆盖已有文件。bitsPerBucket(int bitsPerBucket): 设置每个桶的位数(默认为 8)。
4. 项目安装方式
4.1 使用 Maven 安装
通过 Maven 安装项目是最常见的方式。您只需在项目根目录下运行以下命令:
mvn install
4.2 手动编译
如果您不使用 Maven,也可以手动编译项目:
- 进入项目目录。
- 使用
javac编译 Java 文件:javac -d target src/main/java/com/greplin/*.java - 将编译后的类文件打包成 JAR 文件:
jar cf greplin-bloom-filter.jar -C target .
通过以上步骤,您可以成功安装并使用 Greplin Bloom Filter 项目。
登录后查看全文
热门项目推荐
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust0216
cann-learning-hubCANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。Jupyter Notebook0138
uni-appA cross-platform framework using Vue.jsJavaScript08
GLM-5.2智谱开源 GLM-5.2,这是针对长文本任务的最新旗舰模型。相较于前代产品 GLM-5.1,它在长文本任务处理能力上实现了显著飞跃,并且首次在稳定的 100 万 token 上下文中提供这一能力。Jinja00
SwanLab⚡️SwanLab - an open-source, modern-design AI training tracking and visualization tool. Supports Cloud / Self-hosted use. Integrated with PyTorch / Transformers / LLaMA Factory / veRL/ Swift / Ultralytics / MMEngine / Keras etc.Python00
tiny-universe《大模型白盒子构建指南》:一个全手搓的Tiny-UniverseJupyter Notebook03
项目优选
收起
deepin linux kernel
C
32
16
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
471
465
Ascend Extension for PyTorch
Python
758
968
昇腾LLM分布式训练框架
Python
186
231
本项目是CANN提供的神经网络类计算算子库,实现网络在NPU上加速计算。
C++
698
1.4 K
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。
C++
878
2.03 K
暂无描述
Dockerfile
780
5.08 K
🔥LeetCode solutions in any programming language | 多种编程语言实现 LeetCode、《剑指 Offer(第 2 版)》、《程序员面试金典(第 6 版)》题解
Java
70
22
本仓库是 Flutter SDK 与 Flutter Engine 的 OpenHarmony 适配版本,由 CPF-Flutter 团队维护。开发者可使用熟悉的 Flutter 技术栈开发 OpenHarmony 应用,3.35.7 及以后的适配版本可基于本仓库源码构建支持 OpenHarmony 的 Flutter Engine。
Dart
1.04 K
271
Claude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed.
Get Started
Rust
2.08 K
216