DuckDB多语言客户端指南:Python、R、Java深度集成
2026-02-05 05:48:17作者:宗隆裙
DuckDB作为高性能分析型数据库,提供了多语言客户端支持,实现与主流编程语言的无缝集成。本文将详细介绍Python、R和Java客户端的使用方法,帮助开发者快速上手并应用于实际场景。
项目概述
DuckDB是一款高性能分析型数据库管理系统(DBMS),设计目标是快速、可靠、便携且易于使用。它支持丰富的SQL方言,包括复杂查询、窗口函数、事务处理等高级特性,并提供多种语言客户端,满足不同开发场景需求。
官方文档:README.md
Python客户端
Python客户端是DuckDB应用最广泛的接口之一,提供了直观的API和与pandas等数据科学库的深度集成。
基本用法
import duckdb
# 连接到内存数据库
conn = duckdb.connect()
# 创建表并插入数据
conn.execute("CREATE TABLE test_table (i INTEGER, j STRING)")
conn.execute("INSERT INTO test_table VALUES (1, 'one')")
conn.execute("INSERT INTO test_table VALUES (?, ?)", [2, 'two'])
# 查询数据并转换为DataFrame
df = conn.execute("SELECT * FROM test_table").fetchdf()
print(df)
示例代码:examples/python/duckdb-python.py
关系型API
DuckDB Python客户端提供了关系型API,支持链式操作:
# 从DataFrame创建关系对象
rel = duckdb.df(test_df)
# 链式操作:过滤、投影、排序和限制
result = rel.filter('i > 1').project('i + 1, j').order('j').limit(2)
# 转换为DataFrame
print(result.df())
与Pandas集成
DuckDB可以直接查询Pandas DataFrame,无需将数据导入数据库:
import pandas as pd
test_df = pd.DataFrame({'i': [1, 2, 3, 4], 'j': ['one', 'two', 'three', 'four']})
# 注册DataFrame为视图
conn.register("test_df", test_df)
# 直接查询DataFrame
result = conn.execute("SELECT j FROM test_df WHERE i > 1").fetchdf()
print(result)
R客户端
R客户端提供了与dplyr的深度集成,允许R用户使用熟悉的语法与DuckDB交互。
安装与基本连接
# 安装包
install.packages("duckdb")
# 加载库并连接
library(duckdb)
con <- dbConnect(duckdb::duckdb(), dbdir = ":memory:")
与dplyr集成
library(dplyr)
# 创建DataFrame并写入数据库
test_df <- data.frame(i = 1:4, j = c("one", "two", "three", "four"))
copy_to(con, test_df, "test_table", temporary = FALSE)
# 使用dplyr语法查询
result <- tbl(con, "test_table") %>%
filter(i > 1) %>%
select(j) %>%
collect()
print(result)
Java客户端
Java客户端适合构建高性能的企业级应用,提供JDBC兼容接口。
依赖配置
Maven依赖:
<dependency>
<groupId>org.duckdb</groupId>
<artifactId>duckdb_jdbc</artifactId>
<version>0.9.2</version>
</dependency>
基本用法
import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.Statement;
import java.sql.ResultSet;
public class DuckDBExample {
public static void main(String[] args) throws Exception {
// 连接内存数据库
Connection conn = DriverManager.getConnection("jdbc:duckdb:");
// 创建表并插入数据
Statement stmt = conn.createStatement();
stmt.execute("CREATE TABLE test_table (i INTEGER, j VARCHAR)");
stmt.execute("INSERT INTO test_table VALUES (1, 'one')");
// 查询数据
ResultSet rs = stmt.executeQuery("SELECT * FROM test_table");
while (rs.next()) {
System.out.println(rs.getInt("i") + ", " + rs.getString("j"));
}
conn.close();
}
}
多语言客户端对比
| 特性 | Python | R | Java |
|---|---|---|---|
| 易用性 | 高 | 高 | 中 |
| 数据科学集成 | 优秀(pandas) | 优秀(dplyr) | 一般 |
| 性能 | 高 | 高 | 最高 |
| 企业级特性 | 一般 | 一般 | 优秀 |
| 适用场景 | 数据分析、原型开发 | 统计分析、数据可视化 | 生产系统、高性能服务 |
扩展功能
DuckDB提供多种扩展,增强多语言客户端能力:
总结
DuckDB的多语言客户端生态系统为不同背景的开发者提供了灵活选择:Python客户端适合数据科学家快速分析,R客户端便于统计分析工作流集成,Java客户端则适合构建高性能企业应用。通过本文介绍的方法,您可以根据项目需求选择合适的客户端,并充分利用DuckDB的高性能分析能力。
开发指南:CONTRIBUTING.md
登录后查看全文
热门项目推荐
相关项目推荐
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust0213
cann-learning-hubCANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。Jupyter Notebook0138
uni-appA cross-platform framework using Vue.jsJavaScript08
GLM-5.2智谱开源 GLM-5.2,这是针对长文本任务的最新旗舰模型。相较于前代产品 GLM-5.1,它在长文本任务处理能力上实现了显著飞跃,并且首次在稳定的 100 万 token 上下文中提供这一能力。Jinja00
SwanLab⚡️SwanLab - an open-source, modern-design AI training tracking and visualization tool. Supports Cloud / Self-hosted use. Integrated with PyTorch / Transformers / LLaMA Factory / veRL/ Swift / Ultralytics / MMEngine / Keras etc.Python00
tiny-universe《大模型白盒子构建指南》:一个全手搓的Tiny-UniverseJupyter Notebook03
热门内容推荐
最新内容推荐
项目优选
收起
deepin linux kernel
C
32
16
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
469
465
暂无描述
Dockerfile
778
5.08 K
Ascend Extension for PyTorch
Python
757
968
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。
C++
876
2.03 K
本项目是CANN提供的神经网络类计算算子库,实现网络在NPU上加速计算。
C++
697
1.4 K
昇腾LLM分布式训练框架
Python
185
231
JiuwenSwarm 是一款基于openJiuwen开发的智能AI Agent,它能够将大语言模型的强大能力,通过你日常使用的各类通讯应用,直接延伸至你的指尖。
Python
2.25 K
676
本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
1.1 K
1.14 K
本仓库是 Flutter SDK 与 Flutter Engine 的 OpenHarmony 适配版本,由 CPF-Flutter 团队维护。开发者可使用熟悉的 Flutter 技术栈开发 OpenHarmony 应用,3.35.7 及以后的适配版本可基于本仓库源码构建支持 OpenHarmony 的 Flutter Engine。
Dart
1.04 K
271