BookGet:数字古籍获取利器
BookGet是一款专注于数字古籍资源获取的开源工具,支持多图书馆资源批量下载,为研究者与古籍爱好者提供高效的文献获取解决方案。最新版本通过优化线程管理与界面交互,实现了下载任务与用户操作的流畅协同,已支持全球50余家数字图书馆的资源获取。
功能特性:探索古籍资源的全能工具
如何实现跨图书馆资源聚合?
BookGet通过模块化设计实现了对全球50+数字图书馆的支持,按地域与资源特色可分为:
东亚文化瑰宝
- 中国国家图书馆(经史子集专题)
- 天一阁博物馆(明代方志特藏)
- 日本国立国会图书馆(和刻本资源)
- 韩国国立中央图书馆(高丽文献)
欧美学术重镇
- 哈佛大学图书馆(汉学研究专藏)
- 美国国会图书馆(亚洲善本)
- 大英图书馆(国际敦煌项目)
- 普林斯顿大学图书馆(东亚馆藏)
📌【多源聚合引擎】
通过统一接口整合不同图书馆的API协议,自动适配各平台的认证机制与资源编码方式,实现"一处配置,全域获取"。
适用场景:跨国比较研究、稀有版本校勘
流畅体验背后的技术突破
新版本采用线程池隔离架构,将UI渲染与下载任务彻底分离:
- 主线程专注界面响应(按钮点击、进度展示)
- 工作线程池处理文件下载(默认按CPU核心数动态分配)
- 消息队列实现线程间通信(采用带缓冲的channel机制)
⚙️ 技术原理简析:
如同餐厅的"前台接待-后厨制作"模式,UI线程像服务员即时响应顾客需求,而下载线程如同厨师专注烹饪,通过传菜窗口(消息队列)高效协作,避免相互干扰。
适用场景:批量下载500页以上大型古籍时保持界面流畅
应用场景:谁在使用BookGet?
历史研究者的数字档案馆
某高校历史系团队利用BookGet的多馆并行下载功能,三个月内完成了《四库全书》不同版本的对比研究,通过批量获取台湾故宫与国家图书馆的数字化资源,发现了3处重要异文。
古籍爱好者的收藏管理方案
用户可通过本地元数据生成功能,自动为下载的古籍添加ISBN、卷次、版本信息,配合自定义文件夹命名规则,构建个人数字化古籍库。
图书馆的数字化辅助工具
某市图书馆采用BookGet的IIIF标准支持模块,批量获取海外馆藏的地方志资源,补充地方文献数据库,平均每月处理120册稀见版本。
技术解析:工具的内部工作机制
核心引擎:资源获取的神经中枢
位于app/目录下的图书馆实现模块(如nlc.go、hathitrust.go),每个文件对应特定图书馆的解析逻辑,包含:
- 资源URL生成算法
- 分页规则解析器
- 图片格式转换器
- 反爬机制应对策略
扩展模块:功能增强的积木系统
pkg/目录提供丰富工具组件:
downloader/:支持断点续传与多线程分片下载crypt/:处理特殊资源的加密协议progressbar/:终端与GUI双模式进度展示util/:古籍专用处理工具(如竖排文本矫正)
数据流转:从网页到本地的旅程
- 解析输入的图书馆URL生成元数据
- 调用对应馆的解析器获取资源列表
- 下载器模块按优先级队列调度任务
- 文件系统模块整理归档并生成索引
使用指南:从入门到精通
基础设置:3分钟上手
-
环境准备
git clone https://gitcode.com/gh_mirrors/bo/bookget cd bookget && make build -
核心配置(
config/config.go)- 下载路径:
download.path = "~/古籍资源" - 默认格式:
file.format = "jpg" - 线程设置:
download.threads = 4(建议不超过CPU核心数)
- 下载路径:
高级技巧:效率提升策略
- 批量任务队列:创建
queue.txt批量导入URL,支持通配符匹配多卷册 - 智能限速:通过
--rate-limit 2M避免触发图书馆流量限制 - 格式转换:添加
--convert pdf自动将图片合成为可检索PDF
专家模式:深度定制方案
修改model/iiif/dzi.go可定制Deep Zoom格式支持,通过调整tileSize参数优化超高清古籍的加载速度。高级用户可开发自定义解析器,通过router/interface.go注册新的图书馆支持模块。
常见问题解决方案
下载中断怎么办?
启用断点续传功能:
bookget --resume https://example.com/book/12345
遇到验证码拦截?
- 在
config.yaml中配置cookie.path指向浏览器导出的Cookie文件 - 启用手动验证模式:
--manual-auth
如何处理非标准图片格式?
通过pkg/file/file_type.go扩展格式支持,添加自定义解码器:
func init() {
RegisterDecoder("jp2", NewJp2Decoder)
}
跨平台支持对比
| 平台 | 安装方式 | 特色功能 |
|---|---|---|
| Windows | 可执行文件 + GUI界面 | 系统托盘进度通知 |
| Linux | 源码编译 + 终端界面 | 命令行脚本自动化 |
| macOS | DMG镜像 + 启动台集成 | 触控栏快捷操作 |
BookGet持续进化的架构设计,使其既能满足普通用户的简单操作需求,又为专业研究者提供深度定制的可能。无论是个人收藏还是学术研究,这款工具都能成为连接数字古籍资源的可靠桥梁。通过开源社区的持续贡献,BookGet正在构建一个更全面、更易用的古籍获取生态系统。
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust099- DDeepSeek-V4-ProDeepSeek-V4-Pro(总参数 1.6 万亿,激活 49B)面向复杂推理和高级编程任务,在代码竞赛、数学推理、Agent 工作流等场景表现优异,性能接近国际前沿闭源模型。Python00
MiMo-V2.5-ProMiMo-V2.5-Pro作为旗舰模型,擅⻓处理复杂Agent任务,单次任务可完成近千次⼯具调⽤与⼗余轮上 下⽂压缩。Python00
GLM-5.1GLM-5.1是智谱迄今最智能的旗舰模型,也是目前全球最强的开源模型。GLM-5.1大大提高了代码能力,在完成长程任务方面提升尤为显著。和此前分钟级交互的模型不同,它能够在一次任务中独立、持续工作超过8小时,期间自主规划、执行、自我进化,最终交付完整的工程级成果。Jinja00
Kimi-K2.6Kimi K2.6 是一款开源的原生多模态智能体模型,在长程编码、编码驱动设计、主动自主执行以及群体任务编排等实用能力方面实现了显著提升。Python00
MiniMax-M2.7MiniMax-M2.7 是我们首个深度参与自身进化过程的模型。M2.7 具备构建复杂智能体应用框架的能力,能够借助智能体团队、复杂技能以及动态工具搜索,完成高度精细的生产力任务。Python00