Velero 数据迁移实战:从 AWS EKS 到本地 K3s 集群的存储方案转换
背景与挑战
在现代云原生架构中,数据迁移是一个常见但充满挑战的任务。本文将以一个真实案例为基础,探讨如何利用 Velero 工具将 PostgreSQL 和 Elasticsearch 从 AWS EKS 集群(使用 gp2 存储类)迁移到本地 K3s 集群(使用 local-path 存储类)。
技术方案设计
1. 源集群准备
在 AWS EKS 源集群中,我们首先部署 Velero 并配置 AWS S3 作为备份存储位置。关键配置包括:
- 使用 AWS 凭证文件进行认证
- 指定 S3 存储桶和区域
- 启用文件系统备份模式(--default-volumes-to-fs-backup)
- 包含必要的命名空间(test-ns)
2. 目标集群准备
在目标 K3s 集群中,我们同样部署 Velero 并连接到相同的 S3 存储桶。特别注意:
- 配置存储类映射(gp2 → local-path)
- 禁用卷快照功能(因为目标环境是本地存储)
- 确保使用相同的插件版本以保证兼容性
迁移过程中的关键发现
在执行迁移后,虽然大部分资源成功迁移,但发现数据库中的原有数据未能正确迁移。这揭示了文件系统备份(fs-backup)方法的一个重要限制:对于数据库类应用,fs-backup 无法保证数据一致性。
专业建议与最佳实践
1. 数据一致性保障
对于数据库类应用(如 PostgreSQL、Elasticsearch),推荐使用 Velero 的 Data Mover 功能进行备份迁移。Data Mover 提供了:
- 基于快照的备份机制
- 更好的数据一致性保证
- 对运行中数据库的支持
2. 存储类转换策略
当源和目标环境使用不同的存储类时,可通过 ConfigMap 实现自动转换:
apiVersion: v1
data:
gp2: local-path
kind: ConfigMap
metadata:
labels:
velero.io/change-storage-class: RestoreItemAction
velero.io/plugin-config: ""
name: change-storage-class-config
namespace: velero
3. 排除资源策略
在复杂环境中,某些资源可能不需要迁移或需要特殊处理。Velero 支持通过 --exclude-resources 参数排除特定资源类型:
velero restore create restore-jan20 \
--from-backup backup-jan20 \
--exclude-resources orders.acme.cert-manager.io,certificaterequests.cert-manager.io,certificates.cert-manager.io
经验总结
-
环境差异评估:在跨云/本地迁移前,必须充分评估源和目标环境的差异,特别是存储类的不同。
-
备份方法选择:根据应用类型选择合适的备份方法,数据库类应用优先考虑 Data Mover。
-
验证机制:建立完善的验证流程,确保数据完整性和一致性。
-
渐进式迁移:对于生产环境,建议采用渐进式迁移策略,先迁移非关键组件,验证无误后再迁移核心数据。
通过本文的实践案例,我们展示了 Velero 在复杂环境迁移中的强大能力,同时也强调了正确选择备份方法和充分验证的重要性。这些经验对于计划进行类似迁移的团队具有重要参考价值。
- DDeepSeek-V3.1-BaseDeepSeek-V3.1 是一款支持思考模式与非思考模式的混合模型Python00
- HHunyuan-MT-7B腾讯混元翻译模型主要支持33种语言间的互译,包括中国五种少数民族语言。00
GitCode-文心大模型-智源研究院AI应用开发大赛
GitCode&文心大模型&智源研究院强强联合,发起的AI应用开发大赛;总奖池8W,单人最高可得价值3W奖励。快来参加吧~085CommonUtilLibrary
快速开发工具类收集,史上最全的开发工具类,欢迎Follow、Fork、StarJava05GitCode百大开源项目
GitCode百大计划旨在表彰GitCode平台上积极推动项目社区化,拥有广泛影响力的G-Star项目,入选项目不仅代表了GitCode开源生态的蓬勃发展,也反映了当下开源行业的发展趋势。07GOT-OCR-2.0-hf
阶跃星辰StepFun推出的GOT-OCR-2.0-hf是一款强大的多语言OCR开源模型,支持从普通文档到复杂场景的文字识别。它能精准处理表格、图表、数学公式、几何图形甚至乐谱等特殊内容,输出结果可通过第三方工具渲染成多种格式。模型支持1024×1024高分辨率输入,具备多页批量处理、动态分块识别和交互式区域选择等创新功能,用户可通过坐标或颜色指定识别区域。基于Apache 2.0协议开源,提供Hugging Face演示和完整代码,适用于学术研究到工业应用的广泛场景,为OCR领域带来突破性解决方案。00openHiTLS
旨在打造算法先进、性能卓越、高效敏捷、安全可靠的密码套件,通过轻量级、可剪裁的软件技术架构满足各行业不同场景的多样化要求,让密码技术应用更简单,同时探索后量子等先进算法创新实践,构建密码前沿技术底座!C0381- WWan2.2-S2V-14B【Wan2.2 全新发布|更强画质,更快生成】新一代视频生成模型 Wan2.2,创新采用MoE架构,实现电影级美学与复杂运动控制,支持720P高清文本/图像生成视频,消费级显卡即可流畅运行,性能达业界领先水平Python00
- GGLM-4.5-AirGLM-4.5 系列模型是专为智能体设计的基础模型。GLM-4.5拥有 3550 亿总参数量,其中 320 亿活跃参数;GLM-4.5-Air采用更紧凑的设计,拥有 1060 亿总参数量,其中 120 亿活跃参数。GLM-4.5模型统一了推理、编码和智能体能力,以满足智能体应用的复杂需求Jinja00
Yi-Coder
Yi Coder 编程模型,小而强大的编程助手HTML013
热门内容推荐
最新内容推荐
项目优选









