Spinnaker升级至1.33.0版本后Liquibase校验和问题解析

问题背景

在Spinnaker社区中，近期有用户反馈在将系统升级到1.33.0版本时，Orca和Clouddriver服务无法正常启动的问题。这一问题主要出现在使用PostgreSQL作为持久化存储的环境中，具体表现为Liquibase在校验数据库变更集(changeSet)时抛出校验和(checksum)验证异常。

问题现象

当用户尝试从Spinnaker 1.13.2版本升级到1.33.0版本时，Clouddriver(5.83.0/5.84.0)和Orca(8.48.0)服务启动失败。错误日志显示Liquibase检测到多个变更集的校验和不匹配，导致数据库迁移过程失败。

对于Clouddriver服务，主要涉及三个变更集的校验和变化：

• mysql-change-state-stauts-to-enum-type
• mysql-revert-change-state-stauts-to-enum-type
• mysql-update-state-enum-values

对于Orca服务，则有六个变更集的校验和发生变化：

• add-canceled-column
• add-legacy-id-fields
• modify-status-column-enum
• partition-updated-executions
• 20181016-add-start-time
• create-deleted-executions-table

根本原因分析

经过深入调查，发现这一问题的根源在于Kork项目(Spinnaker的核心库)从7.201.0版本开始将Liquibase从3.10.3升级到了4.24.0版本。这一升级导致了以下两个主要问题：

1. 升级兼容性问题：Liquibase 4.24.0版本对变更集的校验和计算方式进行了调整，导致与之前版本计算的校验和不匹配。这使得所有从1.33.0开始的版本(包括1.33.0、1.33.1、1.33.2、1.34.0、1.34.1和1.34.2)在升级时都会出现校验和错误。

2. PostgreSQL新安装问题：在Liquibase升级后，Clouddriver的某些变更集在PostgreSQL上执行时会抛出"addAfterColumn is not allowed on postgresql"错误。这一问题影响了1.33.0、1.33.1、1.34.0和1.34.1版本的新安装。

解决方案

Spinnaker社区已经针对这一问题发布了修复方案，主要包含以下关键修改：

1. Kork项目修复：调整了Liquibase的配置和校验和处理逻辑，确保与新旧版本兼容。

2. Clouddriver项目修复：修正了PostgreSQL特定的变更集问题，确保在PostgreSQL上能够正确执行。

3. Orca项目修复：更新了相关的变更集定义，使其与Liquibase 4.24.0版本兼容。

这些修复已经包含在Spinnaker 1.33.3和1.34.3及更高版本中。对于遇到此问题的用户，建议直接升级到这些修复版本。

影响范围评估

这一问题主要影响以下场景：

1. 升级场景：所有从早期版本升级到1.33.0-1.34.2版本的用户，如果使用了SQL持久化(特别是PostgreSQL)都会受到影响。

2. 新安装场景：在1.33.0-1.34.1版本中，新安装Spinnaker并使用PostgreSQL作为Clouddriver存储的用户会遇到问题。

值得注意的是，仅使用Redis等其他持久化方案的服务不受此问题影响。

最佳实践建议

对于正在规划Spinnaker升级或部署的用户，建议采取以下措施：

1. 版本选择：直接使用1.33.3、1.34.3或更高版本，避免中间的问题版本。

2. 升级策略：如果必须从受影响版本升级，可以考虑以下两种方案：

   • 手动更新数据库中的校验和记录，使其与新版本匹配
   • 临时禁用校验和验证(不推荐用于生产环境)

3. 测试验证：在升级生产环境前，务必在测试环境中充分验证数据库迁移过程。

4. 备份策略：执行任何重大升级前，确保对数据库进行完整备份。

技术深度解析

Liquibase作为数据库变更管理工具，使用校验和机制来确保变更集的一致性。每个变更集都有一个基于其内容的唯一校验和，存储在databasechangelog表中。当Liquibase运行时，它会比较存储的校验和与当前计算的校验和，如果不匹配则抛出异常。

在本次事件中，Liquibase从3.x升级到4.x版本时，对校验和计算算法进行了调整，这是导致校验和不匹配的根本原因。虽然这种重大版本升级通常会保持向后兼容性，但在某些边缘情况下仍可能出现兼容性问题。

对于PostgreSQL特定的问题，则是由于某些MySQL特有的语法(如AFTER COLUMN)被错误地应用到了PostgreSQL迁移脚本中。这种跨数据库兼容性问题在复杂的数据库迁移场景中较为常见，需要通过条件化迁移脚本或数据库特定的变通方案来解决。

总结

Spinnaker 1.33.0版本引入的Liquibase升级虽然带来了新特性和改进，但也导致了数据库迁移兼容性问题。社区通过快速响应和修复，在后续版本中解决了这些问题。这一事件也提醒我们，在进行基础组件重大版本升级时，需要更加谨慎地评估兼容性影响，特别是在涉及数据库迁移这种关键功能时。