pgloader迁移MySQL到PostgreSQL时如何保留列名大小写

问题背景

在数据库迁移过程中，特别是从MySQL迁移到PostgreSQL时，一个常见的问题是标识符大小写的处理差异。MySQL默认情况下对大小写不敏感（取决于操作系统和配置），而PostgreSQL默认会将所有未加引号的标识符转换为小写。这种差异可能导致迁移后表名、列名等标识符的大小写形式与源数据库不一致。

问题现象

使用pgloader工具从MySQL迁移数据到PostgreSQL时，如果不做特殊处理，所有列名都会被自动转换为小写形式。例如，MySQL中的列名"UserName"在PostgreSQL中会变成"username"，这可能破坏应用程序的兼容性，特别是那些依赖特定大小写形式的应用程序代码。

解决方案

pgloader提供了quote identifiers选项来解决这个问题。通过在迁移命令中添加--with "quote identifiers"参数，可以指示pgloader为所有标识符添加引号，从而保留它们在源数据库中的原始大小写形式。

完整的迁移命令示例如下：

pgloader mysql://root:password@localhost/accessdatabase \
         postgresql://postgres:password@postgres/accessdatabase \
         --with "quote identifiers"

技术原理

PostgreSQL处理标识符大小写的规则如下：

1. 未加引号的标识符会被自动转换为小写
2. 加引号的标识符保留原始大小写
3. 查询时，如果标识符未被引用，PostgreSQL会将其转换为小写进行匹配

pgloader的quote identifiers选项实际上是为所有标识符添加了双引号，使其在PostgreSQL中保持原始大小写形式。例如：

• 不加引号：UserName → username
• 加引号："UserName" → UserName

注意事项

1. 应用程序兼容性：使用引号标识符后，应用程序中的SQL语句也必须使用相同的大小写形式，或者也使用引号标识符。

2. 查询编写：在PostgreSQL中查询带引号的标识符时，必须使用相同的大小写形式。例如：

   SELECT "UserName" FROM "MyTable";  -- 正确
   SELECT username FROM mytable;      -- 错误（如果标识符实际是"UserName"和"MyTable"）
   

3. 性能影响：大量使用引号标识符可能会轻微影响查询性能，因为PostgreSQL需要做额外的解析工作。

4. 工具兼容性：某些数据库工具可能不支持或不正确处理引号标识符。

最佳实践

1. 评估需求：在迁移前评估是否真的需要保留原始大小写。如果应用程序不依赖特定大小写，转换为小写可能是更简单的方案。

2. 统一命名规范：考虑在迁移过程中统一标识符命名规范，例如全部转换为小写加下划线形式（user_name）。

3. 测试验证：在生产环境迁移前，先在测试环境验证迁移结果，确保应用程序能正确处理带引号的标识符。

4. 文档记录：记录数据库中的标识符大小写规范，方便后续开发和维护。

替代方案

如果不想使用引号标识符，也可以考虑以下替代方案：

1. 迁移前重命名：在MySQL中使用ALTER TABLE语句将列名统一改为小写形式。

2. 迁移后修改：在PostgreSQL中使用ALTER TABLE语句调整列名大小写。

3. 使用视图适配：在PostgreSQL中创建视图，将小写列名映射回应用程序期望的大小写形式。

总结

pgloader的quote identifiers选项为MySQL到PostgreSQL的迁移提供了保留原始列名大小写的能力。虽然这个解决方案简单有效，但也带来了额外的复杂性。数据库管理员应根据实际应用需求和团队习惯，权衡是否使用此功能，或者在迁移过程中统一标识符命名规范。无论选择哪种方案，充分的测试和文档记录都是确保迁移成功的关键因素。