SQLFluff 3.0.5版本中TSQL格式化的回归问题分析

SQLFluff作为一款流行的SQL代码格式化工具，在3.0.5版本中出现了一个影响TSQL方言的回归问题。这个问题会导致在格式化MERGE语句时产生无效的SQL语法，使得原本可以正常执行的SQL语句在格式化后无法运行。

问题现象

该问题主要出现在包含MERGE语句的复杂SQL查询中。当SQL语句中包含以下结构时：

1. 一个INSERT INTO...SELECT语句
2. SELECT部分使用了MERGE语句的输出结果
3. MERGE语句中包含WHEN NOT MATCHED BY TARGET子句和OUTPUT子句

在3.0.5版本中格式化后，工具会错误地在INSERT列名列表和OUTPUT子句中的$ACTION前添加MERGE结果集的别名(MRG)，导致SQL语法错误。

问题示例

原始正确的SQL语句：

INSERT INTO [DIL].[md_GLAccount_HIST] (
  [ChartOfAccounts_KEY]
  , [GLAccount_KEY]
  , [ValidFrom]
  , [ValidTo]
  , [GLAccount_DESC_short]
)
SELECT
  MRG.[ChartOfAccounts_KEY]
  , MRG.[GLAccount_KEY]
  , MRG.[ValidFrom]
  , MRG.[ValidTo]
  , MRG.[GLAccount_DESC_short]
FROM (
  MERGE [DIL].[md_GLAccount_HIST] WITH (TABLOCK) t
  USING [INTERNAL_MERGE].[DIL_md_GLAccount_HIST] s
    ON (
      t.[ChartOfAccounts_KEY] = s.[ChartOfAccounts_KEY]
      AND t.[GLAccount_KEY] = s.[GLAccount_KEY]
    )
  WHEN NOT MATCHED BY TARGET
    THEN
    INSERT (
      [ChartOfAccounts_KEY]
      , [GLAccount_KEY]
      , [ValidFrom]
      , [ValidTo]
      , [GLAccount_DESC_short]
    )
    VALUES (
      s.[ChartOfAccounts_KEY]
      , s.[GLAccount_KEY]
      , '19900101'
      , '99991231'
      , s.[GLAccount_DESC_short]
    )
  OUTPUT
    $ACTION AS [Action_OUT]
    , s.[ChartOfAccounts_KEY]
    , s.[GLAccount_KEY]
    , '19900101'
    , '99991231'
    , s.[GLAccount_DESC_short]
) MRG

格式化后产生错误的SQL语句：

INSERT (
  MRG.[ChartOfAccounts_KEY]  -- 错误地添加了MRG前缀
  , MRG.[GLAccount_KEY]      -- 错误地添加了MRG前缀
  , MRG.[ValidFrom]          -- 错误地添加了MRG前缀
  , MRG.[ValidTo]            -- 错误地添加了MRG前缀
  , MRG.[GLAccount_DESC_short] -- 错误地添加了MRG前缀
)
...
OUTPUT
  MRG.$ACTION AS [Action_OUT]  -- 错误地添加了MRG前缀

技术分析

这个问题源于SQLFluff的引用一致性检查规则(RF03)在3.0.5版本中的行为变化。该规则原本用于确保在单表查询中所有列引用都使用表别名限定，但在处理MERGE语句这种特殊结构时出现了误判。

关键问题点：

1. INSERT语句的列名列表不应该使用任何表别名限定，这是SQL语法规定
2. $ACTION是MERGE语句的特殊关键字，也不应该使用表别名限定
3. 规则错误地将这些位置识别为需要别名限定的列引用

影响范围

该问题影响：

1. 使用TSQL方言的用户
2. 包含复杂MERGE语句的SQL代码
3. SQLFluff 3.0.5及以上版本(3.0.4及以下版本不受影响)

解决方案

对于遇到此问题的用户，目前可以：

1. 暂时回退到SQLFluff 3.0.4版本
2. 对受影响文件暂时禁用RF03规则
3. 等待官方发布修复版本

开发团队已经确认了这个问题，并计划在后续版本中修复。修复方向可能是改进引用一致性检查规则，使其能够正确识别MERGE语句中的特殊语法结构。

总结

SQL格式化工具在提高代码可读性的同时，也必须保证不改变SQL语句的语义和执行行为。这个案例提醒我们，即使是成熟的工具，在版本升级时也可能引入意外的回归问题。作为开发者，我们应该：

1. 在重要格式化操作前备份原始SQL
2. 在升级工具版本后验证格式化结果
3. 对复杂SQL语句特别关注格式化后的正确性

对于使用TSQL和MERGE语句的用户，建议暂时谨慎使用SQLFluff 3.0.5及以上版本，直到该问题得到官方修复。