Rsyslog与MariaDB字符编码问题排查指南

问题现象

在AlmaLinux 9.5系统中，使用Rsyslog 8.2310.0版本将日志写入MariaDB 15.1数据库时，系统报错"ommysql: db error (1366): Incorrect string value"。错误显示数据库拒绝接收包含特殊字符'\xAB'的日志消息，导致日志记录失败。

技术背景

这种错误通常发生在以下场景：

1. 数据库表的字符编码设置不支持特定字符
2. 应用程序尝试插入包含非法字符的数据
3. 客户端与服务端的字符集不匹配

在Rsyslog与MySQL/MariaDB的集成中，消息内容默认以UTF-8格式传输。当遇到特殊字符时，如果数据库列的字符集配置不支持这些字符，就会触发1366错误。

解决方案

方案一：修改数据库字符集配置（推荐）

1. 检查并修改表结构：

ALTER TABLE Syslog.SystemEvents MODIFY Message TEXT CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;

2. 确认数据库全局字符集设置：

SHOW VARIABLES LIKE 'character_set%';
SHOW VARIABLES LIKE 'collation%';

方案二：过滤特殊字符

在Rsyslog配置中添加消息过滤规则：

module(load="mmutf8fix")
action(type="mmutf8fix")

方案三：调整日志源格式

确保日志发送方使用标准ASCII字符集，避免发送特殊符号。例如修改logger命令：

logger "Test message"  # 替代包含特殊字符的命令

最佳实践建议

1. 数据库设计阶段就应采用utf8mb4字符集
2. 重要系统日志建议同时保留文件备份
3. 定期检查Rsyslog的错误日志
4. 对非ASCII字符日志内容进行预处理

总结

Rsyslog与数据库集成时，字符编码一致性是关键。通过合理配置数据库字符集、添加过滤模块或规范日志源格式，可以有效解决此类问题。运维人员应当建立字符编码规范的检查机制，确保日志系统的稳定运行。