Manticore Search索引工具buildidf和mergeidf命令优化解析

Manticore Search作为一款高性能的全文搜索引擎，其索引工具indextool提供了多种实用功能。近期项目对--buildidf和--mergeidf两个命令进行了多项优化改进，这些改进主要涉及用户体验、功能逻辑和文档准确性三个方面。

命令参数错误提示优化

原先当用户输入不完整的命令参数时，系统会返回"malformed or unknown option"的错误提示，这种提示容易让用户误以为该命令不存在。优化后的版本会直接显示命令的标准用法格式，例如：

对于--buildidf命令：

USAGE: --buildidf <DICTFILE1.txt> [DICTFILE2.txt ...] [--skip-uniq] --out <NODEGLOBAL.idf>

对于--mergeidf命令：

USAGE: --mergeidf <NODE1.idf> [NODE2.idf ...] [--skip-uniq] --out <GLOBAL.idf>

这种改进显著提升了工具的易用性，用户无需查阅文档就能了解正确的命令格式。

配置文件依赖解除

原先--buildidf和--mergeidf命令在执行时需要读取有效的配置文件，但实际上这两个命令的功能完全依赖于其参数，与配置文件无关。为了保持向后兼容性，新版本仍然允许指定-c或--config参数，但这些参数将被忽略。这一改进使得命令的执行更加灵活，不再受限于配置文件的存在与否。

文档准确性修正

原先的文档中存在一些不准确的描述：

1. 将输入文件描述为TABLE1.dict，容易让人误解需要与配置文件中的表定义关联
2. 描述中提到"join --stats dictionary dumps"，实际上应该是"--dumpdict"的结果

修正后的文档描述更加准确：

--buildidf <DICTFILE1.txt> [DICTFILE2.txt ...] [--skip-uniq] --out <GLOBAL.idf>
				join --dumpdict dictionary dumps into GLOBAL.idf file

技术背景

IDF（逆文档频率）是全文搜索中计算词条重要性的关键指标。--buildidf命令用于合并多个字典文件生成全局IDF文件，而--mergeidf则用于合并多个IDF文件。这两个命令在分布式搜索环境中特别有用，可以集中计算词条在整个集群中的重要性。

--skip-uniq选项允许跳过唯一词条的处理，这在处理大型数据集时可以显著提高性能。输出文件通常用于全局搜索排名计算，确保搜索结果的相关性评分在整个系统中保持一致。

这些改进使Manticore Search的工具链更加完善，为处理大规模分布式搜索场景提供了更好的支持。