MultEval 使用教程

1. 项目目录结构及介绍

MultEval 是一个用于评估机器翻译质量的工具，它可以从多个优化器运行结果中提供 BLEU、METEOR 和 TER 三种流行指标的分数，以及通过引导重采样得到的方差和通过近似随机化得到的 p 值。以下是 MultEval 的目录结构及其说明：

multeval/
├── example/               # 示例数据目录
├── lib/                   # 存储库文件
├── reg-test/              # 测试用例目录
├── src/                   # 源代码目录
├── .classpath              # Eclipse 类路径配置文件
├── .gitignore             # Git 忽略文件
├── .project               # Eclipse 项目配置文件
├── .travis.yml            # Travis CI 配置文件
├── CHANGELOG              # 更改日志文件
├── LICENSE.txt            # 许可证文件
├── README.md              # 项目说明文件
├── build.xml              # Ant 构建文件
├── constants              # 常量文件
├── dist.sh                # 分发脚本
├── get_deps.sh            # 获取依赖脚本
├── multeval.sh            # MultEval 主执行脚本
└── table.png              # ASCII 表格示例图片

2. 项目的启动文件介绍

项目的启动主要通过 multeval.sh 脚本进行，该脚本位于项目根目录。以下是 multeval.sh 的基本使用方法：

./multeval.sh eval [选项]

其中 eval 是执行的模块，后面可以跟随多个选项来指定评估参数。例如：

./multeval.sh eval --refs example/refs.test2010.lc.tok.en.* --hyps-baseline example/hyps.lc.tok.en.baseline.opt --meteor.language en

这个命令将使用示例数据来评估一个系统，并输出 BLEU、METEOR 和 TER 分数。

3. 项目的配置文件介绍

MultEval 的配置主要通过命令行选项进行，但也有一些选项可以在配置文件中设置。以下是一些主要的配置文件及其说明：

• .gitignore：此文件用于配置 Git 忽略规则，以避免将不必要的文件提交到版本库中。
• build.xml：Ant 构建文件用于定义项目的构建过程，包括编译、打包等步骤。
• multeval.sh：虽然不是传统意义上的配置文件，但该脚本中的默认参数和执行逻辑可以看作是项目的一部分配置。

在运行 multeval.sh 脚本时，可以通过命令行参数来调整配置，例如设置引导样本数量、指定语言模型等。具体的使用方法和可配置选项可以通过以下命令查看：

./multeval.sh eval

这将输出所有的命令行选项和它们的用途。