AWS CLI Glue 创建Notebook模式作业的注意事项

在使用AWS CLI创建Glue作业时，如果希望使用Notebook模式，需要注意CLI版本兼容性问题。Notebook模式是Glue提供的一种交互式开发环境，允许用户以Jupyter Notebook的形式开发和运行ETL作业。

版本要求

AWS CLI从2.15.60版本开始才支持--job-mode notebook参数。如果使用较早版本的CLI工具尝试创建Notebook模式作业，系统会报错提示参数无效。

典型错误场景

当用户使用低于2.15.60版本的AWS CLI执行包含--job-mode notebook参数的创建命令时，会遇到类似以下错误：

参数--job-mode无效

解决方案

1. 首先检查当前AWS CLI版本：

aws --version

2. 如果版本低于2.15.60，需要升级AWS CLI工具。升级方法取决于原始安装方式：

• 使用pip安装的用户可以通过pip install --upgrade awscli升级
• 使用系统包管理工具安装的用户需使用相应升级命令

3. 升级完成后，再次验证版本号，确认已达到或超过2.15.60版本

创建Notebook模式作业的最佳实践

成功升级后，创建Notebook模式Glue作业时建议：

1. 准备完整的配置文件，包括：

• 作业命令定义
• 连接配置
• 默认参数设置

2. 确保IAM角色具有足够权限

3. 合理设置工作节点配置和超时时间

4. 首次创建建议先使用最小配置测试，确认功能正常后再添加完整参数

总结

AWS服务功能迭代较快，使用CLI工具时需要注意版本兼容性。特别是使用较新功能时，保持CLI工具为最新版本可以避免很多兼容性问题。对于Glue Notebook模式作业的创建，确保AWS CLI版本至少为2.15.60是成功的关键前提。