Apache YuniKorn Core 使用与安装指南

项目目录结构及介绍

Apache YuniKorn Core 是一个高性能的资源调度器核心，旨在实现跨多种资源管理平台（如 YARN 和 Kubernetes）的通用调度策略。以下是其主要的目录结构和组件介绍：

• yunikorn-core: 调度器的大脑，负责根据丰富的内置调度策略做出容器分配决策。
• yunikorn-k8shim: 作为 Kubernetes 的适配层，允许 YuniKorn 跟 Kubernetes 平台无缝对接。
• yunikorn-scheduler-interface: 定义了一套通用的调度接口，使得核心调度器能够与不同的资源管理系统通信。
• yunikorn-web: 提供了web界面，用于集中展示集群资源使用情况及应用信息。
• yunikorn-release: 管理包括Helm图表在内的YuniKorn版本发布。
• yunikorn-site: 包含了YuniKorn官方网站的源代码。

项目的启动文件介绍

YuniKorn Core作为一个分布式系统，其部署通常涉及多个组件。虽然具体的启动命令依赖于环境设置，但部署一般需要通过Kubernetes或类似的编排工具进行。在实际操作中，可能会使用Helm图表来进行部署，具体步骤包括定义相应的yaml配置文件来指定服务、部署、副本集等。

假设您要手动启动YuniKorn的Web UI部分以了解其运行状态，可以使用以下Kubernetes命令进行端口转发，以便访问Web界面：

kubectl port-forward svc/yunikorn-service 9889:9889 -n yunikorn

这将本地的9889端口与Kubernetes服务中的Web UI端口相连，之后可以通过访问 http://localhost:9889 来查看UI。

项目的配置文件介绍

YuniKorn的核心配置是灵活且可扩展的，配置文件通常位于特定的路径下，并可以通过环境变量或直接在部署时指定。配置文件覆盖从调度策略到资源请求的各个方面。然而，详细的配置项和示例配置文件并未直接在提供的引用内容中列出，因此需参考YuniKorn的官方文档获取最新的配置指导。

配置文件可能包括但不限于以下几个关键领域：

• scheduler.conf: 包含调度器的基本配置，比如调度策略、队列配置等。
• queue-policy.conf: 定义队列级别的策略，如容量分配、公平性规则。
• k8s-shim.conf (如果是针对Kubernetes): 特定于Kubernetes的适配配置。

为了精确配置您的YuniKorn环境，建议查阅其官方GitHub仓库中的文档或是最新版本的 release notes，以找到完整的配置说明和样例文件。通过这些文档，您可以了解到如何自定义调度行为，以及如何根据实际需求调整配置参数。