弹性云原生:tensile-kube - 跨集群资源调度的利器!
项目简介
tensile-kube
是一个基于 virtual-kubelet 构建的开源工具,旨在让 Kubernetes 集群之间的协同工作更加智能和高效。它允许上层集群与下层集群之间进行资源自动发现,并优化跨集群的资源调度,同时支持 PV/PVC 和服务管理,确保应用的稳定运行。
项目技术分析
tensile-kube
包含以下关键组件:
-
虚拟节点(virtual-node):这是一个基于 virtual-kubelet 实现的 Kubernetes 提供者。上层集群创建的Pod会被同步到下层集群,并处理依赖的ConfigMap或Secret。
-
多集群调度器(multi-cluster scheduler):使用 Kubernetes 的调度框架构建,实时监控所有下层集群的容量,当可用节点数大于等于1时,进行Pod调度。为满足不同的需求,还提供了一个额外的实现——去碎片化调度器(descheduler)。
-
去碎片化调度器(descheduler):类似 K8s 的 descheduler,但针对特定场景进行了优化,可尝试重新调度无法在低层集群中调度的Pod。
-
webhook:利用 Kubernetes 的突变webhook机制,转换可能影响Pod调度的字段,如
nodeSelector
、nodeAffinity
和tolerations
,仅对有标签virtual-pod:true
的Pod生效。
应用场景
tensile-kube
在腾讯游戏的部署实践中大放异彩。在一个由 flannel 连接的多集群环境中,所有的节点CIDR都基于同一个etcd分配,Pod可以跨集群直接通过IP通信。这种情况下,tensile-kube
能有效帮助解决资源碎片问题,提高集群资源利用率。
项目特点
- 跨集群资源自动发现:实时了解每个集群的资源状况,提升调度效率。
- 异步通知Pod修改:降低频繁列表查询带来的开销。
- 全功能日志和执行支持:与
kubectl logs
和kubectl exec
命令兼容。 - 全局调度避免资源碎片:利用多集群调度器避免因资源碎片导致的不可调度Pod。
- 动态去碎片策略:descheduler 可重新调度无法在较低层级集群中调度的Pod。
- PV/PVC 支持:特别适用于本地PV的
WaitForFirstConsumer
策略。 - 服务同步:保证跨集群的服务通讯正常。
快速部署
要构建并部署tensile-kube
,你可以按照以下步骤操作:
- 克隆仓库:
git clone https://github.com/virtual-kubelet/tensile-kube.git
- 编译项目:
make
- 部署虚拟节点:根据提供的参数设置,运行虚拟节点二进制文件
- 部署webhook和descheduler:将配置文件中的镜像替换为你的镜像,并在K8s集群中部署
贡献者包括来自腾讯的Weidong Cai、Ye Yin,以及其他开发者。
tensile-kube
是一个多才多艺的工具,无论你是大型集群管理员还是追求高效资源调度的开发人员,它都能帮你实现更智能的跨集群资源管理。立即加入,开启你的弹性云原生之旅吧!
- CangjieCommunity为仓颉编程语言开发者打造活跃、开放、高质量的社区环境Markdown00
- redis-sdk仓颉语言实现的Redis客户端SDK。已适配仓颉0.53.4 Beta版本。接口设计兼容jedis接口语义,支持RESP2和RESP3协议,支持发布订阅模式,支持哨兵模式和集群模式。Cangjie032
- 每日精选项目🔥🔥 推荐每日行业内最新、增长最快的项目,快速了解行业最新热门项目动态~ 🔥🔥02
- qwerty-learner为键盘工作者设计的单词记忆与英语肌肉记忆锻炼软件 / Words learning and English muscle memory training software designed for keyboard workersTSX022
- Yi-CoderYi Coder 编程模型,小而强大的编程助手HTML07
- advanced-javaAdvanced-Java是一个Java进阶教程,适合用于学习Java高级特性和编程技巧。特点:内容深入、实例丰富、适合进阶学习。JavaScript085
- taro开放式跨端跨框架解决方案,支持使用 React/Vue/Nerv 等框架来开发微信/京东/百度/支付宝/字节跳动/ QQ 小程序/H5/React Native 等应用。 https://taro.zone/TypeScript09
- CommunityCangjie-TPC(Third Party Components)仓颉编程语言三方库社区资源汇总05
- Bbrew🍺 The missing package manager for macOS (or Linux)Ruby01
- byzer-langByzer(以前的 MLSQL):一种用于数据管道、分析和人工智能的低代码开源编程语言。Scala04