如何在AKS上自定义kube-scheduler的行为？ schedulerConfig

问题描述

我正在尝试自定义kube-scheduler在AKS集群（kubernetes v1.19.3）上的行为，如Scheduler Configuration中所述。

我的目标是使用NodeResourcesMostAllocated插件，以便使用尽可能少的节点数来调度pod。

考虑以下文件-most-allocated-scheduler.yaml

apiVersion: kubescheduler.config.k8s.io/v1beta1
kind: KubeSchedulerConfiguration
profiles:
  - schedulerName: default-scheduler
  - schedulerName: most-allocated-scheduler
    plugins:
      score:
        disabled:
        - name: NodeResourcesLeastAllocated
        enabled:
        - name: NodeResourcesMostAllocated
          weight: 2

根据文档，我可以通过运行以下命令来指定计划概要文件：

kube-scheduler --config most-allocated-scheduler.yaml

但是为了运行上述命令，我到底在哪里可以找到kube-scheduler呢？我想理想地在管道上执行此操作。使用AKS时可以做这种事情吗？

解决方法

kube-scheduler是kubernetes control plane的一部分。它的组件安排在主节点上，托管kubernetes解决方案如 AKS ， GKE 或 EKS 安排在这些组件上，您无权访问。

这意味着无法在正在运行的 AKS 群集上重新配置kube-scheduler。与 AKS的GitHub 页上的this答案进行比较。

但是，可以在创建新集群时使用cluster definitions（特别是在schedulerConfig部分中）为kube-scheduler提供自定义配置：

schedulerConfig

schedulerConfig声明了 在所有主节点上运行的kube-scheduler守护程序。喜欢 kubeletConfig，controllerManagerConfig和apiServerConfig 它是一个通用键/值对象，并且是一个子属性 kubernetesConfig。自定义apiserver配置示例：

"kubernetesConfig": {
    "schedulerConfig": {
        "--v": "2"
    }
}

请参阅 here 以获得支持的kube-scheduler选项的参考。

...

但是请记住，并非所有选项都受支持。 Docs说，例如不支持--kubeconfig，但是正如您可以阅读here一样，此标志仍然被弃用。 --config标志没有什么用，因此您可以简单地尝试一下它是否起作用。

您也可以使用Custom YAML for Kubernetes component manifests来实现它：

可以为kube-scheduler配置自定义YAML规范， kube-controller-manager，cloud-controller-manager和kube-apiserver 除了描述的附加组件 above。 您将需要传递kubernetes的 base64编码字符串 将YAML文件清单添加到 KubernetesComponentConfig [“ data”] 。对于 例如，要传递自定义的kube-scheduler配置，请执行以下操作：

"kubernetesConfig": {
    "schedulerConfig": {
            "data" : "<base64-encoded string of your k8s manifest YAML>"
        }
}

注意 ：针对插件的自定义YAML是一项实验性功能。由于Addons.Data允许您提供自己的脚本，因此 对于他们的错误造成的任何不良后果负责，或 失败。使用风险自负。

如您所见，即使在托管的kubernetes解决方案（例如 AKS ）中，kube-scheduler也可以进行自定义，但是只有在创建新集群时才可以自定义。