kubeflow

kube-batch 修改默认的配置

2019-04-21  本文已影响3人  zoux

在kube-batch V0.4及以上版本中,kube-batch默认的配置 只包含两个 Action(allocate, backfill)。

具体可以参考:
https://github.com/kubernetes-sigs/kube-batch/blob/6e560929dcafec91b2b9a24f246a20b4569b39a8/pkg/scheduler/util.go

在自己的需求中,我们可能需要定义自己的配置。

思路:
查看util.go中的代码发现,Kube-batch在发现用户指定配置文件后,会自动地读取该文件的内容,而不是使用自定义的config。所以,一个想法就是,使用NFS挂载卷,先生成自己的config file。然后修改kube-batch的deployment,让他读取这个config file。

修改方式如下:
步骤:
(1)创建pv,pvc,然后将自己的conf文件放到本地挂载的地方
pvc.yaml

apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: kubebatch-pvc
  namespace: kube-system   # 一定要加namespace,否则找不到
spec:
  accessModes:
    - ReadWriteOnce
  resources:
    requests:
      storage: 5Gi

pv.yaml

apiVersion: v1
kind: PersistentVolume
metadata:
  name: kubebatch-pv
  namespace: kube-system
spec:
  capacity:
    storage: 5Gi
  accessModes:
    - ReadWriteOnce
  nfs:
    server: 192.168.14.69
    path: /nfs-data/kube-batch

自定义的配置文件 kube-batch-conf.yaml

actions: "reclaim, allocate, backfill, preempt"
tiers:
- plugins:
  - name: priority
  - name: gang
  - name: conformance
- plugins:
  - name: drf
  - name: predicates
  - name: proportion
  - name: nodeorder

(2)修改kube-batch deployment,设置Volumes和 mountPath,同时args加上对应的参数

使用kubectl edit deployment kube-batch -n kube-system
然后做以下的修改:
a. 修改args参数

 containers:
      - args:
        - --logtostderr
        - --v
        - "3"
        - --scheduler-conf
        - /etc/zoux/kube-batch-conf.yaml  (与下面对应)

b.设置Volumes和 mountPath

volumeMounts:
        - mountPath: /etc/zoux   (换成你自己的)
          name: kube-batch
      dnsPolicy: ClusterFirst
      restartPolicy: Always
      schedulerName: default-scheduler
      securityContext: {}
      terminationGracePeriodSeconds: 30
      volumes:
      - name: kube-batch
        persistentVolumeClaim:
          claimName: kubebatch-pvc  (换成你自己的pvc)

(3)成功保存退出即可。(修改后kube-batch会自动重启)

最后感谢義洋同学 一起讨论提供思路。

上一篇下一篇

猜你喜欢

热点阅读