Установка ClearML Server в k8s

Настройка параметров производится из репозитория Helm. Для клонирования репозитория кода используйте следующие команды:

1
helm repo add allegroai https://allegroai.github.io/clearml-helm-charts
2
"allegroai" has been added to your repositories
3
helm repo update
4
Hang tight while we grab the latest from your chart repositories...
5
...Successfully got an update from the "allegroai" chart repository
6
Update Complete. ⎈Happy Helming!⎈
7
helm search repo allegroai
8
NAME                      CHART VERSION APP VERSION DESCRIPTION
9
allegroai/clearml         4.4.0         1.8.0       MLOps platform
10
allegroai/clearml-agent   2.0.2         1.24        MLOps platform
11
allegroai/clearml-serving 0.7.0         1.2.0       ClearML Serving Helm Chart

Для внесения изменений в структуру myvals.yaml в качестве шаблона используйте прилагаемый файл: clearml.zip, clearml.tar.

Внесите следующие изменения в файл clearml-myvalues.yaml из распакованного архива:

1. В секции ingress измените хосты для доступа к компонентам приложения:

   1
   #Скачиваем clearml.tar
   2
   tar -xvf clearml.tar
   3
   cd clearml
   4
   DOMAIN=new.<userdomain>.ru
   5
   sed -i "s/<userdomain>.ru/$DOMAIN/g" clearml-myvalues.yaml

   Пример

   1
   ingress:
   2
     annotations:
   3
       kubernetes.io/ingress.class: nginx
   4
    app:
   5
       enabled: true
   6
       hostName: "clearml-app.<userdomain>.ru"
   7
       tlsSecretName: "tls-secret-clearml-app"
   8
    api:
   9
       enabled: true
   10
       hostName: "clearml-api.<userdomain>.ru"
   11
       tlsSecretName: "tls-secret-clearml-app"
   12
    files:
   13
       enabled: true
   14
       hostName: "clearml-files.<userdomain>.ru"
   15
       tlsSecretName: "tls-secret-clearml-app"

2. Для работы встроенной аутентификации ClearML в секции apiserver измените настройки пользователя по умолчанию. Логин и пароль пользователя будут использованы для входа в web-интерфейс ClearML.

   1
   sed -i "s/<youusername>/<newuser>/g" clearml-myvalues.yaml
   2
   sed -i "s/<youpassword>/<newpassword>/g" clearml-myvalues.yaml

   Пример

   1
   apiserver:
   2
     configuration:
   3
       additionalConfigs:
   4
         apiserver.conf: |
   5
           auth {
   6
             fixed_users {
   7
               enabled: true
   8
               pass_hashed: false
   9
               users: [
   10
                 {
   11
                   username: "<youusername>"
   12
                   password: "<youpassword>"
   13
                   name: "<User Name>"
   14
                 }
   15
               ]
   16
             }
   17
           }

1. Установите ClearML Server на кластер k8s, выполнив команду:

   1
   helm install clearml allegroai/clearml -f clearml-myvalues.yaml --version 4.4.0
   2
   NAME: clearml
   3
   LAST DEPLOYED: Mon Dec 26 15:07:10 2022
   4
   NAMESPACE: default
   5
   STATUS: deployed
   6
   REVISION: 1
   7
   NOTES:
   8
   1. Get the application URL by running these commands:
   9
     export NODE_PORT=$(kubectl get --namespace default -o jsonpath="{.spec.ports[0].nodePort}" services clearml)
   10
     export NODE_IP=$(kubectl get nodes --namespace default -o jsonpath="{.items[0].status.addresses[0].address}")
   11
     echo http://$NODE_IP:$NODE_PORT

   Установка приложения ClearML Server занимает около 10 минут.

2. Проверьте статус развернутого приложения, выполнив команду:

   1
     ~ kubectl get pods
   2
   NAME                                                     READY   STATUS    RESTARTS   AGE
   3
   clearml-apiserver-566879b78c-sg2kq                       1/1     Running   0          29d
   4
   clearml-elastic-master-0                                 1/1     Running   0          32d
   5
   clearml-fileserver-65dfd858db-hgbc5                      1/1     Running   0          32d
   6
   clearml-mongodb-68fc76cf49-4rfsj                         1/1     Running   0          32d
   7
   clearml-redis-master-0                                   1/1     Running   0          32d
   8
   clearml-webserver-696c9c5c94-q7zcl                       1/1     Running   0          32d

3. Войдите в интерфейс ClearML Server по адресу: https://clearml-app.<userdomain>.ru.