Rook ceph manager неисправен на кластере k3s
Некоторое время назад я создал кластер ceph с ладьей на кластере k3s с одним узлом, просто чтобы попробовать, и он работал очень хорошо. Я смог передать хранилище другим модулям через cephfs. Я последовал примеру, приведенному в документации по быстрому запуску ладьи, чтобы сделать это.
Однако два дня назад без моего вмешательства кластер ceph перестал работать. Кажется, что у модуля менеджера ceph есть одна проблема: мой модульrook-ceph-mgr-a-6447569f69-5prdw
сбой в цикле, и вот его события:
Events:
Type Reason Age From Message
---- ------ ---- ---- -------
Warning BackOff 41m (x888 over 6h5m) kubelet, localhost Back-off restarting failed container
Warning Unhealthy 36m (x234 over 6h14m) kubelet, localhost Liveness probe failed: Get http://10.42.0.163:9283/: dial tcp 10.42.0.163:9283: connect: connection refused
Warning FailedMount 31m (x2 over 31m) kubelet, localhost MountVolume.SetUp failed for volume "rook-ceph-mgr-a-keyring" : failed to sync secret cache: timed out waiting for the condition
Warning FailedMount 31m (x2 over 31m) kubelet, localhost MountVolume.SetUp failed for volume "rook-ceph-mgr-token-bf88n" : failed to sync secret cache: timed out waiting for the condition
Warning FailedMount 31m (x2 over 31m) kubelet, localhost MountVolume.SetUp failed for volume "rook-config-override" : failed to sync configmap cache: timed out waiting for the condition
Normal Killing 28m (x2 over 30m) kubelet, localhost Container mgr failed liveness probe, will be restarted
Normal Pulled 28m (x3 over 31m) kubelet, localhost Container image "ceph/ceph:v14.2.7" already present on machine
Normal Created 28m (x3 over 31m) kubelet, localhost Created container mgr
Normal Started 28m (x3 over 31m) kubelet, localhost Started container mgr
Warning BackOff 6m47s (x50 over 22m) kubelet, localhost Back-off restarting failed container
Warning Unhealthy 63s (x28 over 30m) kubelet, localhost Liveness probe failed: Get http://10.42.0.163:9283/: dial tcp 10.42.0.163:9283: connect: connection refused
Я не знаю failed to sync secret cache
причина или следствие. Это ладья или k3s?
Нет вывода с k3s kubectl logs rook-ceph-mgr-a-6447569f69-5prdw -n rook-ceph
(добавление -p ничего не меняет)
Спасибо за помощь, это мой первый вопрос по stackru, надеюсь, что все сделано правильно:)