Блог

Я создал очень маленький кластер в docker (1 диспетчер заданий 3 диспетчер задач). У меня есть 2 задания (1 потоковое и 1 пакетное, которое перезапускается по завершении).

У меня 58 ГБ свободного места (прибл. Используется 30G). Когда я запускаю агрегатор, диспетчер заданий начал потреблять диск. Через какой-то час мой диск заполнен. Но когда я проверяю FS ( du -su /*/ ), он содержит всего около 30 ГБ файлов.

Я не понимаю, почему это произошло, и где данные. Я пытаюсь проверить внутри контейнера jobmanager, но безуспешно.

Есть идеи?

У меня была та же проблема, похоже, что это был файл .out в папке /usr/local/flink-{1-0.3}/log, размер которого превышал 6 ГБ. Мне пришлось удалить файл и повторно развернуть задания.

Используете ли вы Docker Meta для Mac? У меня была проблема с «полным дисковым пространством», и я больше не мог создавать свои проекты. Шаги, которые сработали для меня:

1) df -h —> проверьте, достаточно ли свободного места на хосте

Если это так, выполните следующие действия:

1) docker exec -это ваш контейнер bash -> подключиться к вашему контейнеру

2) df -h / var /www —> проверить место на диске

Если свободного места больше нет, выйдите из контейнера и выполните следующие действия:

1) docker rm $ (docker ps -aq) —> остановить и удалить все контейнеры

2) docker rmi —> удалить все изображения

3) ls -lh ~/Library/Containers/com.docker.docker/Data/com.docker.driver.amd64-linux/Docker.qcow2 —> проверьте размер этого файла и удалите его

4) закройте Docker и снова откройте его

5) закройте терминал и снова откройте его

6) Повторная сборка