#amazon-web-services #keras #amazon-sagemaker
#amazon-web-services #keras #amazon-sagemaker
Вопрос:
я впервые использую AWS Sagemaker, поэтому я пытаюсь подогнать свою модель keras и постоянно получаю эту ошибку. Я не знаю, как я могу это решить, я попытался выполнить echo 1> /proc/sys/vm / overcommit_memory, но затем ядро умерло. Я использовал самую базовую и самую дешевую версию для Sagemaker, я думаю, у нее 4 ГБ, может быть, это проблема? Но я действительно не знаю, смогу ли я с этой конфигурацией установить эту модель на свой компьютер, так что это означает, что у Sagemaker меньше мощности, чем у моего компьютера? Спасибо.
Ответ №1:
Для модели, для хранения которой требуется массив размером 20 ГБ, вы, вероятно, захотите использовать что-то вроде экземпляра ml.t3.2xlarge или ml.m5.8xlarge, у которых доступно 32 ГБ памяти.
Есть два способа решить эту проблему:
Способ 1
Вы можете выбрать это из среды SageMaker Studio, если вы используете SM Studio IDE, с помощью кнопки «Переключить тип экземпляра» в верхней части вкладки «Записная книжка».
Как только вы это сделаете, список экземпляров появится во всплывающем окне, и вам нужно нажать на кнопку выбора «Только для быстрого запуска», чтобы просмотреть все доступные типы экземпляров.
Способ 2
В качестве альтернативы, если вы используете «традиционный» ноутбук SageMaker Jupyter без среды разработки SageMaker Studio:
Перейдите к основной консоли SageMaker.
Нажмите Notebook -> Экземпляры Notebook.
Нажмите на гиперссылку блокнота, для которого вы хотите изменить тип экземпляра.
Это приведет вас на страницу «Настройки экземпляра ноутбука».
Нажмите на кнопку «Редактировать» (вверху справа).
Выберите новый, более крупный тип экземпляра из раскрывающегося списка «Тип экземпляра ноутбука».
Прокрутите страницу вниз до нижней части страницы и нажмите кнопку «Обновить экземпляр ноутбука».
Это вернет вас к списку экземпляров ноутбуков. Обратите внимание, что список будет содержать слово «Обновление» со значком часов рядом с ним в столбце состояния.
Если это не обновилось через несколько минут, нажмите на кнопку обновления вашего браузера.
Теперь экземпляр должен отображаться как доступный / в обслуживании, с новым размером / типом экземпляра, указанным в столбце «Экземпляр».
Если он не запущен, нажмите на ссылку «Пуск» в столбце «Действия», и он должен начинаться с нового типа экземпляра.