#amazon-web-services #aws-glue #aws-glue-data-catalog #aws-glue-spark
Вопрос:
Я просмотрел документы AWS Glue, но не смог найти подробную информацию о ценах для рабочих типов AWS Glue G. 1X и G. 2X. Кто-нибудь может объяснить, пожалуйста, нет ли разницы в стоимости между Standard, G. 1X и G. 2X?
Все, что я вижу в разделе «Цены на клей»,-это » Вам выставляется счет в размере 0,44 доллара за DPU-час с шагом в 1 секунду, округленный до ближайшей секунды. Задания с искрой клея с использованием клея версии 2.0 имеют минимальную продолжительность выставления счетов в течение 1 минуты. «. Это независимо от типа работника?
- Стандартный тип — 16 ГБ памяти, 4 VCPU вычислительной мощности и 50 ГБ подключенного хранилища EBS (2 исполнителя)
- G. 1X — 16 ГБ памяти, 4 VCPU и 64 ГБ подключенного хранилища EBS (1 исполнитель)
- G. 2X — Вдвое больше, чем у G. 1X (https://aws.amazon.com/blogs/big-data/best-practices-to-scale-apache-spark-jobs-and-partition-data-with-aws-glue/) что означает,
- G. 2X — 32 ГБ памяти, 8 процессоров, 128 ГБ EBS !!
Ценю любой вклад в это дело.
Yuva
Ответ №1:
Как вы можете прочитать здесь:
Когда вы используете G1.X / G. 2X, вы выделяете определенное количество рабочих. Эти карты соответствуют DPU.
Для типа работника G. 1X каждый работник сопоставляется с 1 DPU
и
Для типа работника G. 2X каждый работник сопоставляется с 2 DPU
Это означает, что G. 2X в два раза дороже, чем G. 1X. Если вы используете стандарт, вы выделяете определенное количество DPU напрямую. Если вы используете клей 2.0, я бы посоветовал вам использовать G. 1X или G. 2X, в зависимости от вашего варианта использования.