Блог

Какой экземпляр AWS EC2 хорош и быстр для вычисления MD5SUM файла объемом 1 ТБ.

Я хочу выполнить эту операцию за <5 минут, как это возможно?

Тип инстанса не так важен, как скорость диска.

Тома Amazon EBS можно настроить для определенного уровня операций ввода-вывода и пропускной способности. Если вам нужна более высокая скорость чтения с диска, увеличьте параметры (но это может повлечь за собой дополнительные расходы).

Кроме того, для некоторых старых инстансов Amazon EC2 может потребоваться выбрать «EBS-оптимизированный», чтобы в полной мере использовать преимущества высокоскоростного диска. Если вы видите этот параметр для данного типа инстанса, его выбор, скорее всего, повысит производительность (это может повлечь за собой дополнительные расходы). У более новых типов инстансов эта функция предоставляется автоматически.

Итог: вам нужно будет протестировать различные комбинации, чтобы увидеть, что вас устраивает. Начните с инстанса современного типа (например t3.large ) и диска со скоростью «По умолчанию». Если этого недостаточно быстро, увеличьте скорость диска. После того, как он будет работать в соответствии с вашими требованиями, уменьшите размер типа инстанса, чтобы убедиться, что он продолжает хорошо работать при более низких спецификациях (и более низкой стоимости).