Блог

У меня есть Java-лямбда, которая в данный момент копирует файл из S3 в / tmp. Это занимает 6-10 секунд в зависимости от размера экземпляра Lambda. Файл повторно используется при новых вызовах, которые используют тот же экземпляр Lambda. Однако трафик очень интенсивный, и я мог видеть, что поступает более 50 одновременных запросов, и копирование с холодного запуска из S3 неприемлемо…

Есть ли лучший способ «предварительной загрузки» данных в экземпляр Lambda, чем копирование из S3? Как насчет HTTP-запроса для извлечения кэшированной копии из Cloudfront. Любые другие «хитрости» для ускорения холодного запуска при наличии требований к данным начального запуска?

Ответ: ДА, Смотрите ниже

Ответ: ДА

Быстрее извлекать из корзины хостинга S3, поддерживаемой CloudFront и использующей GZip. Для файла размером 1,5 МБ я заметил улучшение производительности с 12 секунд до всего лишь 4 секунд. Вот код, который я написал для этой цели:

 void getFile(String remoteUrl) throws Exception {

    URL url = new URL(remoteUrl); 
    HttpsURLConnection con = (HttpsURLConnection)url.openConnection();

    con.setRequestProperty("Accept-Encoding", "gzip");

    BufferedInputStream bis;
    if ("gzip".equals(con.getContentEncoding())) {
        bis = new BufferedInputStream(new GZIPInputStream(con.getInputStream()));
    }
    else {
        bis = new BufferedInputStream(con.getInputStream());
    }

    String getPath = url.getPath();
    String fileName = "/tmp/" getPath.substring(getPath.lastIndexOf('/')   1);

    BufferedOutputStream out = new BufferedOutputStream(new FileOutputStream(fileName));
    byte[] buff = new byte[16 * 1024];
    int len;
    while ((len = bis.read(buff)) > 0)
        out.write(buff, 0, len);
    bis.close();
    out.close();
}
  

Я надеюсь, что это поможет кому-то еще.

Обрыв