#amazon-web-services #cloud #amazon-cloudwatch #aws-glue
Вопрос:
У меня есть задание по склеиванию aws, которое загружает данные в таблицу красного смещения . Это обычная клеевая работа. который принимает имя таблицы в качестве параметра. Как я могу передавать журналы задания склеивания aws в два разных потока журналов на основе имени таблицы.
например :- задание awsglue, принимающее параметр «таблица 1», должно перейти в поток журнала для «таблицы 1». то же задание, которое принимает параметр «таблица 2», должно перейти в поток журнала для «таблицы 2».
Комментарии:
1. Спасибо, что использовал этот параметр в aws glue continuous-log-logGroup . Там лямбда с фильтром подписки не очень помогла, так как для каждого журнала нам требовалось ключевое слово, относящееся к таблице, чтобы создать шаблон фильтра
Ответ №1:
Вы можете настроить фильтр лямбда-подписки для группы журналов, обычно создаваемой Клеем. Затем лямбда проанализирует журналы в режиме реального времени и распределит их по выделенным журналам cloudwatch для каждой таблицы.
Комментарии:
1. Когда мы используем фильтр подписки, каким будет шаблон фильтра для фильтрации журналов, относящихся к конкретной таблице ?@marcin
2. @Datagirl Не уверена. Я бы предложил задать новый вопрос с конкретными деталями. Вы можете привести примеры текущих журналов склеивания.