Блог

Я запускаю задания Spark Structured Streaming в AWS EMR, но когда я отменил задание, даже если отменить и принудительно остановить потоковое задание, оно не останавливается. И если я снова отправлю одно и то же задание, у меня будет два одинаковых задания, работающих одновременно. На следующем изображении мы увидим, что первые 3 одинаковых задания выполняются одновременно, даже после того, как я отменил первое и второе задания.

Итак, мне нужна помощь, если кто-нибудь знает, как я могу полностью остановить задание spark structured streaming в AWS EMR без удаления кластера? Спасибо!