#apache-spark #apache-spark-sql Вопрос: Я пытаюсь запросить поле json из Spark, чтобы узнать, установлен ли для одного элемента значение true. Содержимое моих параметров поля json выглядит следующим образом: "match_tax_type"=>"true", "sales_tax_enabled"=>"true", ……
#apache-spark #pyspark #apache-spark-sql Вопрос: У меня есть набор данных Spark с 23 миллионами строк. Один из столбцов содержит a key с 32 уникальными значениями. Они key используются позже в процессе…
#scala #apache-spark #hadoop Вопрос: Я пытаюсь сохранить фрейм данных с помощью spark, фрейм данных выглядит примерно так ценность {"красный":#FF0000, "лазурный":#F0FFFF} когда я сохраняю DF в csv, это сохранение сохранения с…
#apache-spark #apache-искра Вопрос: Я настроил кластер spark в docker с 1 мастером и 7 рабочими на моем рабочем столе под управлением Linux. Когда я отправляю ему задания, даже если статус…