Как локально смоделировать файловую систему S3 для тестирования spark.read.csv с помощью pytest?
#pyspark #pytest #amazon-sagemaker #moto Вопрос: Что я пытаюсь сделать Я пытаюсь выполнить модульное тестирование эквивалента следующей функции, используя pytest: def read_s3_csv_into_spark_df(s3_uri, spark): df = spark.read.csv( s3_uri.replace("s3://", "s3a://") ) return df…