Onde você precisa usar lit () em Pyspark SQL?
estou a tentar perceber onde é que precisas de usar um valor lit, que é definido como a literal column na documentação. ... ste um lugar onde eu possa aprender melhor as regras duras e rápidas de quando usar lit e possivelmente col como então?
Como posso escrever um arquivo parquet usando Spark (pyspark)?
Sou muito novo no Spark e tenho tentado converter um Dataframe para um arquivo parquet no Spark, mas ain ...
Sabes como fazer isto funcionar?
A versão de faísca que estou a usar é a Spark 2.0.1 construída para a Hadoop. 2.7.3.