Onde você precisa usar lit () em Pyspark SQL?

estou a tentar perceber onde é que precisas de usar um valor lit, que é definido como a literal column na documentação. ... ste um lugar onde eu possa aprender melhor as regras duras e rápidas de quando usar lit e possivelmente col como então?

Como posso escrever um arquivo parquet usando Spark (pyspark)?

Sou muito novo no Spark e tenho tentado converter um Dataframe para um arquivo parquet no Spark, mas ain ... Sabes como fazer isto funcionar? A versão de faísca que estou a usar é a Spark 2.0.1 construída para a Hadoop. 2.7.3.