Fonctions de colonnes

Les fonctions de colonnes de pyspark.sql.functions (col, when, lit, sum, to_date, concat, etc.) construisent des expressions appliquées aux colonnes d'un DataFrame. Elles sont exécutées nativement par le moteur Spark, donc bien plus efficaces que des fonctions Python utilisateur.

Exemple

df.withColumn('ttc', F.col('ht') * 1.2)

Notions voisines

Tout le glossaire