Comment convertir une colonne de chaîne PySpark en un format de date ?

Conversion de la chaîne PySpark au format de date

Lors de la gestion des dates stockées sous forme de chaînes, la conversion vers un format de date approprié devient cruciale pour faciliter une analyse plus approfondie . Voici une solution pour convertir une colonne de chaîne au format « MM-jj-aaaa » en colonne de date à l'aide de PySpark.

Pour résoudre le problème et convertir avec succès la colonne de chaîne en date, pensez à utiliser la fonction to_date avec avec la spécification de format appropriée. L'extrait de code suivant illustre l'approche correcte :

df.select(to_date(df.STRING_COLUMN, "MM-dd-yyyy").alias("new_date")).show()

Pour Spark 2.2, une approche alternative existe en utilisant la fonction to_timestamp, qui prend en charge la spécification du format d'entrée :

from pyspark.sql.functions import to_timestamp
df.select(to_timestamp(df.STRING_COLUMN, "MM-dd-yyyy").alias("new_date")).show()

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!