kll_sketch_agg_bigint
Fonction d'agrégation : retourne la représentation binaire compacte du Datasketches KllLongsSketch construit avec les valeurs de la colonne d'entrée. Le paramètre k optionnel contrôle la taille et la précision de l'esquisse (default 200, plage de 8 à 65535).
Syntaxe
Python
from pyspark.sql import functions as dbf
dbf.kll_sketch_agg_bigint(col=<col>, k=<k>)
parameter
parameter | Type | Description |
|---|---|---|
|
| La colonne contenant des valeurs bigint à agréger. |
|
| Le parameter k qui contrôle la taille et la précision (default 200, plage de 8 à 65 535). |
Renvoie
pyspark.sql.Column: La représentation binaire du KllLongsSketch.
Exemples
Python
from pyspark.sql import functions as dbf
df = spark.createDataFrame([1,2,3,4,5], "INT")
result = df.agg(dbf.kll_sketch_agg_bigint("value")).first()[0]
result is not None and len(result) > 0
Output
True