kll_sketch_get_quantile_bigint

Extrai um valor quantílico de um esboço bigint KLL, dado um valor de classificação de entrada. A classificação pode ser um valor único ou uma matriz.

Sintaxe

Python

from pyspark.sql import functions as sf

sf.kll_sketch_get_quantile_bigint(sketch, rank)

Parâmetros

Parâmetro	Tipo	Descrição
sketch	pyspark.sql.Column ou str	Representação binária do esboço bigint KLL.
rank	pyspark.sql.Column ou str	O(s) valor(es) de classificação a serem extraídos (entre 0,0 e 1,0).

Devoluções

pyspark.sql.Column: O(s) valor(es) do quantil.

Exemplos

Exemplo 1 : Obter quantil a partir do esboço bigint KLL

Python

from pyspark.sql import functions as sf
df = spark.createDataFrame([1,2,3,4,5], "INT")
sketch_df = df.agg(sf.kll_sketch_agg_bigint("value").alias("sketch"))
sketch_df.select(sf.kll_sketch_get_quantile_bigint("sketch", sf.lit(0.5))).show()

Output

+-------------------------------------------+
|kll_sketch_get_quantile_bigint(sketch, 0.5)|
+-------------------------------------------+
|                                          3|
+-------------------------------------------+