conf
SparkのRuntime構成インターフェース。
これは、ユーザーがSpark SQLに関連するすべてのSparkおよびHadoopの設定を取得および設定できるインターフェースです。設定の値を取得する場合、基となるSparkContextに設定されている値があれば、それがデフォルト値として使用されます。
構文
conf
戻り値
pyspark.sql.conf.RuntimeConfig
例
Python
spark.conf
# Set a runtime configuration for the session.
spark.conf.set("key", "value")
spark.conf.get("key")
# 'value'