sparkContext

基となるSparkContextを返します。

構文

sparkContext

戻り値

SparkContext

例

:::note サーバレスの互換性

spark.sparkContext Databricks Serverless computeでは利用できません。spark (SparkSession) APIsを直接使用してください。例：spark.sparkContext.parallelize(...)の代わりにspark.createDataFrame(...)を使用します。

:::

Python

spark.sparkContext
# <SparkContext master=... appName=...>

# Create an RDD from the Spark context.
rdd = spark.sparkContext.parallelize([1, 2, 3])
rdd.collect()
# [1, 2, 3]