-
learn-pyspark下载
资源介绍
PySpark 提供的类编辑
pyspark.SparkConf
pyspark.SparkConf 类提供了对一个 Spark 应用程序配置的操作方法。用于将各种Spark参数设置为键值对。
pyspark.SparkContext
pyspark.SparkContext 类提供了应用与 Spark 交互的主入口点,表示应用与 Spark 集群的连接,基于这个连接,应用可以在该集群上创建 RDD 和 广播变量 (pyspark.Broadcast)
pyspark.SparkFiles
SparkFiles 只包含类方法,开发者不应创建 SparkFiles 类的实例[2] 。
pyspark.RDD
这个类是为 PySpark 操作 RDD
- 上一篇: pyspark-2.2.1
- 下一篇: 数据仓库建设项目实施方案建议书