Spark基本操作

编程入门 行业动态 更新时间:2024-10-20 03:52:09

Spark基本<a href=https://www.elefans.com/category/jswz/34/1770947.html style=操作"/>

Spark基本操作

创建 SparkSession

from pyspark.sql import SparkSessionspark = SparkSession.builder \.appName("Word Count") \.getOrCreate()

构建 sc

from pyspark.sql import SparkSessionspark = SparkSession.builder \.appName("Word Count") \.getOrCreate()sc = spark.sparkContext

创建RDD

从内存生成创建

data = sc.parallelize([('a',1),('b',

更多推荐

Spark基本操作

本文发布于:2024-03-23 23:49:40,感谢您对本站的认可!
本文链接:https://www.elefans.com/category/jswz/34/1744290.html
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。
本文标签:操作   Spark

发布评论

评论列表 (有 0 条评论)
草根站长

>www.elefans.com

编程频道|电子爱好者 - 技术资讯及电子产品介绍!