toolate的博客

原创 Coggle 30 Days of ML（22年3月）Spark基础

任务1：PySpark数据处理 步骤1：使用Python链接Spark环境 步骤2：创建dateframe数据 import pandas as pd from pyspark.sql import SparkSession spark = SparkSession \ .builder \ .appName('pyspark') \ .getOrCreate() # 原始数据 test = spark.createDataFrame([('001','1',100,87,6