分类：SparkSession和sparkSQL

2022
02-12

创建SparkSession和sparkSQL的详细过程

目录一、概述二、创建SparkSession三、SQLContext四、HiveContext一、概述spark有三大引擎，sparkcore、sparkSQL、sparkStreaming，sparkcore的关键抽象是SparkContext、RDD；SparkSQL的关键抽象是SparkSession、DataFrame；sparkStreaming的关键抽象是StreamingContext、DStreamSparkSession是spark2.0引入的概念，主要用在sparkSQL中，当然也可以用在其他场合，他可以代替SparkContext；SparkSession其实是封... 继续阅读 >