SQLContext的使用
SQLContext在Spark1.6中使用,在spark2.x中已经标记为过时,不推荐使用。
示例代码
package com.spark import org.apache.spark.{SparkConf, SparkContext} import org.apache.spark.sql.SQLContext /* SQLContext的使用 */ object SQLContextAPP { def main(args: Array[String]): Unit = { val path="E:\\data\\people.json" //1)创建相应的Context val sparkConf=new SparkConf() sparkConf.setAppName("SQLContextApp").setMaster("local[2]") val sc= new SparkContext(sparkConf) val sqlContext =new SQLContext(sc) //2)相关的处理 val people=sqlContext.read.format("json").load(path) people.printSchema() people.show() //3)关闭资源 sc.stop() } }