SparkSQL外部数据源
外部数据源-External Data Source API
DataFrame概述与使用
DataFrame概述与使用
SparkSQL部署与简单使用
一、运行环境Ø JDK:1.8.0_45 64位Ø hadoop-2.6.0-cdh5.7.0Ø Scala:2.11.8Ø spark-2.3.1-bin-2.6.0-cdh5.7.0(需要自己编译)Ø hive-1.1.0-cdh5.7.0二、SparkSQL运行准备#元数据存在MyS
SparkSQL初识
一、 Spark SQL介绍 Spark SQL是Apache Spark's的一个模块,用来处理结构化数据,1.0后产生;SQL语句主要体现在关系型数据库上,大数据中基于Hadoop的SQL有Hive
Spark工作流程
Spark架构组成图