Spark指南——第三章:SparkSQL编程—— DataFrame(2)_(3)综合使用spark-sql相关知识,包括dataframe列的类型更改,增加列,创建udf函数-CSDN博客

网站介绍:文章浏览阅读359次。SparkSQL编程(1)一、SparkSession二、DataFrame1.创建DataFrame①通过数据源创建DataFrame②从RDD转换创建DataFrame1.方式一:Case Class方式2.方式二:createDataFrame方式③从Hive Table查询创建2.使用SQL风格编程① 对DataFrame创建一个临时表② 对创建的people表进行SQL查询3.使用DSL(Domain Specific Language)风格编程① 查看Schema② 指定列查询③ 限制条件查询④_(3)综合使用spark-sql相关知识,包括dataframe列的类型更改,增加列,创建udf函数,连