sparklyr-R语言访问Spark的另外一种方法

sparklyr-illustration

Spark自带了R语言的支持-SparkR,前面我也介绍了最简便的SparkR安装方法,这里我们换个方式,使用Rstudio提供的接口,sparklyr。

安装(记得安装Java虚拟机),

连接Spark

读取数据

列出所有的表

使用dplyr

画图

ggplot2-1

开窗函数Window Function

使用SQL

机器学习

 

读写数据

编写扩展

dplyr Utilities

连接Utilities

关闭与Spark的连接

 

Leave a Reply

Your email address will not be published. Required fields are marked *