天问

RHadoop数据分析(1)-通用架构

系统架构:

这种死板的东西,只简要介绍。

安装R:

CenOS7中安装,如果到官网下载,只能下载到readme  https://mirrors.tuna.tsinghua.edu.cn/CRAN/   所以直接sudo yum install R(sudo apt-get install r-base)安装。

 

安装RStudio:

下载后,解压即可打开,无需安装,这个安装到windows开发机上。

 

安装JDK:

服务器运行环境,还是安装jre比较简单实用。

 

安装Hadoop(2.7.1):

hadoop集群安装,配置有点麻烦,后续把笔记分享出来.

 

安装RHIPE:

先安装protobuf做数据交换:

最新版3.3:https://github.com/google/protobuf/releases/download/v3.3.0/protoc-3.3.0-linux-x86_64.zip

make install 安装

安装rhipe:

最新版本2015年更新: http://ml.stat.purdue.edu/rhipebin/Rhipe_0.75.2_hadoop-2.tar.gz

R CMD INSTALL Rhipe_0.75.2_hadoop-2.tar.gz

 

安装RHadoop:

先安装RHadoop依赖包:

install.packages(c("rJava","itertools","httr","devtools","plyr","reshape2","Rcpp","iterators","digest","RJSONIO","functional"))

下载RHadoop三个包:

https://github.com/RevolutionAnalytics/RHadoop/wiki/Downloads

R CMD INSTALL xx1.tar.gz
R CMD INSTALL xx2.tar.gz
R CMD INSTALL xx3.tar.gz

 

博客地址:http://blog.yoqi.me/?p=3472
扫我捐助哦
喜欢 1

这篇文章还没有评论

发表评论