ITKeyword,专注技术干货聚合推荐

注册 | 登录

<JAVA>Hadoop安装配置(单机)

awsxsa 分享于 2015-08-05

推荐:Hadoop单机安装配置过程

Hadoop单机安装配置过程:   1、首先安装JDK,必须是sun公司的jdk,最好1.6版本以上。 最后java–version 查看成功与否。 注意配置/etc/profile文件,在其后面加

2019阿里云全部产品优惠券(新购或升级都可以使用,强烈推荐)
领取地址https://promotion.aliyun.com/ntms/yunparter/invite.html

参考文献: http://blog.csdn.net/inkfish/article/details/5168676 http://493663402-qq-com.iteye.com/blog/1515275 http://www.cnblogs.com/syveen/archive/2013/05/08/3068044.html http://www.cnblogs.com/kinglau/p/3794433.html 环境 :Vmware11下Ubuntu14.04 LTS, Hadoop2.7.1 一 :创建账户 1.创建hadoop组 及组下hadoop用户

dogless@ubuntu:~$ sudo addgroup hadoop dogless@ubuntu:~$ sudo adduser --ingroup hadoop hadoop 2.添加到sudoers里面

dogless@ubuntu:~$ sudo gedit /etc/sudoers如图

3.重启以hadoop账户登录 二:安装配置SSH 1.从应用商店选择合适的源,比如阿里源 2.安装 openssh-server hadoop@ubuntu:/home/dogless$ sudo apt-get install openssh-server 3.启动ssh服务器 sudo /etc/init.d/ssh start ps -e | grep ssh4.修改为免密码登录 hadoop@ubuntu:/home/dogless$ ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa

hadoop@ubuntu:/home/dogless$ cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys 5.尝试登录与登出,两遍 三:安装JAVA sudo apt-get install openjdk-7-jdk 四:安装配置Hadoop(单机) 1.在桌面解压Hadoop 2.7.1安装包 2.移动到/hadoop目录并赋予权限 hadoop@ubuntu:/home/dogless/Desktop$ sudo mv hadoop-2.7.1 /hadoophadoop@ubuntu:/home/dogless/Desktop$ sudo chmod 777 /hadoop 五:配置环境变量 hadoop@ubuntu:/home/dogless/Desktop$ sudo g

推荐:hadoop安装配置及问题

废话少说,lets do it 一、安装配置 (1)下载安装包: wget http://labs.renren.com/apache-mirror//hadoop/core/hadoop-1.0.0/hadoop-1.0.0.tar.gz

(2)解压

edit /etc/profile末尾追加

(特别注意JAVA_HOME和HADOOP_INSTALL路径) #HADOOP export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64 export JRE_HOME=$JAVA_HOME/jre export CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH export PATH=$JAVA_HOME/bin:$PATH:$JRE_HOME/lib export HADOOP_INSTALL=/hadoop export PATH=$PATH:$HADOOP_INSTALL/bin export PATH=$PATH:$HADOOP_INSTALL/sbin export HADOOP_MAPRED_HOME=$HADOOP_INSTALL export HADOOP_COMMON_HOME=$HADOOP_INSTALL export HADOOP_HDFS_HOME=$HADOOP_INSTALL export YARN_HOME=$HADOOP_INSTALL export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_INSTALL/lib/native export HADOOP_OPTS="-Djava.library.path=$HADOOP_INSTALL/lib" #HADOOP 更新环境 hadoop@ubuntu:/home/dogless/Desktop$ source /etc/profile 六:测试 1.定位到程序目录,创建测试目录input,使用Readme做数据 hadoop@ubuntu:/home/dogless/Desktop$ cd /hadoophadoop@ubuntu:/hadoop$ cp README.txt input 2.测试wordcount这个example,输出到output文件夹 hadoop@ubuntu:/hadoop$ bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.1.jar wordcount input output 测试成功 重启sudo reboot 注意:若hadoop账户出错 回到原来账户 删除

sudo userdel -r newuser 重新建hadoopo账户并赋予权限

推荐:Ubuntu15.04单机/伪分布式安装配置Hadoop与Hive试验机

环境 系统: Ubuntu 15.04 32bit Hadoop版本: hadoop-2.5.2.tar.gz JDK版本: jdk-8u-45-linux-i586.tar.gz Hive版本:apache-hive-0.14.0-bin.tar.gz MySQL版

参考文献: http://blog.csdn.net/inkfish/article/details/5168676 http://493663402-qq-com.iteye.com/blog/1515275 http://www.cnblogs.com/syveen/archive/2013/05/08/3068044.html http://

相关阅读排行


用户评论

游客

相关内容推荐

最新文章

×

×

请激活账号

为了能正常使用评论、编辑功能及以后陆续为用户提供的其他产品,请激活账号。

您的注册邮箱: 修改

重新发送激活邮件 进入我的邮箱

如果您没有收到激活邮件,请注意检查垃圾箱。