社区
下载资源悬赏专区
帖子详情
Hadoop 0.20.2在linux下配置下载
weixin_39821228
2019-07-17 11:00:29
Hadoop 0.20.2在linux下安装与配置
相关下载链接:
//download.csdn.net/download/kong555/3363738?utm_source=bbsseo
...全文
9
回复
打赏
收藏
Hadoop 0.20.2在linux下配置下载
Hadoop 0.20.2在linux下安装与配置 相关下载链接://download.csdn.net/download/kong555/3363738?utm_source=bbsseo
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
Hadoop
0.20
.2在
linux
下
配置
Hadoop
0.20
.2在
linux
下安装与
配置
Hadoop
0.20
.2安装
配置
笔记(2012-2-28).doc
Hadoop
0.20
.2安装
配置
笔记,在虚拟机上实现,宿主机(xp):内存4G,安装三台虚拟
linux
系统,文档里有详细介绍,按此文档,基本没啥问题,这是我
配置
好了后写的。
hadoop
安装
1.a1 192.168.9.1 (master) a2 192.168.9.2 (slave1) a3 192.168.9.3 (slave2) 修改/etc/hosts 2.3台机器 创建
hadoop
用户
hadoop
密码:123 3.安装JDK (3台都安装) [root@a1 ~]# chmod 777 jdk-6u38-ea-bin-b04-
linux
-i586-31_oct_2012-rpm.bin [root@a1 ~]# ./jdk-6u38-ea-bin-b04-
linux
-i586-31_oct_2012-rpm.bin [root@a1 ~]# cd /usr/java/jdk1.6.0_38/ [root@a1 jdk]# vi /etc/profile export JAVA_HOME=/usr/java/jdk1.7.0_25 export JAVA_BIN=/usr/java/jdk1.7.0_25/bin export PATH=$PATH:$JAVA_HOME/bin export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar export JAVA_HOME JAVA_BIN PATH CLASSPATH 重启你的系统 或 source /etc/profile [root@a1 ~]# /usr/java/jdk1.6.0_38/bin/java -version java version "1.6.0_38-ea" Java(TM) SE Runtime Environment (build 1.6.0_38-ea-b04) Java HotSpot(TM) Client VM (build 20.13-b02, mixed mode, sharing) 4.安装
hadoop
(3台都安) [root@a1 ~]# tar zxvf
hadoop
-
0.20
.2-cdh3u5.tar.gz -C /usr/local 编辑
hadoop
配置
文件 [root@a1 ~]# cd /usr/local/
hadoop
-
0.20
.2-cdh3u5/conf/ [root@a1 conf]# vi
hadoop
-env.sh 添加 export JAVA_HOME=/usr/java/jdk1.7.0_25 设置namenode启动端口 [root@a1 conf]# vi core-site.xml 添加
fs.default.name
hdfs://
hadoop
1:9000
设置datanode节点数为2 [root@a1 conf]# vi hdfs-site.xml 添加
dfs.replication
2
设置jobtracker端口 [root@a1 conf]# vim mapred-site.xml
mapred.job.tracker
hadoop
1:9001
[root@a1 conf]# vi masters 改为 a1(主机名) [root@a1 conf]# vi slaves 改为 a2 a3 拷贝到其他两个节点 [root@a1 conf]# cd /usr/local/ [root@a1 local]# scp -r ./
hadoop
-
0.20
.2-cdh3u5/ a2:/usr/local/ [root@a1 local]# scp -r ./
hadoop
-
0.20
.2-cdh3u5/ a3:/usr/local/ 在所有节点上执行以下操作,把/usr/local/
hadoop
-
0.20
.2-cdh3u5的所有者,所有者组改为
hadoop
并su成该用户 [root@a1 ~]# chown
hadoop
.
hadoop
/usr/local/
hadoop
-
0.20
.2-cdh3u5/ -R [root@a2 ~]# chown
hadoop
.
hadoop
/usr/local/
hadoop
-
0.20
.2-cdh3u5/ -R [root@a3 ~]# chown
hadoop
.
hadoop
/usr/local/
hadoop
-
0.20
.2-cdh3u5/ -R [root@a1 ~]# su -
hadoop
[root@a2 ~]# su -
hadoop
[root@a3 ~]# su -
hadoop
所有节点上创建密钥 [
hadoop
@a1 ~]$ ssh-keygen -t rsa [
hadoop
@a2 ~]$ ssh-keygen -t rsa [
hadoop
@a3 ~]$ ssh-keygen -t rsa [
hadoop
@a1 ~]$ ssh-copy-id -i /home/
hadoop
/.ssh/id_rsa.pub a1 [
hadoop
@a1 ~]$ ssh-copy-id -i /home/
hadoop
/.ssh/id_rsa.pub a2 [
hadoop
@a1 ~]$ ssh-copy-id -i /home/
hadoop
/.ssh/id_rsa.pub a3 [
hadoop
@a2 ~]$ ssh-copy-id -i /home/
hadoop
/.ssh/id_rsa.pub a1 [
hadoop
@a2 ~]$ ssh-copy-id -i /home/
hadoop
/.ssh/id_rsa.pub a2 [
hadoop
@a2 ~]$ ssh-copy-id -i /home/
hadoop
/.ssh/id_rsa.pub a3 [
hadoop
@a3 ~]$ ssh-copy-id -i /home/
hadoop
/.ssh/id_rsa.pub a1 [
hadoop
@a3 ~]$ ssh-copy-id -i /home/
hadoop
/.ssh/id_rsa.pub a2 [
hadoop
@a3 ~]$ ssh-copy-id -i /home/
hadoop
/.ssh/id_rsa.pub a3 格式化 namenode [
hadoop
@a1 ~]$ cd /usr/local/
hadoop
-
0.20
.2-cdh3u5/ [
hadoop
@a1
hadoop
-
0.20
.2-cdh3u5]$ bin/
hadoop
namenode -format 开启 [
hadoop
@a1
hadoop
-
0.20
.2-cdh3u5]$ bin/start-all.sh 在所有节点查看进程状态验证启动 [
hadoop
@a1
hadoop
-
0.20
.2-cdh3u5]$ jps 8602 JobTracker 8364 NameNode 8527 SecondaryNameNode 8673 Jps [
hadoop
@a2
hadoop
-
0.20
.2-cdh3u5]$ jps 10806 Jps 10719 TaskTracker 10610 DataNode [
hadoop
@a3
hadoop
-
0.20
.2-cdh3u5]$ jps 7605 Jps 7515 TaskTracker 7405 DataNode [
hadoop
@a1
hadoop
-
0.20
.2-cdh3u5]$ bin/
hadoop
dfsadmin -report
hadoop
-
0.20
.2(已经修改了conf文件中的默认
配置
)
hadoop
-
0.20
.2(已经修改了conf文件中的默认
配置
),直接解压即可,适用于windows的eclipse开发和
linux
端的服务器部署。
hadoop
的伪分布式模式
配置
与安装
安装软件: 系统:
Linux
2.6.32-358.el6.x86_64 JDK:jdk-7u7-
linux
-i586.tar.gz
Hadoop
版本:
hadoop
-
0.20
.2-cdh3u4.tar.gz 硬件环境: 三台主机:分别为 gdy192 192.168.61.192 gdy194 192.168.61.194 gdy195 192.168.61.195 本次部署模型为: gdy192上部署:NameNode和JobTracker gdy194上部署:SecondaryNameNode gdy195上部署:DateNode TaskTracker
下载资源悬赏专区
12,791
社区成员
12,326,891
社区内容
发帖
与我相关
我的任务
下载资源悬赏专区
CSDN 下载资源悬赏专区
复制链接
扫一扫
分享
社区描述
CSDN 下载资源悬赏专区
其他
技术论坛(原bbs)
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章