hadoop集群的9000端口连接异常

weixin_38105266 2017-08-31 11:09:24

Hadoop集群中想使用Hadoop的基准测试TestDFSIO对集群的性能进行一个测试，因此在$hadoop_home /share/hadoop/mapreduce中使用jar包进行测试，但是发现 9000端口 connection exception ，然后我对icp端口进行检查，发现集群并没有9000端口监听，求指教求解决

...全文

2987 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

SimonYCJ 2017-09-05

打赏
举报

回复

@weixin_38105266 你的集群的机器是泡在openstack上面的吗？

_明月 2017-09-01

打赏
举报

回复

嗯，真的抱歉，由于个人能力有限，真的帮不了你！

此课程是Docker技术+Hadoop技术+ Linux Shell编程的深度综合应用。本课程的成果，自己平时工作学习就能用，可以轻松在自己笔记本上启动10~20个分布式节点！在找工作和面试时，能用它进行演示，展示自己的水平，为自己加分！只用一个命令，就可以实现基于Docker容器的任意节点Hadoop集群的部署，即使是1000个节点的集群，也可以轻松运维。课程内容涉及Docker运行环境构建、Docker常用命令使用、Docker Dockerfile文件编写、Docker镜像构建、Docker存储驱动使用、Docker bridge网络、Docker Overlay网络、基于Docker的分布式集群构建、Hadoop集群构建等多种技术的综合应用。

2）通过查看端口发现，9000端口只允许本机访问，我远程连接当然会提示拒绝访问了。可能是Hadoop为了保证集群的安全性，默认的是本集群之间的访问，只允许配置的某一个IP访问吧。最近在学习Hadoop，忙了好几天，终于学会了Hadoop的分布式部署。另外，这种方法不建议大家在生产环境使用，毕竟任何一个IP地址都可以访问到你的Hadoop文件系统。注：本人刚开始学习Hadoop，说的不对的地方希望大家指正。首先，利用netstat -tpnl查看的端口开放情况（之前一直没留意是这的问题）。...

（PS）访问9000端口的前提是hadoop集群已启动。报错原因防火墙没有关闭主节点9000端口没有打开主节点9000端口打开了，但是不允许远程访问（一般是这个）第一：查看防火墙状态第二：查看主节点9000端口是否打开 netstat -tlpn 检查主节点9000端口是否打开没有打开的打开的第三、查看主节点9000端口是否允许远程访问，可使用telnet ip port 检验一般而言，只要启动了hadoop集群，9000端口就已经开放。如果9..

安装Hadoop后, 启动Hadoop时需要开启很多端口, 最简单的办法是关闭Linux防火墙. 具体方法如下: 当Linux打开防火墙后，你会发现，从本机登录9000端口是没有问题的，但是如果从另一台pc登录该linux系统后，你会发现提示这样的错误：不能打开到主机的连接，在端口 9000: 连接失败因为linux防火墙默认是关闭9000端口的，如果允许远程登录，可以关掉

在访问hadoop集群时，经常会遇到各种端口，如通过HTTP访问、TCP访问、RPC访问等。以下是收集整理的一些常用的hadoop集群默认端口。 Hadoop环境：2.x 一、hadoop配置文件说明：序号配置文件名配置对象主要内容 1 core-site.xml 集群全局参数用于定义系统级别的参数，如defaultFS、Hadoop的临时目录等 2 hdfs-site.xml HDFS参数 HDFS名称节点和数据节点的存放位置、文件副本的个数、文件读取权限等 3 m

932

社区成员

652

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章