Hadoop2.6.1 HA集群命令行执行很慢 webhdfs执行很快

鱼日木水 2017-11-08 08:56:17

新安装的HA集群，一切都正常，就是执行命令行特别慢

前提：新装的集群，没有任何程序在读取

执行命令：hdfs dfs -ls /

结果：运行很慢要10几秒钟甚至更久才出来结果，结果是对的。

在web页面访问很快，webhdfs基本就是毫秒级响应

...全文

487 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

RivenDong 2019-09-04

打赏
举报

回复

你的集群是不是搭建在本地LINUX虚拟机里的？然后web是通过物理机访问的？如果是这样的话，说明你给予虚拟机的配置不足，另外web访问的话是访问的缓存过来的数据，所以会很快。

CantKill 2019-09-04

打赏
举报

回复

你好！请问问题怎么解决的？

Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上；而且它提供高吞吐量（high throughput）来访问应用程序的数据，适合那些有着超大数据集（large data set）的应用程序。HDFS放宽了（relax）POSIX的要求，可以以流的形式访问（streaming access）文件系统中的数据。本课程讲解搭建hadoop集群的全过程,从安装vmware,centos开始,从本地模式,伪分布式到全分布式,讲解实现经典案例wordcount结束,全方位讲解hadoop的操作细节,带你完成hadoop的安装和入门

1. 安装JDK http://blog.csdn.net/u013619834/article/details/38894649 2. 安装zookeeper集群(这里使用192.168.1.121 192.168.1.122 192.168.1.123) http://blog.csdn.net/u013619834/article/details/41316957 3.

Hadoop YARN HA 集群安装部署详细图文教程

引言搭建Hadoop261 集群 1 修改hostname 2 建立hostname和ip的映射关系 3 关闭防火墙 4 SSH免密码登陆 5 安装JDK 6 hadoop261的集群部署 7 验证hadoop是否安装成功1. 引言在前面的博客中，我曾经介绍了Hadoop的伪分布配置，但是在实际工作中最常见的是集群部署，在本篇博客中就主要介绍一下Hadoop2.6.1的集群部署（未配置

引言搭建Hadoop261 集群 1 修改hostname 2 建立hostname和ip的映射关系 3 关闭防火墙 4 SSH免密码登陆 5 安装JDK 6 hadoop261的集群部署 7 验证hadoop是否安装成功1. 引言在生产环境中NameNode的高可用是非常重要的，一旦NameNode宕机，那么整合集群就不能用了，在本篇博客中就主要介绍一下Hadoop2.6.1的HA部

Hadoop生态社区

20,808

社区成员

4,690

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章