-
本版专家分：0结帖率 0% -
我cdh-node1 不能勾选，当前受管 状态：是
-
本版专家分：0
-
解决了么，我也出现了这个问题。
-
本版专家分：0
-
应该是你主节点没启动cloudera-scm-agent服务，所有节点里，主节点要启动cloudera-scm-server和cloudera-scm-agent两个服务，其他从节点只要启动agent服务，我也是遇到这个问题
- cloudera manager下载后，主机不健康，提示：This host is not in contact with the Host Monitor.
- 我检查了一些有可能导致问题出现的地方。 1./etc/hosts 文件配置完成 2./etc/<em>cloudera</em>-scm-agent/config.ini 文件中的server指向服务器。 3.seli
- cloudera manager 服务节点由于防火墙问题不良与Cloudera Manager Server失去联系
- 问题 不良 : 该<em>主机</em>已与 Cloudera Manager Server 建立联系。 该<em>主机</em>未与 Host Monitor 建立联系。 原因 由于防火墙配置错误 导致 CM agent 和 Cloudera Manager Server 长时间失去联系 解决 关闭防火墙 或改好防火墙 节点之间通讯 在失去的节点 执行 service <em>cloudera</em>-scm-agent restart（这个还...
- Cloudera Manager uuid 文件导致无法添加主机问题
- 初接触CM不久，公司要求部署一个三个节点的测试集群（虚拟机）。 dn01，dn02，dn03 整个集群安装好之后才发现dn03的硬盘分的太小了，导致CM集群一些项以红色警告方式提醒，先尝试重新挂在一块硬盘，由于linux水平有限，没有成功，只好重新安装dn03。 删除CM集群上的Cluster 1 集群，然后将移除dn03，然后重装虚拟机，安装好之后，jdk、ssh等配置完毕。 我直接将
- Cloudera Manager5问题之NTP问题
- 按照Cloudera 的官方建议，所有的CDH节点和Cloudea Manager节点都需要启动ntpd服务。要不然会报如下错误： 1）此角色的<em>主机</em>的运行状况为不良。 以下运行状况测试不良： 时钟偏差. 2）The host’s NTP service is not synchronized to any remote server.解决方法如下： 先配置一台NTP服务，然后所有的CDH节点都
- Cloudera Hadoop 添加主机后，报主机状态异常问题
- 最近部署了一个CDH环境，突然发生了添加<em>主机</em>之后，提示<em>主机</em>状态异常，然后就无法分发CDH parcel。 这个问题困扰了将近半天的时间，一直翻查各种日志，最后在agent的日志中发现了问题。 主要原因是 第一遍部署CDH环境成功以后，由于mysql重启异常，强制杀死后，导致了CM无法正常连接mysql。然后进行第二遍部署。 在第二遍部署的时候，由于第一遍部署完成以
- 安装Cloudera Manager Server和Agent过程中遇到的问题
- 在安装hadoop 的<em>cloudera</em> <em>manager</em> 和 agent的过程中 版本 5.5.1 /opt/cm-5.5.1/etc/init.d/<em>cloudera</em>-scm-server start 是能正常启动的 /opt/cm-5.5.1/etc/init.d/<em>cloudera</em>-scm-agent 则无法正常启动 去查看了一下日志文件，也没有看出是什么错误，然后重装了好几次，还是这
- 安装CDH时候出现主机运行状态不良情况的解决
- > 发现很多兄弟在安装CDH过程的分配这一步，总是遇到“<em>主机</em>运行状态不良”的提示，当然我也遇到过。 解决办法就是，根据自己安装的cm版本来删除文件,我的路径是： rm -f /opt/<em>cloudera</em>-<em>manager</em>/cm-5.11.1/lib/<em>cloudera</em>-scm-agent/cm_guid 如果是多节点，则需要删除每个agent节点的这个文件。 进入到
- Cloudera Manager安装主机节点选不中
- 1， 安装集群，部分节点没办法选中，显示节点不受管。 解决方法: （1） 打开Cloudera server节点/etc/<em>cloudera</em>-scm-server/db.properties的文件，可以看到Cloudera <em>manager</em>的配置文件。 数据库名为scm，用户名为scm。 （2）用如下命令登录Cloudera server节点的postgresql数
- 离线安装Cloudera Manager 5和CDH5及与遇到的问题总结
- 今天介绍一下:在linux系统下,如何通过CDH搭建集群. 1.1Cloudera Manager简介 Cloudera Manager是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具（软件）,使得安装集群从几天的时间缩短在几个小时内， 运维人员从数十人降低到几人以内，极大的提高集群管理的效率。 Cloudera Manager有四大功能： （...
- Cloudera 向集群添加主机
- 本文将概述使用Cloudera Manager向集群中添加<em>主机</em>的操作。首先，我们这里是采用的离线安装模式安装的，所以对于你新的<em>主机</em>你必须配置好如下几个内容： 安装好JDK 安装好Cloudera Manager Agent 配置Agent指向Server 操作流程Created with Raphaël 2.1.0添加节点在CM界面<em>选择</em><em>主机</em>向集群添加新<em>主机</em><em>选择</em>管理的<em>主机</em>(确保你已经配好了Agent服
- CDH5实践（四）Cloudera Manager 5安装中碰到的一些问题和解决办法
- 问题一：安装过程中会出现失败，查看detail信息中，提示 host 无法连接 解决：前面的文章中漏了对<em>主机</em>host的一个修改， 除了修改 /etc/hosts 文件外，我们还需要修改修改 /etc/sysconfig/network 文件，并且需要重启才能生效。 问题二：CDH5 安装中，hive和monitor host 都需要数据库，除了postgresql外，是否可以
- CDH使用秘籍（二）：cloudera Manager中监控数据的存储
- 上一篇文章分析了<em>cloudera</em> <em>manager</em>中监控数据、中心数据的存储方式，怎样配置外部表等。这一篇文章进一步分析监控数据的存储，配置，调优等。
- Cloudera Manager5及CDH5安装指导（终极在线安装）
- Cloudera Manager5及CDH5安装指导（终极在线安装）-----存储，学习，共享 问题导读： 1.Cloudera Manager5安装需要哪些环境要求？ 2.哪些Linux系统上，可以安装Cloudera Manager5？ 3.在安装cdh的过程中，该如何<em>选择</em>版本？ 安装环境要求 集群中的四台<em>主机</em>必须满足以下要求： <em>主机</em>必须至少有10 GB的RA
- Cloudera Manager5及CDH5在线安装（cloudera-manager-installer.bin）
- 一、 准备工作 1. 需求条件网速好因为是线上安装，所以要求要有比较大的带宽，特别是并行安装台服务器时。 网络稳一旦网络中断，可能你花费了半天或则一天的时间，就有可能会浪费，然后重装。 内存大最少要求10G以上内存，特别NameNode节点分配的角色较多，占用内存会更多。 2. 安装环境 安装版本OS：CentOS 6.7CM：Cloudera Manager5.7CHD：Clo
- Cloudera 安装Parcel提示主机运行状况不良
- 现象 通过Cloudera WEB界面安装Hadoop过程中，在安装Parcel步骤时，一个节点分配激活失败，报错信息显示”<em>主机</em>运行状况不良”，如下图所示。 解决 删除agent目录下面的cm_guid文件，并重启失败节点的agent服务恢复。 [root@esgyn001 ~]# cd /var/lib/<em>cloudera</em>-scm-agent/ cm_guid res
- 修改cloudera manager管理主机名（转）
- I installed the Cloudera Manager 4 on a 1GbE default setup on eth0/bond0 and now I need to use 10GbE or Infiniband IB or 40GbE without the reinstall. How I did it!! The assumptions here are that y...
- Cloudera Manager 中如何正确的下线节点
- 最低要求的角色：超级管理员（所谓超级管理员就是 admin）可以通过两种方式从集群中删除<em>主机</em>：使用 Cloudera Manager 删除；从集群 A 中删除<em>主机</em>，将其提供给由 Cloudera Manager 管理的其他集群；两种方法都会涉及退役<em>主机</em>(decommission)、删除角色(role)、删除托管服务软件(service)，但最终都会保留数据目录。使用 Cloudera Manage...
- Cloudera Manager 5 和 CDH5.7.0 本地（离线）安装
- 问题导读： 1.什么是CDH？ 2.搭建CDH集群 需要的基本环境是什么？ 3.如何对集群进行基本的配置？ 4.怎样进行Cloudera Manager安装？ 5.怎样进行CDH服务安装？ 解决方案： 一、简介 CDH是<em>cloudera</em>公司开发的一个快速部署、高效管理Hadoop和其各种组件的一个商业化产品。主要分为两部分，分别为Cloudera M
- CDH平台搭建过程中主机不受管解决方案
- 序言 实验室的集群中一直安装的都是原生的hadoop、hbase等生态圈软件，最近由于给出的一个技术方案涉及到hbase-indexer（虽然目前还没用上），而hbase-indexer暂时没找到Apache版本，需要自己编译，而在本机上好像出现了一些错误...
- Cloudera Manager 5和CDH5离线安装,CDH-5.7.1
- 转载自：http://blog.csdn.net/jdplus/article/details/45920733 （部分内容经过修改和编辑） CDH (Cloudera’s Distribution, including Apache Hadoop)，是Hadoop众多分支中的一种，由Cloudera维护，基于稳定版本的Apache Hadoop构建，并集成了很多补丁，可直接用
- 关于cloudera manager管理已有cdh集群的问题
- 看了很多，网上的资料也好，自己也好，身边的朋友也好，大家都差不多都是通过cm来安装cdh。 突然想到一个问题，如果我是拿了cdh的源码自己编译安装了集群，然后再装cm来管理这个集群可以吗？应该可以吧，
- CDH安装时，无法纳管全部的节点的一个bug
- 问题描述： 使用CDH 5.2版本安装时，agent节点有12个。按照安装说明，在各个节点启动cm-agent之后，发现只有6个节点能被纳管。其它的节点总是无法加入纳管中。 在确认防火墙已经关闭后，仍然无法解决问题 问题分析： 1. 查看已经加入纳管的节点，发现这6个节点并不是固定的，有一个节点是不断变换的。查看数据库中。 mysql> select *
- [CDH5] 集群删除主机
- 1. CM主页 - <em>主机</em> - 所有<em>主机</em>，勾选要删除的<em>主机</em> - 停止<em>主机</em>上的角色；2. 登录到要被删除的<em>主机</em>，停掉agent服务； 已经设置了开机自启动的，要disable掉。3. 回到CM主页 - <em>主机</em> - 所有<em>主机</em>，勾选要删除的<em>主机</em> - 从集群中删除；4. 再次勾选要删除的<em>主机</em> - Remove Hosts from Cloudera Manager。...
- Cloudera Manager无法获取统计信息
- 今天总结CDH5的安装文档，查看了一下内网部署的Hadoop集群，发现<em>cloudera</em> <em>manager</em>无法获取统计信息，重启以后还是不行，后来点击CDH Web管理界面的<em>主机</em>选项，发现一台<em>主机</em>的磁盘已经满了。登录到磁盘满的<em>主机</em>上，查看磁盘使用情况du -sh /*发现/home目录占用了超过50G的硬盘空间（总空间才80G），进入到/home目录里，继续查看/home目录里面占用磁盘文件最多的目录，
- cloudera manager5删除uuid，主机找不到集群
- <em>cloudera</em> <em>manager</em>给开发人员节省了维护成本，但是一旦cm节点<em>不能</em>启动，将导致集群组件无法管理。 问题描述： 服务器重启后cm节点未能正常启动，在排查问题过程中误删除uuid文件。该文件在cm-5.3.6/lib/<em>cloudera</em>-scm-agent目录下。 解决步骤： agent无法启动，由于对7180、7182混淆，以为端口配置错误，修改后出现闪退，原因是修改配置文件写错，cm
- Cloudera Manager5在线安装停止在获取安装锁、不能选择安装主机、本地 parcel 错误
- 当我们处于下载的过程中，如下图 如果我们的网络不错，下载成功，如下图。 可是我们下载过程中，中断了，我们回不到下载界面了， 而是进入了下面界面: 我们该如何找回<em>cloudera</em>-agent 执行下面命令： sudo apt-get remove avro-tools crunch flume-ng hadoop-
- CDH管理界面查看各框架的版本（hive为例）
- 安装好的CDH如果查看hive的版本呢， 1、官网 2、管理界面中 官网查看一般看到的都是CDH系统默认自带的版本，如果你的CDH在运行的过程中升级过，那再参考官网的版本就会出现错误。 参考：http://www.<em>cloudera</em>.com/documentation/enterprise/release-notes/topics/cdh_vd_cdh5_mave
- CDH 5.7.0 离线安装详解
- 一、环境 1. IP和<em>主机</em>名，所有<em>主机</em>都可以连接互联网 172.16.1.101 cdh1 172.16.1.102 cdh2 172.16.1.103 cdh3 172.16.1.104 cdh4 2. 硬件资源 每个机器：CPU4核、内存8G、硬盘100G 3. 操作系统 CentOS release 6.4 (Final) 64位 二、配置 1. 安装前准备
- 求助!!!安装配置Cloudera Manager CDH5.6.0,查询host monitor时发生内部错误
- 按照网上的教程安装好CDH5.6后,当然里面步骤有修改host,一个master两个slave,javajava1.7虚拟机,mysql数据库,第一次使用的时候全部正常,然后重新执行 #启动maste
- cdh集群出现“无法发出查询：Host Monitor 未运行”
- cdh集群出现“无法发出查询：Host Monitor 未运行”出现问题后，首先想到查看日志：/var/log/<em>cloudera</em>-scm-server/<em>cloudera</em>-scm-server.log2018-06-01 11:58:00,001 INFO 618348787@agentServer-2579:com.<em>cloudera</em>.server.common.MonitoringThreadPo...
- SQL*PLUS老是出现错误0RA-03135 连接失去联系
- 刚开始登陆成功，但是过会就会自动失去连接，不是服务端的问题（因为我访问不同服务器都一样），用PL/SQL DEVELOPER也一样，谁能帮帮我
- 安装方式B--使用ClouderaManager的Parcels包进行安装
- 安装方式B–使用ClouderaManager的Parcels包进行安装安装方式B使用从ClouderaManager依赖库下载的包进行安装。安装JDK、Agents、CDH、Managed Service有多种方式可供<em>选择</em>： 使用这些包手工进行安装。你可以使用像Puppet或者Chef等工具帮助你向集群中所有的<em>主机</em>安装这些软件。 Cloudera Manager可以为你向集群中所有的<em>主机</em>安装这些软
- 使用cloudera manager重启集群后部分节点无法启动问题解决
- 博主遇到过使用<em>cloudera</em> <em>manager</em>重启集群后出现多个节点所有功能均无法连接，对该<em>主机</em>功能进行单点启动时并无报错信息，因为查询不到报错信息，就无法针对性的进行修复，所以进行多次测试定位到问题原因： 常见单节点无法启动导致原因为cm连接异常，命令传输超时，并且日志中无报错，此时应重启该节点cm agent应用 cm重启方法：找到cm存放路径(如安装路径不同和安装版本不同...
- Cloudera-Manager修改集群主机的IP
- 1、业务需求说明：由于公司网络进行了整改，随之而来的就是对应的ip网段发生了变化，其中我的hadoop的集群各<em>主机</em>的ip也相应的发生了改变，因此需要对各<em>主机</em>进行修改ip。2、具体操作： 首先停止cdh各组件的服务，修改各<em>主机</em>的ip。修改完后，本以为完事儿了，启动Cloudera Management Service时，发现启动失败，无法启动。那么问题就来了，如何通过<em>cloudera</em>-manage...
- Cloudera Manager 之二 （架构）
- 架构（Architecture） 如下图所示，Cloudera Manager 的核心是 Cloudera Manager Server（一下简称Server）。Server 托管管理控制台 web 服务和应用程序逻辑，并负责软件的安装、配置、服务的启动与关闭以及管理集群。 Server 和其他一些组件共同工作： Agent - 安装在每台<em>主机</em>上。Agent 负责进程的启动和停止，解压配置，触...
- 公司生产环境RHEL6.4下的Cloudera环境搭建详解
- 1 准备安装介质 1.1 底层服务器 服务器比较多，有HP，DELL，IBM多家服务器。 1.2 虚拟化 选用vmsphere的虚拟化 1.3 操作系统 选用Redhat Enterprise Linux 6.4作为操作系统，下载地址： http://www.redhat.com 1.4 Java开发与运行环境 选用Oracle jdk1.7.0_55作为JAVA开发与
- Host Monitor和Service Monitor服务无法启动，可能造成的原因是什么？
- Host Monitor和Service Monitor服务无法启动 1.现象描述：将<em>cloudera</em><em>manager</em>5.4.5 升级到5.5.0 后，服务器正常，而其它节点的agent 无法安装，由于无法升级，最后，只能还原到以前的版本 2.还原过程： 2.1将新版本采用rpm 卸载方式，将3个rpm 进行卸载； 2.2 重新安装5.4.5 版本cm,并启动cm 服务器上cm 服务，ie登
- Host Monitor和Service Monitor服务无法启动
- 1） 原因：内存设置过低或者“进程打开最大文件数”过低 解决：在.bashrc中添加了ulimit -HSn 65535，重新安装 2） 重新配置集群报错 ERROR com.<em>cloudera</em>.cmon.firehose.Main Error creating LevelDB subject record store. com.<em>cloudera</em>.cmon.tstore.lev...
- 部署CDH以及相关服务启动时的问题与解决方法
- 部署CDH以及相关服务启动时的问题与解决方法 （一）系统配置问题 （1）磁盘空间不够 The I/O cache encountered an error while updating data in medium "ahci-0-0" (rc=VERR_BAD_EXE_FORMAT). Make sure there is enough free space on the di
- 从零搭建生产Hadoop集群（九）——Cloudera Manager Server备份与迁移
- 从零搭建生产Hadoop集群（九）——Cloudera Manager Server备份与迁移一、概述二、CM Server迁移流程1. 旧CM Server的配置定时备份2. 备份CM Serer安装CM Agent进程3.备份CM Serer安装CM Server、db进程4.备份数据导入备份CM Server的配置PG库5.集群所有<em>主机</em>的CM Agent修改Server指向并重启6.迁移监控...
- Cloudera Manager 之一 （概述）
- Cloudera Manager 是一个端到端用于管理CDH集群的程序。Cloudera Manager提供了CDH群集很多细节的可视化和控制，因此它为企业化部署提供了一个标准。它使得企业能够高效、合理地管理集群。使用Cloudera Manager，用户可以轻松部署和集中操作完整的CDH堆栈和其他托管服务。这个程序可以自动地安装相关服务，将部署时间大大缩短。它为您提供运行<em>主机</em>和服务的集群范围的...
- Cloudera Manager 之四（管理控制台）
- Cloudera 管理控制台是一个网站页面，你可以用它来配置、管理以及监控 CDH。 如果服务已经配置，控制台头部的导航栏将显示如下： 导航栏显示以下信息： 集群（Clusters &amp;gt; cluster_name） 服务（Services） - 展示个别服务，以及 Cloudera Management 服务，在这个页面你可以： 查看服务实例的状态以及其他细节，也可以查看与服务相关的...
- [解决] Cloudera Manager安装锁的问题
- [解决] Cloudera Manager安装锁的问题
- cloudera manager 5.7 安装配置以及一些注意事项
- groupadd mysqluseradd -M -g mysql -s /sbin/nologin -d /usr/local/mysql mysqltar xf /opt/mysql-5.6.34-linux-glibc2.5-x86_64.tar.gz -C /usr/local/cd /usr/local/ln -s mysql-5.6.34-linux-glibc2.5-x86_64...
- Cloudera Manager CDH5 使用问题
- 一、权限问题 1.HDFS权限问题 在CDH上安装了HDFS，打开50070看到worknode正常，然后用了一个简单的上传文件到hdfs的代码，提示我： 导入失败！异常信息：org.apache.hadoop.security.AccessControlException: Permission denied: user=John, access=WRITE, inode="/":
- 关于CDH和Cloudera Manager
- 或下载word文档：http://download.csdn.net/detail/xfg0218/9747346 关于CDH和Cloudera Manager CDH (Cloudera's Distribution, including Apache Hadoop)，是Hadoop众多分支中的一种，由Cloudera维护，基于稳定版本的Apache Hadoop构建，并集成
- 解决cdh离线安装中分发parcels到各个节点时卡进度错误
- cdh离线装时，进行到分发parcels这一步时，进度一直不动，client_configs.py文件报错
- CDH 主机准备就绪，无法继续问题
- 今天处理一个CDH问题，由于各种原理，CDH装的一半的时候退出了，导致再次进入添加<em>主机</em>界面，无法进行下一步， 解决方法，重启CDH server端服务器，等待5分钟后登录下，在管理界面删除对应的<em>主机</em>，之后再重新添加<em>主机</em>就好了。 管理员在2009年8月13日编辑了该文章文章。
- Cloudera Manager一步步详细部署文档(离线parcels存储库方式）
- Cloudera Manager安装手册(离线parcels存储库方式），基于CentOS操作系统一步步傻瓜式安装，截图记录整个部署过程。带集群功能验证，检查集群是否正常工作 目录 一、文档内容 3 二、软硬件环境 3 2.1.软件信息 3 2.2.硬件信息 4 三、集群部署流程 5 3.1.管理结点部署 5 3.1.1 环境准备 5 3.1.2 CDH软件套件下载及配置 6 3.2.工作结点部署 9 3.2.1 环境准备 9 3.2.2 配置迁移 10 四、集群创建与验证 11 4.1创建集群 11 4.2 验证集群 22 4.2.1.MapReduce验证 22 4.2.2.Hive验证 24
- Cloudera Manager及CDH最新版本安装全程记录
- 大家都知道，Apache Hadoop的配置很繁琐，而且很零散，为此Cloudera公司提供了Clouder Manager工具，而且还封装了Apache Hadoop,flume,spark，hive,hbase等大数据产品形成自己特色的CDH产品，再使用CM进行安装，很大程度上方便了集群的搭建，并提供了集群的监控功能。 一、环境: 1.三台VMware虚拟机(一个做为主节点，两个做为...
- 手动安装cloudera manager 5.x（tar包方式）详解
- 官方共给出了3中安装方式：第一种方法必须要求所有机器都能连网，由于最近各种国外的网站被墙的厉害，我尝试了几次各种超时错误，巨耽误时间不说，一旦失败，重装非常痛苦。第二种方法下载很多包。第三种方法对系统侵入性最小,最大优点可实现全离线安装，而且重装什么的都非常方便。后期的集群统一包升级也非常好。这也是我之所以<em>选择</em>离线安装的原因。 包括MySQL数据库我均采用二进制安装包方式配置，且大部分步骤仅
- Cloudera Hadoop 集群安装(三台机器)
- 简述：Hadoop的安装对环境有比较高的要求，需要比较大的内存，一般的机器很难满足，一个人也很难有两三台独立的<em>主机</em>，所以只能<em>选择</em>使用安装虚拟机的方式安装，但是<em>主机</em>的内存需要在8G以上。如果小于8G可以扩展内存后再做尝试。 公司使用的hadoop一般都不是apache下的hadoop，而是<em>cloudera</em>公司的hadoop，因为它除了提供hadoop外还提供了集成工具，所以，今天也
- cloudera-scm-agent服务启动成功但是服务列表里面查询不到，7180/7182端口Web页打不开
- <em>请问</em>各位路过的老师，我用TAR的方式安装CDH，按照文档一步步配置与安装，先在所有环境已安装成功，但是到最后打开localhost：7180或7182、192.168.0.161：7180/7182
- CDH5 某机器节点每个角色都提示：此角色的主机的运行状况为存在隐患。 以下运行状况测试存在隐患 网络接口速度. 看看是不是网络问题
- CDH5 某机器节点每个角色都提示：此角色的<em>主机</em>的运行状况为存在隐患。 以下运行状况测试存在隐患 网络接口速度. 看看是不是网络问题 问题解决： 1、查找不是网络及网卡问题； 2、查看防火前状态（OS：RHEL7.3） 发现防火墙是开着的 #systemctl status firewalld ● firewalld.service - firewalld - dynamic...
- [CDH基础]-- 通过cloudera manager管理界面添加图表
- 英文原文链接：https://www.<em>cloudera</em>.com/documentation/enterprise/5-8-x/topics/cm_metrics.html 译文如下： 本节提供有关Cloudera Manager支持的度量标准的信息。 度量是可以被测量以量化实体或活动的状态的属性。它们包括属性，例如打开的文件描述符的数量或群集中的CPU利用率百分比。 Cloudera...
- Cloudera Manager搭建集群服务器启动失败
- 问题： <em>cloudera</em> <em>manager</em>搭建集群的服务器暂停一段时间后，启动失败。解决办法： 可能是因为server和agent没有启动在Linux下启动server和agent，重启监控界面的服务即可。此处需要注意的是，有些组件对集群的时间要求比较高，例如HBase，如果遇到关于HBase的以下错误，可以尝试着同步以下集群的时间。 同步时间之后，监控界面重启H...
- Cloudera CDH新增节点到集群参考步骤
- 1、新加机器环境配置 首先得在新的<em>主机</em>环境中安装JDK，关闭防火墙、修改selinux、NTP时钟与<em>主机</em>同步、修改hosts、与<em>主机</em>配置ssh免密码登录、保证安装好了perl和python。 2、上传<em>cloudera</em>-<em>manager</em>文件到/opt目录，修改agent配置文件： vi /opt/cm-5.7.0/etc/<em>cloudera</em>-scm-agent/config.ini server
- Hadoop之Cloudera Manager安装问题总结【转】
- 安装过程中，由于网络终端，导致下面问题：问题1：安装停止在获取安装锁 /tmp/scm_prepare_node.tYlmPfrT using SSH_CLIENT to get the SCM hostname: 172.16.77.20 33950 22 opening logging file descriptor 正在启动安装脚本...正在获取安装锁...BEGIN ...
- CDH5和Cloudera Manager5对环境的要求
- 说明: 1.一下内容针对Cloudera 5.X 版本, 2.内容来源http://www.<em>cloudera</em>.com/documentation/enterprise/release-notes/topics/rn_consolidated_pcm.html#xd_583c10bfdbd326ba--5a52cca-1476e7473cd--7f8d CDH与Cloudera Manan...
- TDH与CDH简介
- TDH：Transwarp Data Hub TDH是国内落地案例最多的一站式hadoop大数据平台，性能比开源hadoop2还快数十倍，通过内存计算、高效索引、执行优化和高度容错等技术，TDH一个平台即能处理10GB到100PB的数据，企业不再需要MPP或混合架构。 CDH：Cloudera Data Hub CDH是由<em>cloudera</em>进行开发的大数据一站式平台管理解决方案,基于Hadoop生态...
- 安装CDH时候出现主机运行状态不良情况的解决（Agent的集群id与当前Server集群id不匹配造成的）
- 现象通过Cloudera WEB界面安装Hadoop过程中，在安装Parcel步骤时，一个节点分配激活失败，报错信息显示”<em>主机</em>运行状况不良”，如下图所示。解决删除agent目录下面的cm_guid文件，并重启失败节点的agent服务恢复。寻找cm_guid文件的位置1) 如果<em>cloudera</em>-<em>manager</em>-agent是离线安装的，那么cm_guid文件的位置是，当初安装<em>cloudera</em>-mana...
- CM+CDH安装大数据的过程中出现主机运行状态不良情况的解决
- 最近在做CM和CDH的安装遇到了在安装的过程当中出现了<em>主机</em>运行状态不良的情况，截图如下： 出现这个首先想到的是这台机器的启动的过程当中考虑除了问题（因为我装了好多次，考虑集群环境被污染了） 然后在网上找到说删除一个文件即可，删除的问题文件如下： rm -f /opt/<em>cloudera</em>-<em>manager</em>/cm-5.14.0/lib/<em>cloudera</em>-scm-agent/cm_guid 我...
- CDH 修改ip 和主机名---详细
- 此文目的：由于各种原因，有时候需要修改cluster的ip 和<em>主机</em>的 hostname, 综合其他博客 和 自己遇到的情况，整理如下。 一、修改集群 ip 1、首先在安装<em>cloudera</em>-<em>manager</em>的<em>主机</em>上（集群主节点），停止所有的<em>cloudera</em>管理进程 service <em>cloudera</em>-scm-agent stop service
- 安装CDH组件的时候会多产生一个分组的原因
- 安装CDH组件的时候会多产生一个角色分组的原因
- cloudera manager的7180 web界面访问不了的解决办法（图文详解）
- 说在前面的话 我的机器是总共4台，分别为ubuntucmbigdata1、ubuntucmbigdata2、ubuntucmbigdata3和ubuntucmbigdata4。（注意啦，以下是针对Ubuntu系统的） 在ubuntucmbigdata1上执行了 sudo apt-get install <em>cloudera</em>-<em>manager</em>-daemons clouder...
- 使用cloudera manager 安装CDH时，界面提示修改swappiness
- 使用CM安装CDH5.2.0的时候，Validations界面中有以下提示内容，意思是需要在/etc/sysctl.conf中设置swappiness值为0， Cloudera recommends setting /proc/sys/vm/swappiness to at most 0. Current setting is 60. Use the sysctl command
- cloudera 各个版本对于的系统类型
- 给<em>选择</em>版本有疑问的。 Repository Type Location Repo file Tarball files Yum RHEL 6/CentOS 6 (64-bit) http://archive.<em>cloudera</em>.com/cm4/redhat/6/x86_64/cm/4/
- CDH交换内存警告解决方法
- 交换内存定义：Linux中Swap（即：交换分区），类似于Windows的虚拟内存，就是当内存不足的时候，把一部分硬盘空间虚拟成内存使用,从而解决内存容量不足的情况 现象：交换内存警告如下 解决方法： 1、设置swappiness值为0，表示尽可能不使用交换内存 (1)临时设置方案，重启后设置不生效 [root@cdh-001 ~]# sysctl vm.swappine...
- 网络接口汇总
- 网络接口汇总
- cdh安装hadoop平台根目录空间不足如何解决
- 目前大部分公司安装操作系统时给根仅有50G，但是cdh的lib 和日志都放在/var下，时间长了空间会爆 解决方法： 1.至少给根100G的空间 2.只能做软连接连到其他盘阵下具体操作步骤如下： /data是外挂的盘阵后者你自己大的路径 cp -r -p /var/log /data/;mv /var/log /var/log_bak;cd /var/ ;ln -s /data
- Cloudera Manager集群报警，堆转储目录/tmp 或日志目录/var/log 可用空间小于 5.0 吉字节
- 在Cloudera Manager上收到报警信息如下：日志目录可用空间 抑制...此角色的 日志目录 所在的文件系统的可用空间小于 5.0 吉字节。 /var/log/hbase（可用：3.4 吉字节 (6.82%)，容量：50.0 吉字节）(备注：这里日志目录还可能是 /var/log/spark、 /var/log/hive等。)堆转储目录可用空间 抑制...此角色的 堆转储目录 所在的文件系...
- Cloudera CDH增加节点到集群
- 新增一台机器步骤： 设置所有集群的hosts一样，加入新增的机器 vim /etc/sysconfig/network 修改hostnmae为aaa hostname aaa cp <em>cloudera</em>-<em>manager</em>-el5-cm4.6.2_x86_64.tar.gz 到新增的机器上 安装jdk环境，最好jdk版本统一，参考此处
- [CDH版本要求]--CDH 5和Cloudera Manager 5要求和支持的版本
- 英文原文：https://www.<em>cloudera</em>.com/documentation/enterprise/release-notes/topics/rn_consolidated_pcm.html#os510在企业数据中心，Cloudera Manager和CDH与Apache Accumulo，Apache Impala（孵化），Hue，Cloudera Search和Cloudera Na...
- 配置cloudera中yum在线源的操作
- 首先进入此目录 由此可见,此目录下没有在线yum源,将yum源更改为阿里云的yum源,操作如下： 1）centos5.*的下载连接： [root@bastion-IDC yum.repos.d]# wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-5.repo 2）centos6...
- cloudera manager+CDH 完全离线安装文档 版本5.7
- 写完全离线的目的有几点：1、数据安全考虑，服务器不允许与外部连通。2、对于下载速度很慢的时候，可以考虑。3、集群规模大，人手不够，又不会写shell脚本一键安装。<em>cloudera</em> <em>manager</em> 下载地址：http://archive.<em>cloudera</em>.com/cm5/CDH 下载地址：http://archive.<em>cloudera</em>.com/cdh5/说明：测试中的IP为伪造IP，本...
- cloudera manager生产集群升级流程
- 1.将rpm包和必要的依赖文件按照目录结构存入Linux。 下载网址：e-primary.<em>cloudera</em>.com/cm5/redhat/6/x86_64/cm/5.9.0/ node0 中全部。 node1-3中只存入agent和daemons。 将parcel传入Linux中的/opt/<em>cloudera</em>/parcel-repo,更改权限755。 2.备份 http://ww
- ClouderaManager修改IP与HostName
- 背景 公司搬迁新到新大楼IP地址发生变化以及需要搭建线上数据中心需要重新规划<em>主机</em>名称，需要线下与线上保持一致方便开发。2.操作系统CentOS6.5 CentOS7.4 梳理修改相关IP与HostName信息 停止相关服务 1. 登录ClouderaManager停止所有的CDH服务 2. service <em>cloudera</em>-scm-agent stop #需要停止所有的agent 3. servi
- 向CDH5集群中添加新的主机节点
- 向CDH5集群中添加新的<em>主机</em>节点 步骤一：首先得在新的<em>主机</em>环境中安装JDK，关闭防火墙、修改selinux、NTP时钟与<em>主机</em>同步、修改hosts、与<em>主机</em>配置ssh免密码登录、保证安装好了perl和python. 步骤二：上传<em>cloudera</em>-<em>manager</em>文件到/opt目录，修改agent配置文件： vi /opt/cm-5.0.0/etc/<em>cloudera</em>-s
- cdh集群中添加新主机
- 1、新加机器环境配置 首先得在新的<em>主机</em>环境中安装JDK，关闭防火墙、修改selinux、NTP时钟与<em>主机</em>同步、修改hosts、与<em>主机</em>配置ssh免密码登录、保证安装好了perl和python。 2、上传<em>cloudera</em>-<em>manager</em>文件到/opt目录，修改agent配置文件： vi /opt/cm-5.7.0/etc/<em>cloudera</em>-scm-agent/config.ini server...
- CDH6安装
- 官方文档 https://www.<em>cloudera</em>.com/documentation/enterprise/6/6.0/topics/installation.html 安装之前 JDK兼容性在不同的Cloudera Manager和CDH版本中也有所不同。某些版本的CDH 5与JDK 7和JDK 8兼容。在这种情况下，请确保所有服务都部署在同一主要版本上。例如，在JDK 8上运行Sqoop时，...
- CDH安装问题
- <em>请问</em>CDH parcel 不是离线安装的吗，我已经把parcal文件放在/opt/<em>cloudera</em>/parcel-repo 路径下了，但<em>为什么</em>还是会联网下载资源？
我们是很有底线的