-
等级
本版专家分：0结帖率 88.24% -
我不太清楚副本是什么概念。我看hadoop权威指南里面讲副本是一个一个放置的，这就是说会把所有数据放到一个副本吗？这样的话一个副本所在的机器容量必须要大于副本？那么google这种规模的大数据每一个数据节点的容量岂不是都很大？展开阅读全文
-
等级
本版专家分：0 -
一个副本指的就是一个数据块的一份存储，不是完整的数据
- Hadoop中容错恢复的问题
请教--关于Hadoop中容错恢复的问题hadoop设计的初衷就是容错.计算任务(MapReduce task)能够在节点宕机或其它随机错误下自行恢复 <br />先把数据用编码矩阵 编码生成一个中间文件 体积是原来的120%(打个...
- Hadoop管理员的十个最佳实践
前言 接触Hadoop有两年的时间了，期间遇到很多的问题，既有经典的NameNode和JobTracker内存溢出...在解决问题的过程中，有时需要翻源码，有时会向同事、网友请教，遇到复杂问题则会通过mail list向全球各地Hadoop使用
- 运维经验分享：Hadoop管理员的十个最佳实践
接触Hadoop有两年的时间了，期间遇到很多的问题，既有经典的NameNode和JobTracker内存溢出故障，也有HDFS存储小文件问题，既有任务调度问题，也有MapReduce性能问题.遇到的这些问题有些是Hadoop自身的缺陷（短板），...
- 闲聊Oracle Exadata与Hadoop
在文章开始前先作个声明，本人并非专业技术人员，充其量只能算IT从业人员和技术爱好者。本文也不是写给专业技术人员看的技术类文档，只是本人因为工作需要，在学习Oracle Exadata系统架构的过程中，自己的一些感触...
- 转-Hadoop管理员的十个最佳实践
前言 接触Hadoop有两年的时间了，期间遇到很多的问题，既有经典的NameNode和JobTracker内存溢出故障，也有HDFS存储小文件问题，既有任务调度问题，也有MapReduce性能问题.遇到的这些问题有些是Hadoop自身的缺陷（短...
- 运维经验分享：Hadoop管理员的十个最佳实践 （转载）
接触Hadoop有两年的时间了，期间遇到很多的问题，既有经典的NameNode和JobTracker内存溢出故障，也有HDFS存储小文件问题，既有任务调度问题，也有MapReduce性能问题.遇到的这些问题有些是Hadoop自身的缺陷（短板），...
- 使用Cloudera部署，管理Hadoop集群
使用Cloudera部署，管理Hadoop集群 ... Hadoop是一个开源项目，Cloudera对Hadoop进行了商业化，简化了安装过程，并对hadoop做了一些封装。 根据使用的需要，Hadoop集群要安装很多的组件，一个一个安装