说一下个人愚见,本人最近学习hadoop,可能理解有误,还望指出,就hadoop的本身会有一种心跳发送机制来看任务是否完成,还有数据验证功能,如果数据错误,它有可能会新启动一个job去完成这个,这个也会重新跑的,谁先跑完数据对,就会把非成功的所有job任务kill掉的,所以说当一个client失败了,会有其他的机器来启动这些任务,而且数据都是有分片的备份的。
20,848
社区成员
4,696
社区内容
加载中
试试用AI创作助手写篇文章吧