关于 Hadoop HDFS中的fsimage

全能码农-ss 2015-01-27 04:09:01
fsimage文件，也即命名空间映像文件，是内存中的元数据在硬盘上的checkpoint，它是一种序列化的格式，并不能够在硬盘上直接修改。

这就话不理解，输给解释下，3Q
...全文
192 2 打赏 收藏 转发到动态 举报
写回复
用AI写文章
2 条回复
切换为时间正序
请发表友善的回复…
发表回复
全能码农-ss 2015-01-28
  • 打赏
  • 举报
 回复
其实我是不理解FSImage， 貌似是这个意思： namenode上的元数据，没搁一段时间，都会从内存，持久化到硬盘上，之后生成镜像文件FSImage，而持久化的这个点（位置）就是checkpoint。不知道对不对
master_y 2015-01-27
  • 打赏
  • 举报
 回复
就是一种不能直接修改的文件，只能通过其他软件或者工具修改
hadoop-hdfs-fsimage-exporter：将Hadoop HDFS内容统计信息导出到Prometheus
Prometheus Hadoop HDFS FSImage导出器 | 将Hadoop HDFS统计信息导出到包括 总数/每个用户/每个组/每个配置的目录路径/每个路径集 目录数 文件数 文件大小和大小分布（可选） 块数 文件复制（总体/每个用户摘要）...
hadoop hdfs配置
大数据,hadoop,hdfs配置，java开发
深入浅出大数据核心技术与应用--Hadoop-HDFS介绍与环境搭建实践
该部分主要讲解HDFS以及，Hadoop分布式环境搭建实践
hfsa:Hadoop FSImage分析器（HFSA）
Hadoop FSImage分析器（HFSA） 介绍 Hadoop FSImage分析器（HFSA）通过提供补充 支持对HDFS数据文件以及用户和组目录的概述进行概述（回答“谁拥有多少个/大/小文件...”） 一个用于从派生的用于快速和部分多线程的...
hadoop-hdfs:Hadoop分布式文件系统hdfs代码分析
hadoop-hdfs Hadoop分布式文件系统hdfs代码分析目录介绍Datanode-数据块基本结构主要介绍了HDFS中第二关系块结构，数据块到数据中断的映射关系。退役-中断退款主要介绍了数据异步下线取消机制。INode-文件目录结构...
Java EE

67,514

社区成员

225,878

社区内容

发帖
与我相关
我的任务
社区描述
J2EE只是Java企业应用。我们需要一个跨J2SE/WEB/EJB的微容器，保护我们的业务核心组件（中间件），以延续它的生命力，而不是依赖J2SE/J2EE版本。
社区管理员
  • Java EE
加入社区
  • 近7日
  • 近30日
  • 至今

加载中

查看更多榜单
社区公告
暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章