社区
云存储
帖子详情
HDFS 下,一个文件如何查看它所占的元数据在namenode内存中的大小?
flesh_man
2016-03-11 08:47:03
各位想问一下,如何查看namenode中元数据的大小啊
...全文
1548
2
打赏
收藏
HDFS 下,一个文件如何查看它所占的元数据在namenode内存中的大小?
各位想问一下,如何查看namenode中元数据的大小啊
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
2 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
大数据技术架构
2019-07-14
打赏
举报
回复
引用 1 楼 pernodrum 的回复:
大概是150kb
多一个k吧兄弟
pernodrum
2019-03-31
打赏
举报
回复
大概是150kb
HDFS
的Name
Node
堆
内存
估算
在
HDFS
中
,数据和
元数据
是分开存储的,数据
文件
被分割成若干个数据块,每
一个
数据块默认备份3份,然后分布式的存储在所有的Data
Node
上,
元数据
会常驻在Name
Node
的
内存
中
,而且随着数据量的增加,在Name
Node
中
内存
的...
【
HDFS
】Name
Node
元数据
内存
计算
Name
Node
元数据
内存
计算
HDFS
中
的NAME
NODE
元数据
管理(超详细)
即哪个块位于哪个结点上按照存储形式分别为
内存
元数据
和
元数据
文件
两种,分别存在
内存
和磁盘上SNN可以减小edits logs
文件
的
大小
和得到
一个
最新的fsimage
文件
,这样也会减小在name
node
上的压力。
Name
Node
堆
内存
估算
在
HDFS
中
,数据和
元数据
是分开存储的,数据
文件
被分割成若干个数据块,每
一个
数据块默认备份3份,然后分布式的存储在所有的Data
Node
上,
元数据
会常驻在Name
Node
的
内存
中
,而且随着数据量的增加,在Name
Node
中
内存
的...
几种
查看
Hadoop
HDFS
Name
Node
内存
大小
的方法
请注意,在大型集群环境
中
,为了确保Name
Node
能够有效处理大规模
元数据
存储需求,通常会对其进行合理的
内存
规划和监控,以确保其稳定性和性能。
云存储
932
社区成员
652
社区内容
发帖
与我相关
我的任务
云存储
云计算 云存储相关讨论
复制链接
扫一扫
分享
社区描述
云计算 云存储相关讨论
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章