hdfs nfs gateway使用过程中块存储问题

fireling33 2017-05-31 08:13:05
利用hdfs nfs gateway将hdfs挂载到另一个linux系统中,如果用linux命令往hdfs被挂载目录下上传文件,会发现就算被上传的文件大小小于一个块(128M),在hdfs中也会占用一个块(128M)的大小,例如上传60M的文件,在webhdfs上看也会占用128M的k空间,但是过了大约10分钟之后,多余的磁盘又会被释放出来,像上面的例子,就会变成只占用60M,多余的68M会返回给hdfs的剩余空间中,不知道有没有大神知道其中的原理。
hdfs nfs gateway的配置是参考的官方文档http://hadoop.apache.org/docs/r2.8.0/hadoop-project-dist/hadoop-hdfs/HdfsNfsGateway.html
...全文
235 回复 打赏 收藏 转发到动态 举报
写回复
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复

20,808

社区成员

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧