Hadoop2.2中FSDataOutputStream的hsync,hflush调用始终没有生效，快要疯了，所以文件都说可以！求指导啊。

skymelai 2014-11-10 04:16:54

写文件的同时能够读取，不需要等待一个block写完后才能读取
查所有资料都说调试sync就OK，发现2.2下已经废弃sync改为hsync
试过没有效果，还有hflush也试过还是不行，要疯了，求指导！

...全文

435 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

skyWalker_ONLY 2014-11-12

打赏
举报

回复

使用hflush替代了sync，并且需要在该方法返回后才能读取写入的数据

HDFS放宽了（relax）POSIX的要求，可以以流的形式访问（streaming access）文件系统中的数据。本课程讲解搭建hadoop集群的全过程,从安装vmware,centos开始,从本地模式,伪分布式到全分布式,讲解实现经典案例wordcount...

目录通过java.net.URL读取数据通过FlieSystem API读写数据读取数据写入数据 ...新建文件并写入 ...通过FileStatus查询文件系统 ...查看文件系统信息 ...让java程序能够识别hadoop的hdfs URL需要先通过FsUrl...

HBase 的安装需要依赖 Hadoop 环境（主要是 HDFS 分布式文件系统），这点跟 Spark 类似。因此，需要先安装好 Hadoop 集群，可以将 HDFS 和 HBase 集群部署在一起，也可以分开部署，考虑到性能问题，一般建议将 HDFS ...

前言该部署文档是笔者在一台配置稍微较高的笔记本电脑上利用虚拟化技术(VMware)创建3台linux操作系统虚拟机作为分布式搭建基础来操练大数据hadoop框架搭建，高度模拟出符合/类似...

HDFS版本信息对比2.6.0-3.0.0 目前大数据集群的Hadoop主要版本为2.6.0，版本日期为2014.11.18。...Hadoop主要包括五个部分：Hadoop Common、Hadoop Distributed File System (HDFS)、Hadoop YARN、Hadoop MapRed...

Hadoop生态社区

20,811

社区成员

4,691

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章