20,848
社区成员
发帖
与我相关
我的任务
分享windows客户端如何访问hdfs
我是一个菜鸟，最新学习hadoop，想基于hdfs构建一套大文件存储系统。我的想法是这样的，将大文件的关系数据存储在oracle上，而将大文件本身存在hdfs上。数据访问的客户端使用windows下的vs2010开发，在windows xp和win7下使用。
我现在用centos搭建了hadoop1.2.0分布式环境，在数据节点能够通过命令行访问，但是我想实现基于windows xp客户端访问hdfs文件系统，在windows本地上传、下载、删除hdfs里的数据。
是不是有这样一个hdfs的客户端安装在windows系统里，就可以通过hdfs提供接口与hadoop通讯，我也没有找到具体的东西。我知道有c++的libhdfs，但是不知道这个东西如何在windows平台下开发，也不清楚能不能在vs2010下开发。
查了好多资料也没有搞明白用什么方式实现这种效果。还请高人指点一二，给我指点迷津。
我现在用centos搭建了hadoop1.2.0分布式环境，在数据节点能够通过命令行访问，但是我想实现基于windows xp客户端访问hdfs文件系统，在windows本地上传、下载、删除hdfs里的数据。
是不是有这样一个hdfs的客户端安装在windows系统里，就可以通过hdfs提供接口与hadoop通讯，我也没有找到具体的东西。我知道有c++的libhdfs，但是不知道这个东西如何在windows平台下开发，也不清楚能不能在vs2010下开发。
查了好多资料也没有搞明白用什么方式实现这种效果。还请高人指点一二，给我指点迷津。
...全文
请发表友善的回复…
发表回复
yuluo12 2014-12-14
- 打赏
- 举报
你最终怎么实现的啊
wangb45623 2014-10-20
- 打赏
- 举报
HDFS不是直接提供JAVA API的吗，你就在本地windows上开发一个java客户端，不就可以访问hdfs，或者你用C++开发通过thrift访问hdfs
wangyifangce 2014-05-05
- 打赏
- 举报
请问楼主用了什么方案？！
smilezcc 2013-08-07
- 打赏
- 举报
虽然和我最终的使用的方案不一样，但是只有你回答了我的问题，分都给你了
JJZHK 2013-07-22
- 打赏
- 举报
google一搜一大堆。
smilezcc 2013-07-22
- 打赏
- 举报
另外我看了一个帖子
http://www.front2end.cn/blog/access-Hadoop-with-C%23.html
说是用thrift能提供windows和hdfs访问的接口，不知道这个方案可行么
smilezcc 2013-07-22
- 打赏
- 举报
能说的具体一点么，如何通过eclipse就能够访问hdfs
能否提供具体的资料，多谢了。
JJZHK 2013-07-19
- 打赏
- 举报
eclipse
smilezcc 2013-07-19
- 打赏
- 举报
高手给指点一下，帮我分析一下，看看思路有没有问题，能不能实现
