社区
Hadoop生态社区
帖子详情
关于HDFS 管理工具的问题
boy13860
2017-05-02 08:13:16
因工作需求,需要找一个 HDFS的管理工具 最好是C/S结构 不行的话 B/S也可
要求有如下几点:
1.能够浏览整个目录结构(这点参考HADOOP自带的)
2.能够配置数据源(这个肯定算硬性条件啦)
3.关键点: 支持导出合并文件
效果类似于 hdfs dfs -getMerge 那样(硬性)
导出合并 Spark 或者MR计算结果的 文件夹为整个结果文件
4. 最好支持上传文件(非硬性要求)
5.支持文件编辑(硬性)
问下诸位才子是否有看到过 类似的软件 或者管理工具
给些意见 十分感谢!
...全文
257
回复
打赏
收藏
关于HDFS 管理工具的问题
因工作需求,需要找一个 HDFS的管理工具 最好是C/S结构 不行的话 B/S也可 要求有如下几点: 1.能够浏览整个目录结构(这点参考HADOOP自带的) 2.能够配置数据源(这个肯定算硬性条件啦) 3.关键点: 支持导出合并文件 效果类似于 hdfs dfs -getMerge 那样(硬性) 导出合并 Spark 或者MR计算结果的 文件夹为整个结果文件 4. 最好支持上传文件(非硬性要求) 5.支持文件编辑(硬性) 问下诸位才子是否有看到过 类似的软件 或者管理工具 给些意见 十分感谢!
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
HDFS
精讲
讲解
HDFS
的Java、shell操作,
HDFS
集群搭建
HDFS
管理工具
HDFS
Explorer 安装配置
1.下载安装包 2.双击进行安装 3.选择安装路径 4.安装 5.安装完成后不会自动生成图标,需要去安装目录下找到,然后创建桌面快捷方式,方便以后使用 6.双击图标打开 7.邮箱随便写一个,只要满足邮箱格式即可,不会去登录校验 8.然后选择第一个 9.配置ip 和连接名名称为hadoop01(根据自己的主机名配置) 10.点击Connect按钮即可链接成功,可以查询到里面存储的文件,也可以通过拖拽,选择等方式直接上传,避免了使..
HDFS
管理工具
HDFS
Explorer
学习hadoop时,发现一个工具,记录一下。
HDFS
Explorer是一个在windows上管理
HDFS
系统的工具,支持上传、下载、重命、复制、移动和删除等。下载地址:http://bigdata.red-gate.com/
hdfs
-explorer.html 输入ip和账号,注意hadoop必须开启web
hdfs
接口(参考http://yangyoupeng-cn...
方便的连接
HDFS
进行文件上传下载等管理的小工具
对于我这种刚开始学习Hadoop的人员,需要频繁的在本地电脑和
HDFS
之间上传下载以及删除文件,如果全部采用代码操作比较麻烦。 针对windows系统,有一些连接
HDFS
进行文档管理的工具,比如说
HDFS
+Explorer。 但是我的是mac系统,我找了很久也没找到比较好用的工具,因此自己利用java开发了一个小工具。可以实现与
hdfs
之间全部数据的同步,只需操作本地文件夹即可将数据同步到
hdfs
...
远程连接
hdfs
的客户端工具
HDFS
Explorer&HadoopIntellijPlugin
远程连接
hdfs
的客户端工具
HDFS
Explorer port是yarn的ResourceManager的管理界面接口(可能是通过界面获取其他配置信息,不需要本地环境和配置文件设置) 可以上传下载查看远程
hdfs
文件 如果报无法连接localhost:50075端口,需要在
hdfs
-site.xml配置dfs.client.use.datanode.hostname=true,使用主机名访问。 idea的hadoop插件 下载HadoopInte...
Hadoop生态社区
20,808
社区成员
4,690
社区内容
发帖
与我相关
我的任务
Hadoop生态社区
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
复制链接
扫一扫
分享
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章