新手求教啊。。关于Hadoop

wuyaocheng 2010-05-14 04:48:57

小弟刚接触Hadoop..想把一个图像处理程序在hadoop上运行，想要把多个图像以文件夹或者数据库方式定义为输入，然后以图像文件为单位进行分块，再用图像处理程序对每个图像进行处理。。这样可以么？该如何实现呢。。。望高手回答、、谢谢

...全文

96 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

这一步需要对hadoop下的 core-site.xml、hadoop-env.sh、hdfs-site.xml、mapred-site.xml、yarn-site.xml等文件进行配置。这里我用了3台虚拟机，1台改为master，另外2台分别改为node1和node2。（3）IP地址改写，这里需要修改虚机的配置，选择NAT模式，DHCP选择想要的网段就行。这里根据每台虚机的ip选择相应的hostname就行。7、环境的配置已经改完了。（2）hadoop安装包：我的是hadoop-3.3.1。

关于hadoop的分享此前一直都是零零散散的想到什么就写什么，整体写的比较乱吧。最近可能还算好的吧，毕竟花了两周的时间详细的写完的了hadoop从规划到环境安装配置等全部内容。写过程不是很难，最烦的可能还是要给每一步配图，工程量确实比较大。原计划准备接上一篇内容写dkhadoop的监控页面的参数，突然觉得还是有必要把上两周写的内容做一个汇总，这样方便需...

hadoop核心知识学习: hadoop分为hadoop1.X和hadoop2.X，并且还有hadoop生态系统。这里只能慢慢介绍了。一口也吃不成胖子。那么下面我们以hadoop2.x为例进行详细介绍： Hadoop的核心是mapreduce和hdfs。 Mapreduce：mapreduce是很多人都需要迈过去的槛，它比较难以理解，我们有时候即使写出了mapreduce程序，但是还是摸...

文章目录Hadoop 环境搭建1、安装虚拟机2.安装 Ubuntu 操作系统3、关闭防火墙4、 SSH 安装5、安装 Xshell 及 Xftp6、安装 JDK7、安装 hadoop8. 结语 Hadoop 环境搭建 1、安装虚拟机在一切行动的前提，我们需要先安装好虚拟机，毕竟是供我们学习用的，因此我们需要通过虚拟机利用Linux系统来实现我们的Hadoop环境。安装虚拟机步骤： (1）下载 VMware 安装包。到 VMware® Workstation Pro 官网，选择对应的版本进行下载。本

62,620

社区成员

307,251

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章