mapreduce的入口可以不是main嘛？

tbssl 2019-06-21 03:43:13

比如现在我想把入口做成一个api，别人只要在程序里调用一下我的接口就可以用mr跑个结果出来，这样可以嘛？

...全文

199 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

西門吹牛__Linux 2019-06-25

打赏
举报

回复

当然可以啊~把你的mr程序写好，driver(就是启动虚拟机跑mr程序的)接口暴露出来给别人调用就可以了

MapReduce是一种分布式计算模型，由Google提出，广泛应用于大数据处理领域。它的主要目的是解决海量数据的并行计算问题，通过将大规模数据集分解为小块，分发到多台节点上进行并行处理，最后再汇总结果。在这个过程...

在“myfirstmapreduce-main”示例中，我们可以看到一个典型的MapReduce程序的主程序入口。在这个项目中，开发者可能已经实现了自定义的Map和Reduce类，以解决特定的数据分析问题。Map类会定义如何处理输入数据，生成...

WordCountTest类是MapReduce作业的主入口点，它包含了Job实例的配置和启动。类中包含了一个main方法，这是程序执行的起点。在这里，我们首先创建一个Configuration对象，然后使用GenericOptionsParser解析命令行参数...

`UserCF`类作为程序的入口，主要负责启动多个不同的MapReduce任务。具体来说，它通过`ToolRunner.run()`方法依次启动了6个不同的MapReduce任务，每个任务对应一个具体的实现类（例如`UserCF1`、`UserCF2`等）。 ```...

在弹出的"Create JAR from Modules"窗口中，你需要指定主类，即MapReduce程序的入口点。通常，这是一个包含main方法的类，例如这里提到的"test包下的drive类"。 3. **确认JAR包内容**：完成选择后，你会在...

Hadoop生态社区

20,848

社区成员

4,696

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章