java – 没有映射器的MapReduce作业
发布时间：2020-12-14 05:55:56 所属栏目：Java 来源：网络整理
导读：这可能是一个非常基本的问题,但对我这样的许多新手来说仍然有帮助. 可以在没有映射器的情况下进行MR工作吗？我们需要实现这个以及实现此目的的方法吗？ 解决方法 IdentityMapper是一个将输入直接映射到输出的映射器. 假设你有一个格式为键值的输入,并且你在m
|
这可能是一个非常基本的问题,但对我这样的许多新手来说仍然有帮助.
可以在没有映射器的情况下进行MR工作吗？我们需要实现这个以及实现此目的的方法吗？ 解决方法
IdentityMapper是一个将输入直接映射到输出的映射器.
假设你有一个格式为键值的输入,并且你在mapper阶段没有任何关系,你唯一想做的就是根据键对值进行分组并做一些在reducer阶段对值进行聚合操作,可以使用此映射器. （编辑：李大同） 【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容! |