hadoop-reduce的示例分析

2023-04-08 02:11:00 hadoop

hadoop-reduce的示例分析

在这个例子中,我们将使用Hadoop的Streaming API来对一个文本文件进行单词计数。我们将使用两个文件:一个包含单词的文本文件,以及一个包含需要过滤掉的单词的文本文件。

输入文件(单词文件):

cat

dog

mouse

bird

输入文件(过滤文件):

cat

bird

输出文件:

dog 1

mouse 1

相关文章