Hadoop 自带WordCount 操作步骤

本文主要是介绍Hadoop 自带WordCount 操作步骤，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

运行一个wordcount 任务的命令：bin/hadoop jar /usr/hddemo/wordcount.jar 包名.WordCount input output


说明：input 指定的是执行map任务是的数据源所在目录，output 是指定reduce任务 执行完后将结果输出的目录


data在配置文件配完后是不需要见这个目录的
name目录是 执行 hadoop namenode -format 才会生成的目录，也不是我们手动建的;


countworld的基本流程


在linux一个input目录下见两个文件
echo "Hello world Hello me! cwq solo"  >test1.txt
echo " Hello world Hello you! solo"  >test2.txt


hadoop fs -put /input/ /input


bin/hadoop jar /usr/hddemo/wordcount.jar 包名.WordCount input output
2.6以后的版本不用指定类名
bin/hadoop jar /usr/hddemo/wordcount.jar input output


Hadoop自带的运行 wordcount 例子的 jar 包在
/share/hadoop/mapreduce/hadoop-mapreduce-example.jar
用这个包要这样写


hadoop jar /home/yanzefeng/apps/hadoop-2.6.4/share/hadoop/mapreduce/hadoop-mapr

这篇关于Hadoop 自带WordCount 操作步骤的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！

---