【文件属性】:
文件名称:hadoop-mapreduce:hadoop MapReduce
文件大小:233KB
文件格式:ZIP
更新时间:2021-05-02 12:06:26
Java
hadoop-mapreduce
Hadoop MapReduce示例。 使用HDFS中存储的access.log文件,实现MapReduce以查找每个IP访问该网站的次数。
先决条件:
已安装Hadoop。
将access.log文件复制到hdfs中。
假设它在hdfs:/// logs下
用法:
将项目导入Eclipse。
将项目导出为jar文件(accessMR.jar)。
执行命令以在hadoop中执行mapreduce。
hadoop jar /Users/hello/Desktop/accessMR.jar accessMR.AccessMR /logs/access.log /user/output
检查输出。
hadoop fs -cat /user/output/part-00000
运行hadoop命令的快捷方式:
编辑〜/ .profile并设置h
【文件预览】:
hadoop-mapreduce-master
----README.md(1KB)
----access.log(3.34MB)
----accessMR()
--------.project(367B)
--------bin()
--------.settings()
--------src()
--------.classpath(380B)