hadoop-mapreduce:hadoop MapReduce

时间:2021-05-02 12:06:26
【文件属性】:
文件名称:hadoop-mapreduce:hadoop MapReduce
文件大小:233KB
文件格式:ZIP
更新时间:2021-05-02 12:06:26
Java hadoop-mapreduce Hadoop MapReduce示例。 使用HDFS中存储的access.log文件,实现MapReduce以查找每个IP访问该网站的次数。 先决条件: 已安装Hadoop。 将access.log文件复制到hdfs中。 假设它在hdfs:/// logs下 用法: 将项目导入Eclipse。 将项目导出为jar文件(accessMR.jar)。 执行命令以在hadoop中执行mapreduce。 hadoop jar /Users/hello/Desktop/accessMR.jar accessMR.AccessMR /logs/access.log /user/output 检查输出。 hadoop fs -cat /user/output/part-00000 运行hadoop命令的快捷方式: 编辑〜/ .profile并设置h
【文件预览】:
hadoop-mapreduce-master
----README.md(1KB)
----access.log(3.34MB)
----accessMR()
--------.project(367B)
--------bin()
--------.settings()
--------src()
--------.classpath(380B)

网友评论