第四周WordCount优化
一、GitHub地址https://github.com/kawoyi/Advanced-WordCounter最终由组长整合的组长github二、psp表格三、个人模块及实现我负责的是输入模块，由FileUnit类里的readFile函数进行文件读取输入publicclassFileUnit{pu...
WordCount示例深度学习MapReduce过程（1）
我们都安装完Hadoop之后，按照一些案例先要跑一个WourdCount程序，来测试Hadoop安装是否成功。在终端中用命令创建一个文件夹，简单的向两个文件中各写入一段话，然后运行Hadoop，WourdCount自带WourdCount程序指令，就可以输出写入的那句话各个不同单词的个数。但是这不是...
软件质量测试第二周作业WordCount
https://github.com/aftermath51/wCount一.PSP表格 PSP2.1PSP阶段预估耗时（分钟）实际耗时（分钟）Planning计划 15 20·Estimate·估计这个任务需要多少时间 3天 3天Development开发 3天3天 ·Analysis·需求分析(...
软件质量与测试第二周作业WordCount
GitHub地址：https://github.com/MrZYF/WordCount一、PSP表格PSP2.1PSP阶段预估耗时（分钟）实际耗时（分钟）Planning计划1010·Estimate·估计这个任务需要多少时间1010Development开发520760·Analysis·需求分析...
软件质量测试 第二周 wordcount 作业
一.github地址https://github.com/WKX121/WC二.PSPPSP表格PSP2.1PSP阶段预估耗时（分钟）实际耗时（分钟）Planning计划 25 25·Estimate·估计这个任务需要多少时间 25 25Development开发300 340·Analysis·...
软件质量与测试--第二周作业 WordCount
软件质量与测试--第二周作业WordCountGithub地址：https://github.com/RicardoDZX/WordCountPSP：PSP2.1PSP 阶段预估耗时 （分钟）实际耗时 （分钟）Planning计划2015·Estimate·估计这个任务需要多少时间2015Devel...
[Java]如何制作一个WordCount-Plus的Plugin
主类每个Plugin都有一个主类实现了com.jihuayu.wordcount.api.Plugin接口，这个主类就是插件的路口。获取命令介绍可以通过向方法getCommandUsage的参数info添加String的方法添加你的方法介绍。获取命令名字可以通过方法getCommandName的返回...
第4周小组作业：WordCount优化
一、GitHub地址https://github.com/ChenSilence/wcPro二、PSP表格PSP2.1PSP阶段预估耗时（分钟）实际耗时（分钟）Planning计划1010·Estimate·估计这个任务需要多少时间1010Development开发510510·Analysis·需...
第4周小组作业：WordCount优化
Github地址https://github.com/ohayogirls/wcProPSP表格PSP2.1PSP阶段预计耗时（分钟）实际耗时（分钟）Planning计划 10 15·Estimate·估计这个任务需要多少时间 10 15Development开发 390 490·Analysis·...
Hadoop实战3:MapReduce编程-WordCount统计单词个数-eclipse-java-ubuntu环境
之前习惯用hadoopstreaming环境编写python程序，下面总结编辑java的eclipse环境配置总结，及一个WordCount例子运行。一下载eclipse安装包及hadoop插件1去官网下载linux版本的eclipse安装包（或者在本人为了大家方便下载，上传到了csdn下载，网址：...
软件质量与测试--第二周作业 WordCount
github地址：https://github.com/wzfhuster/software_test_taskspsp表格：PSP2.1PSP阶段预估耗时（分钟）实际耗时（分钟）Planning计划3020·Estimate·估计这个任务需要多少时间5040Development开发300400·...
软件质量与测试--第二周作业 WordCount
软件质量与测试第二周作业WordCountGithub地址：https://github.com/Hu-Peking/WordCount PSP2.1： PSP2.1表格PSP2.1PSP阶段预估耗时（分钟）实际耗时（分钟）Planning计划30 30 ·Estimate·估计这个任务需要多少时间...
Win7 Eclipse 搭建spark java1.8环境：WordCount helloworld例子
[学习笔记]Win7Eclipse搭建sparkjava1.8环境：WordCounthelloworld例子在eclipseoxygen上创建一个普通的java项目，然后把spark-assembly-1.6.1-hadoop2.6.0.jar这个包导进工程就ok了。只要启动start-dfs,下...
2 weekend110的mapreduce介绍及wordcount + wordcount的编写和提交集群运行 + mr程序的本地运行模式
把我们的简单运算逻辑，很方便地扩展到海量数据的场景下，分布式运算。Map作一些，数据的局部处理和打散工作。Reduce作一些，数据的汇总工作。这是之前的，weekend110的hdfs输入流之源码分析。现在，全部关闭断点。//4个泛型中，前两个是指定mapper输入数据的类型，KEYIN是输入的ke...
WordCount优化版测试小程序实现
Github地址：https://github.com/hcy6668/wordCountPro.gitPSP表格：PSP PSP阶段 预估耗时（小时） 实际耗时（小时） Planning 计划0.5 0.5 Estimate 估计任务需要多少时间0.5 0.5 Development 开发0 ...
mrunit for wordcount demo
importjava.io.IOException;importjava.util.ArrayList;importjava.util.List;importorg.apache.hadoop.io.IntWritable;importorg.apache.hadoop.io.LongWritabl...
CentOS上安装Hadoop2.7，添加数据节点，运行wordcount
安装hadoop的步骤比较繁琐，但是并不难。在CentOS上安装Hadoop2.71.安装CentOS，注：图形界面并无必要2.在CentOS里设置静态IP，手工编辑如下4个文件/etc/hosts/etc/sysconfig/netwok/etc/hostname/etc/sysconfig/ne...
hadoop 2.x 简单实现wordCount
简单实现hadoop程序，包括：hadoop2.x的实现写法importorg.apache.hadoop.conf.Configured;importorg.apache.hadoop.fs.Path;importorg.apache.hadoop.io.IntWritable;importorg...
Spark组件之Spark Streaming学习3--结合SparkSQL的使用(wordCount)
更多代码请见：https://github.com/xubo245/SparkLearning1.通过建立一个对象来获取Streaming的单例对象valsqlContext=SQLContextSingleton.getInstance(rdd.sparkContext)importsqlCont...
spark streaming 实现接收网络传输数据进行WordCount功能
packageiie.udps.example.operator.spark;importscala.Tuple2;importorg.apache.spark.SparkConf;importorg.apache.spark.api.java.function.FlatMapFunction;im...