【文件属性】：
文件名称：rust_hadoop_streaming:使用Rust的Hadoop流
文件大小：572KB
文件格式：ZIP
更新时间：2021-05-01 12:53:11
Rust
使用Rust的Hadoop流
描述
在Rust中使用Hadoop流的示例。
这是一个MapReduce程序，用于从气象记录中逐年查找全球最高温度。 这是将Hadoop Streaming用于的另一个示例。
针对Rust v1.3开发。 您可以在以下分支找到预发行版Rust的先前版本：（如果您愿意，我会感到惊讶 :grinning_face_with_smiling_eyes: ）
用法
编译映射器和精简器
$ cargo build --release
（可选）检查是否一切正常
$ cat samples/sample.txt | target/release/mapper | target/release/reducer
跑Hadoop
$ hadoop jar $HADOOP_INSTALL /hadoop-streaming- * .jar \
-input ncdc_data \
【文件预览】：
rust_hadoop_streaming-master
----Cargo.toml(434B)
----Cargo.lock(267B)
----ncdc_data()
--------1905.all(1.69MB)
--------1903.all(866KB)
--------1902.all(868KB)
--------1901.all(1.69MB)
--------1904.all(1.69MB)
----src()
--------bin()
----samples()
--------sample.txt(530B)
----README.md(1KB)
----.gitignore(43B)