rust_hadoop_streaming:使用Rust的Hadoop流

时间:2024-05-21 06:39:51
【文件属性】:

文件名称:rust_hadoop_streaming:使用Rust的Hadoop流

文件大小:572KB

文件格式:ZIP

更新时间:2024-05-21 06:39:51

Rust

使用Rust的Hadoop流 描述 在Rust中使用Hadoop流的示例。 这是一个MapReduce程序,用于从气象记录中逐年查找全球最高温度。 这是将Hadoop Streaming用于的另一个示例。 针对Rust v1.3开发。 您可以在以下分支找到预发行版Rust的先前版本:(如果您愿意,我会感到惊讶 :grinning_face_with_smiling_eyes: ) 用法 编译映射器和精简器 $ cargo build --release (可选)检查是否一切正常 $ cat samples/sample.txt | target/release/mapper | target/release/reducer 跑Hadoop $ hadoop jar $HADOOP_INSTALL /hadoop-streaming- * .jar \ -input ncdc_data \


【文件预览】:
rust_hadoop_streaming-master
----Cargo.toml(434B)
----Cargo.lock(267B)
----ncdc_data()
--------1905.all(1.69MB)
--------1903.all(866KB)
--------1902.all(868KB)
--------1901.all(1.69MB)
--------1904.all(1.69MB)
----src()
--------bin()
----samples()
--------sample.txt(530B)
----README.md(1KB)
----.gitignore(43B)

网友评论