MongoDBHadoopStockInfo:这个项目实现了 Sharding MongoDB config 和 Connected MongoDB with Hadoop

时间:2024-07-02 11:52:56
【文件属性】:

文件名称:MongoDBHadoopStockInfo:这个项目实现了 Sharding MongoDB config 和 Connected MongoDB with Hadoop

文件大小:84KB

文件格式:ZIP

更新时间:2024-07-02 11:52:56

Java

该项目使用分布式分片MongoDB作为数据存储和Hadoop Map Reduce作为计算框架。 ####系统遵循以下程序: 分片 MongoDB 设计(保证可用性、负载平衡) MongoDB 存储和设置主服务器和其他服务器地址列表为 MongoClientsOptions Hadoop Map-Reduce 与 MongoDB 连接器(使用 BSON/MongoUpdateWritable 格式覆盖 Mapper 和 Reducer 类) ##Sharded MongoDB 配置(这部分无法在代码中显示,所以我只在这里展示。) 下图是我设置三个不同端口的虚拟机来模拟真实分片模式的架构(实际需要15台机器) ![alt 标签] ( ) 以下过程是我在远程三个 VM 上配置 MongoDB 的方法。 ###1。 用 mongos 、config 、 shard1 、sha


【文件预览】:
MongoDBHadoopStockInfo-master
----.gitignore(15B)
----src()
--------com()
----symbolList(37KB)
----.classpath(869B)
----.DS_Store(6KB)
----.settings()
--------org.eclipse.m2e.core.prefs(86B)
--------org.jboss.ide.eclipse.as.core.prefs(93B)
--------org.eclipse.jdt.core.prefs(652B)
----pom.xml(2KB)
----README.md(5KB)
----.project(546B)
----lib()
--------YahooFinanceAPI-1.3.0.jar(77KB)
----Sharded MongoDB.png(28KB)

网友评论