string-matching-hadoop:Hadoop 中的超长字符串匹配

时间:2024-06-21 01:51:18
【文件属性】:

文件名称:string-matching-hadoop:Hadoop 中的超长字符串匹配

文件大小:36KB

文件格式:ZIP

更新时间:2024-06-21 01:51:18

Java

Hadoop 中的超长字符串匹配 Hadoop 中的超长字符串匹配。 给定一个没有 '\n' 或任何仅包含 4 个字符的分隔符的超长字符串,包括多个 1 GB 文件中的 a、b、c 和 d。 目标是使用 Hadoop 在多个 1 GB 文件中找到给定模式的“精确”匹配。 工作分为 3 个任务。 使用单台计算机进行暴力破解。 使用 Hadoop 使用多台计算机进行暴力破解。 使用 Hadoop 从前两个任务中做得更好。 进步 完成,使用 #2 中的代码但只使用 1 个节点。 成功实施。 已支持 1GB 文件。 (极慢) 成功实施。 已支持 1GB 文件。 (比#2 快很多) ._.


【文件预览】:
string-matching-hadoop-master
----hbk()
--------stringmatcher()
----META-INF()
--------MANIFEST.MF(82B)
----README.md(745B)

网友评论