Java实现Hadoop下词配对Wordcount计数代码实现

时间:2020-06-13 10:58:11
【文件属性】:

文件名称:Java实现Hadoop下词配对Wordcount计数代码实现

文件大小:22.72MB

文件格式:ZIP

更新时间:2020-06-13 10:58:11

Java Hadoop Wordcount

使用Hadop实现 Mapper/Reducer,对一个文档中的每一行的单词进行词配对计数,要求去标点符号,将大写符号统一转化成为小写单词。


【文件预览】:
WordCount
----src()
--------WordCount.java(6KB)
----bin()
--------WordCount.class(2KB)
--------WordCount$Reduce.class(2KB)
--------WordCount$Map.class(3KB)
----.classpath(4KB)
----.DS_Store(6KB)
----.settings()
--------org.eclipse.jdt.core.prefs(587B)
----.project(368B)
----lib()
--------apacheds-kerberos-codec-2.0.0-M15.jar(675KB)
--------commons-math3-3.1.1.jar(1.53MB)
--------stax-api-1.0-2.jar(23KB)
--------gson-2.2.4.jar(186KB)
--------avro-1.7.4.jar(296KB)
--------commons-io-2.4.jar(181KB)
--------commons-configuration-1.6.jar(292KB)
--------hadoop-auth-2.7.3.jar(92KB)
--------commons-beanutils-1.7.0.jar(184KB)
--------hadoop-mapreduce-client-core-2.7.3.jar(1.48MB)
--------commons-compress-1.4.1.jar(236KB)
--------commons-cli-1.2.jar(40KB)
--------curator-framework-2.7.1.jar(182KB)
--------jackson-xc-1.9.13.jar(26KB)
--------curator-client-2.7.1.jar(68KB)
--------jersey-server-1.9.jar(696KB)
--------xz-1.0.jar(92KB)
--------commons-httpclient-3.1.jar(298KB)
--------commons-digester-1.8.jar(140KB)
--------protobuf-java-2.5.0.jar(521KB)
--------hadoop-annotations-2.7.3.jar(40KB)
--------slf4j-api-1.7.10.jar(31KB)
--------commons-lang-2.6.jar(278KB)
--------slf4j-log4j12-1.7.10.jar(9KB)
--------jsp-api-2.1.jar(98KB)
--------jsch-0.1.42.jar(181KB)
--------apacheds-i18n-2.0.0-M15.jar(44KB)
--------commons-logging-1.1.3.jar(61KB)
--------asm-3.2.jar(42KB)
--------jaxb-api-2.2.2.jar(103KB)
--------jetty-util-6.1.26.jar(173KB)
--------htrace-core-3.1.0-incubating.jar(1.41MB)
--------activation-1.1.jar(62KB)
--------junit-4.11.jar(239KB)
--------jaxb-impl-2.2.3-1.jar(869KB)
--------api-asn1-api-1.0.0-M20.jar(16KB)
--------api-util-1.0.0-M20.jar(78KB)
--------jettison-1.1.jar(66KB)
--------jersey-json-1.9.jar(144KB)
--------guava-11.0.2.jar(1.57MB)
--------httpclient-4.2.5.jar(423KB)
--------commons-collections-3.2.2.jar(575KB)
--------curator-recipes-2.7.1.jar(264KB)
--------log4j-1.2.17.jar(478KB)
--------mockito-all-1.8.5.jar(1.35MB)
--------hamcrest-core-1.3.jar(44KB)
--------jackson-mapper-asl-1.9.13.jar(762KB)
--------commons-net-3.1.jar(267KB)
--------netty-3.6.2.Final.jar(1.14MB)
--------zookeeper-3.4.6.jar(774KB)
--------servlet-api-2.5.jar(103KB)
--------jets3t-0.9.0.jar(527KB)
--------httpcore-4.2.5.jar(222KB)
--------xmlenc-0.52.jar(15KB)
--------jersey-core-1.9.jar(448KB)
--------jackson-core-asl-1.9.13.jar(227KB)
--------commons-codec-1.4.jar(57KB)
--------java-xmlbuilder-0.4.jar(18KB)
--------jackson-jaxrs-1.9.13.jar(18KB)
--------jsr305-3.0.0.jar(32KB)
--------snappy-java-1.0.4.1.jar(973KB)
--------commons-beanutils-core-1.8.0.jar(201KB)
--------paranamer-2.3.jar(29KB)
--------jetty-6.1.26.jar(527KB)
--------hadoop-common-2.7.3.jar(3.31MB)

网友评论