java连接sqoop源码-movie-recommendation-system:电影推荐系统

时间:2024-07-05 10:48:33
【文件属性】:

文件名称:java连接sqoop源码-movie-recommendation-system:电影推荐系统

文件大小:31KB

文件格式:ZIP

更新时间:2024-07-05 10:48:33

系统开源

java连接sqoop源码电影推荐系统基于项目的协作过滤使用mapreduce 从 grouplens 网站下载数据集。 我研究了数据集“ml-latest-small”,它是一个大约 1MB 的 zip 文件。 该项目应该适用于大型数据集“ml-latest”,它是大约 235MB 的 zip 文件。 提取“ml-latest-small.zip”后,您应该得到以下文件:links.csv movies.csv ratings.csv tags.csv readme.txt 源代码是java编写的,使用JDBC连接数据库。 该项目使用 mysql 数据库和 sqoop 工具(将 hdfs 数据导出到 mysql)以及 mapreduce。 按照以下步骤运行应用程序: 1:将文件 ratings.csv 复制到 HDFS 目录。 该文件是 mapreduce job_1 的输入。 您可以提供任何目录结构,但相应地修改 MRSDriver.java 文件中 mapreduce job_1 的“inputPath”变量。 我已将文件放在:“hdfs://localhost:54310/us


【文件预览】:
movie-recommendation-system-master
----.project(436B)
----README.md~(4KB)
----src()
--------defaultPackage()
----README.md(4KB)
----.classpath(20KB)
----bin()
--------defaultPackage()

网友评论