java-spark:代码段以使用Java编写Apache Spark应用程序

时间:2021-05-02 11:52:38
【文件属性】:
文件名称:java-spark:代码段以使用Java编写Apache Spark应用程序
文件大小:116KB
文件格式:ZIP
更新时间:2021-05-02 11:52:38
java spark apache-spark hdfs java-application Java火花 以下是在Hadoop Eco System中执行应用程序的步骤 步骤1:在Hadoop分布式文件系统(HDFS)中创建目录,以使用以下命令放置输入文件以进行处理。 hadoop fs -mkdir /input/ 步骤2:使用以下命令在HDFS中复制input_data.csv文件 hadoop fs -put /root/java-spark/input/input_data.csv /input/ 步骤3:使用以下命令构建项目 cd /java-spark/ mvn clean install 步骤4:通过发出spark-submit命令执行 spark-submit --class com.khodeprasad.AppExecutor <project_locatio
【文件预览】:
java-spark-master
----input()
--------input_data.csv(427KB)
----pom.xml(2KB)
----src()
--------main()
----.gitignore(57B)
----README.md(2KB)

网友评论