java-spark:代码段以使用Java编写Apache Spark应用程序

时间:2024-05-22 05:39:18
【文件属性】:

文件名称:java-spark:代码段以使用Java编写Apache Spark应用程序

文件大小:116KB

文件格式:ZIP

更新时间:2024-05-22 05:39:18

java spark apache-spark hdfs java-application

Java火花 以下是在Hadoop Eco System中执行应用程序的步骤 步骤1:在Hadoop分布式文件系统(HDFS)中创建目录,以使用以下命令放置输入文件以进行处理。 hadoop fs -mkdir /input/ 步骤2:使用以下命令在HDFS中复制input_data.csv文件 hadoop fs -put /root/java-spark/input/input_data.csv /input/ 步骤3:使用以下命令构建项目 cd /java-spark/ mvn clean install 步骤4:通过发出spark-submit命令执行 spark-submit --class com.khodeprasad.AppExecutor <project_locatio


【文件预览】:
java-spark-master
----input()
--------input_data.csv(427KB)
----pom.xml(2KB)
----src()
--------main()
----.gitignore(57B)
----README.md(2KB)

网友评论