Spark小文件异步合并工具

时间:2023-10-16 11:12:41
【文件属性】:

文件名称:Spark小文件异步合并工具

文件大小:10KB

文件格式:ZIP

更新时间:2023-10-16 11:12:41

小文件合并 spark 大数据 hdfs

java写的一个spark小文件合并工具,支持text、parquet、orc等格式,分享给有需要的人


【文件预览】:
smallFileMerge
----src()
--------test()
--------main()
----.idea()
--------misc.xml(513B)
--------compiler.xml(535B)
--------workspace.xml(4KB)
--------encodings.xml(186B)
--------.gitignore(176B)
--------jarRepositories.xml(1KB)
----pom.xml(3KB)

网友评论