hio:与 Hadoop HDFS 交互的命令行实用程序

时间:2024-06-18 20:15:27
【文件属性】:

文件名称:hio:与 Hadoop HDFS 交互的命令行实用程序

文件大小:28KB

文件格式:ZIP

更新时间:2024-06-18 20:15:27

Shell

o 与 Hadoop HDFS 交互的命令行实用程序。 想想:Hadoop I/O CLI。 “hio”是 Hadoop I/O 的简写,因为在 CLI 上输入越少越好! 这也是对我们在幕后使用的库的一种呼喊。 目录 参考 哲学及其运作方式 我们努力尽可能地模仿现有的 Unix CLI 工具,例如在 hio 命令及其各自参数的名称和语义方面。 话虽如此,在某些情况下,由于技术原因或上游限制(例如 HDFS),我们可能无法实现这一目标。 Hio 基于hadoopio ,这意味着 hio 命令通常只需要恒定内存,即即使您处理 1 TB 的 Avro 数据,您的机器基本上也不会耗尽内存。 用法 概述 安装后,主要入口点是hio可执行文件: $ hio hio: Command line tools to interact with Hadoop HDFS and other su


【文件预览】:
hio-master
----.gitignore(132B)
----project()
--------plugins.sbt(897B)
--------build.properties(19B)
--------assembly.sbt(57B)
----assembly.sbt(817B)
----src()
--------main()
--------universal()
----sbt(18KB)
----LICENSE(11KB)
----CHANGELOG.md(41B)
----sh()
--------common.sh(1KB)
----README.md(7KB)
----version.sbt(41B)
----build.sbt(10KB)

网友评论