odata2avro:将 OpenData XML 从 Microsoft MarketPlace 转换为 Apache Avro 文件的命令行工具

时间:2024-07-06 21:02:29
【文件属性】:

文件名称:odata2avro:将 OpenData XML 从 Microsoft MarketPlace 转换为 Apache Avro 文件的命令行工具

文件大小:8KB

文件格式:ZIP

更新时间:2024-07-06 21:02:29

Python

odata2avro odata2avro 是一个 Python 命令行工具,用于自动将 OData 数据集转换为 Avro。 将odata2avro与标准 Hadoop 工具一起使用,将 OData 数据从到 Hadoop 应该非常简单。 用法: $ odata2avro ODATA_XML AVRO_SCHEMA AVRO_FILE 此命令从ODATA_XML读取数据并创建两个文件: AVRO_SCHEMA和AVRO_FILE 。 Avro 架构采用 JSON 格式。 示例:将数据从 Azure DataMarket 摄取到 Hive/Impala # Download OData data in XML format $ curl 'https://api.datamarket.azure.com/opendata.rdw/VRTG.Open.Data/v1/KENT_VR


【文件预览】:
odata2avro-master
----setup.py(1KB)
----.gitignore(2KB)
----requirements.txt(23B)
----.travis.yml(143B)
----MANIFEST.in(32B)
----LICENSE(1KB)
----README.md(2KB)
----tests()
--------data.xml(2KB)
--------test_schema.py(2KB)
----odata2avro()
--------__init__.py(0B)
--------main.py(4KB)
----tox.ini(236B)

网友评论