文件名称:wopr
文件大小:168KB
文件格式:ZIP
更新时间:2024-03-05 09:04:22
Python
WOPR数据工程项目 CS 410/510数据工程项目,该项目创建了用于跟踪总线gps面包屑的数据管道。 设置 将仓库克隆到新目录。 使用以下命令安装python要求: pip3 install -r requirements.txt 创建以下格式的融合配置文件librdkafka.config : { "bootstrap.servers" : "{{server}}" , "security.protocol" : "SASL_SSL" , "sasl.mechanisms" : "PLAIN" , "sasl.username" : "{{username}}" , "sasl.password" : "{{password}}" } 并为您的Confluent Kafka服务填写服务器信息。 将文件放置在可访问的位置。 更新pro
【文件预览】:
wopr-main
----.gitignore(2KB)
----valdata.py(2KB)
----consumer.py(2KB)
----requirements.txt(60B)
----utilities.py(1KB)
----transform.py(719B)
----hdop.py(1KB)
----log()
--------download_log.txt(8KB)
----set_datatypes.py(3KB)
----producer.py(3KB)
----empty.py(3KB)
----README.md(2KB)
----gen_stats.py(4KB)
----verify_download.py(777B)
----convert_datetime.py(1KB)
----stats()
--------min_max_values.txt(5KB)
--------vehicle_IDs.csv(633B)
--------data_stats.txt(28KB)
--------empty_str_stats.csv(1KB)
----lists.py(1KB)
----main.py(580B)
----test()
--------bc_stats_0204.csv(800B)
--------bc_stats_0205.csv(143B)
--------2021_02_06.json(2.39MB)
--------bc_stats.csv(1KB)
--------hdop_data.csv(833B)
--------bc_stats_0208.csv(883B)
----download_json.py(593B)