datausa_etl:适用于各种美国数据集的ETL脚本

时间:2024-06-10 08:11:44
【文件属性】:

文件名称:datausa_etl:适用于各种美国数据集的ETL脚本

文件大小:14KB

文件格式:ZIP

更新时间:2024-06-10 08:11:44

Python

DataUSA ETL库 适用于各种美国数据集的ETL脚本。 从原始数据中获取,操作它们,最后将它们摄取到postgreSQL数据库中。 所需的库:postgres postgis 步骤0:设置环境变量 export datausa_etl_user=alexandersimoes export datausa_etl_db=datausa export datausa_etl_api=http://localhost:5000 第1步:创建Postgres数据库 createdb -O $datausa_etl_user -E utf8 $datausa_etl_db 第2步:运行脚本以年份作为参数填充地理位置 bash acs_geo/geos_to_psql.sh 2013 步骤3:通过SQL脚本计算地理名称/范围 psql -U $datausa_etl_user -d


【文件预览】:
datausa_etl-master
----.gitignore(30B)
----acs_data()
--------acs_all.py(340B)
--------helpers()
--------create_tbls.sql(41KB)
--------acs.py(3KB)
--------acs_all.sh(371B)
----requirements.txt(88B)
----acs_geo()
--------geos_to_psql.sh(2KB)
--------summary_levels.txt(152B)
--------insert_geo_names.sql(3KB)
--------insert_geo_containment.sql(4KB)
----README.md(1KB)

网友评论