文件名称:空气流量
文件大小:114KB
文件格式:ZIP
更新时间:2024-03-01 02:24:31
airflow hacktoberfest Python
澳大利亚地球科学DEA气流DAG存储库 部署工作流程 该存储库包含master和develop两个分支。 master分支需要Pull Requests和代码审查才能将代码合并到其中。 它会自动部署到。 develop分支直接接受推送或通过“拉取请求”接受推送,并自动部署到。 我们对这种策略不满意,并且正在寻找一种替代方案,该方案不会让我们偶然地在多个位置部署和无意间运行代码,但是还没有提出任何建议。 使用Docker开发 如果您有Docker,到目前为止,最简单的开发设置是使用Docker Compose。 首先,初始化一些环境变量: python -c ' from cryptography.fernet import Fernet; print("FERNET_KEY=" + Fernet.generate_key().decode()) ' > .env echo UID
【文件预览】:
dea-airflow-master
----.gitignore(3KB)
----requirements.txt(16B)
----assets()
--------S2_aoi.csv(11KB)
----.pre-commit-config.yaml(543B)
----dags()
--------k8s_index_ls_c3.py(4KB)
--------nci_dataset_ingest.py(4KB)
--------nci_wofs.py(4KB)
--------k8s_wagl_nrt_ancillary.py(5KB)
--------backup_odc_slack.py(0B)
--------k8s_index_fc_wo_c3_backlog.py(3KB)
--------lpgs_qsub_jobs_report.py(1KB)
--------templates()
--------k8s_wagl_nrt_filter.py(4KB)
--------k8s_thredds_orchestrate.py(4KB)
--------collection3()
--------k8s_nci_db_incremental_sync.py(5KB)
--------k8s_s3_orchestrate.py(4KB)
--------sentinel_2_nrt()
--------nci_s2_upload_s3.py(4KB)
--------nci_db_incremental_csvs.py(5KB)
--------k8s_nci_db_sync.py(6KB)
--------github_metrics.py(7KB)
--------load_pbs_job_telemetry_into_influxdb.py(0B)
--------nci_fractional_cover.py(4KB)
--------nci_cog_and_upload.py(10KB)
--------utility()
--------nci_c3_download_derivs.py(4KB)
--------nci_common.py(828B)
--------subdags()
--------aws_check_dead_queues.py(2KB)
--------nci_ard.py(4KB)
--------k8s_wagl_nrt.py(11KB)
--------nci_build_dea_module.py(2KB)
--------nci_build_env_module.py(1KB)
--------k8s_dea_access_dataloader.py(5KB)
--------k8s_index_fc_wo_c3.py(3KB)
--------nci_db_backup.py(4KB)
--------nci_build_dea_unstable_module.py(2KB)
--------nci_dataset_sync.py(3KB)
--------infra()
--------nci_index_s2ard_simple.py(3KB)
--------k8s_index_s2_s3.py(3KB)
--------k8s_db_sync.py(6KB)
--------nci_c3_upload_s3.py(7KB)
--------k8s_nci_db_update_summary.py(3KB)
--------testdag.py(2KB)
----docker-compose.yml(3KB)
----.github()
--------workflows()
----scripts()
--------save_github_stats.py(2KB)
--------odcdb-to-s3-urls.py(994B)
--------compare-lists.py(664B)
--------upload_s2.py(5KB)
--------c3_to_s3_rolling.py(22KB)
----README.md(2KB)
----unittests.cfg(2KB)
----.pylintrc(3KB)
----plugins()
--------dea_airflow_common()
--------operators()
--------sensors()
----import_hook.py(90B)