文件名称:kitab-元数据自动化:KITAB元数据自动化
文件大小:9.03MB
文件格式:ZIP
更新时间:2024-03-06 00:10:26
HTML
kitab元数据自动化 KITAB元数据自动化 Shell脚本 删除的语料库(以防万一)所做的任何本地更改ls | xargs -P10 -I{} git -C {} reset --hard ls | xargs -P10 -I{} git -C {} reset --hard 提取所有存储库,以确保根据主体语料库的最新版本生成元数据ls | xargs -P10 -I{} git -C {} fetch origin ls | xargs -P10 -I{} git -C {} fetch origin 生成元数据python脚本python3 generate-OpenITI-metadata.py 将生成的文件(输出)推送到仓库(例如维护) git commit -a -m 'output generated' git push Cron Job 在每个星期日的4:00
【文件预览】:
kitab-metadata-automation-master
----.gitignore(95B)
----output()
--------OpenITI_RELEASE_git_RELEASE_data_split_files.json(452B)
--------test_header_metadata.json(258B)
--------OpenITI_Github_clone_header_metadata.json(9.25MB)
--------OpenITI_Github_clone_metadata_complete.yml(29.33MB)
--------OpenITI_RELEASE_git_RELEASE_data_header_metadata.json(4.12MB)
--------test_metadata_light.json(35KB)
--------OpenITI_Github_clone_split_files.json(452B)
--------._home_admin-kitab_Documents_OpenITI_RELEASE_git_working_dir_AH_repos_metadata_light.csv.swp(72KB)
--------OpenITI_Github_clone_metadata_light.csv(8.52MB)
--------OpenITI_Github_clone_metadata_light.json(13.22MB)
--------test_split_files.json(2B)
--------OpenITI_RELEASE_git_RELEASE_data_metadata_light.json(9.5MB)
--------OpenITI_RELEASE_git_RELEASE_data_metadata_complete.yml(21.98MB)
--------test_metadata_complete.yml(66KB)
--------test_metadata_light.csv(14KB)
--------OpenITI_RELEASE_git_RELEASE_data_metadata_light.csv(5.23MB)
----.run_wNoor.sh.swp(408KB)
----utility()
--------issues_test.tsv(35KB)
--------zfunc.py(4KB)
--------config_corpus_w_Noorlib.py(2KB)
--------config_RELEASE.py(867B)
--------betaCode.py(20KB)
--------config_RELEASE_2019_2.py(2KB)
--------config-automated-do-not-remove-or-change_wNoor.py(2KB)
--------config_RELEASE_2019_1.py(807B)
--------__init__.py(0B)
--------config_corpus.py(2KB)
--------config_test.py(2KB)
--------test.tsv(38KB)
--------config_AH_repos.py(2KB)
--------config.py(2KB)
--------get_issues.py(5KB)
--------__pycache__()
--------ID_TAGS.txt(912KB)
--------uri.py(78KB)
--------config-automated-do-not-remove-or-change.py(2KB)
--------config-automated-do-not-remove-or-change_old.py(2KB)
--------srt()
----generate-metadata.py(51KB)
----README.md(658B)
----run.sh(1KB)
----output.log(1.82MB)
----ar_char_count.py(2KB)