bso-data-pipeline:它包含用于将BSO输入数据转换为CIDOCRDF的管道

时间:2024-05-31 15:15:59
【文件属性】:

文件名称:bso-data-pipeline:它包含用于将BSO输入数据转换为CIDOCRDF的管道

文件大小:246KB

文件格式:ZIP

更新时间:2024-05-31 15:15:59

HTML

史威兹在线 关于 它包含用于将BSO输入数据转换为CIDOC / RDF的管道 如何使用 先决条件: 包括Docker Compose) 复制并(如果需要)编辑.env.example cp .env.example .env 使用运行项目 docker-compose up -d 初始化 要在克隆时包括 ,请使用以下命令进行克隆: git clone --recurse-submodules git@github.com:swiss-art-research-net/bso-data-pipeline.git 要下载源数据,请创建一个,并将其以及您的用户名添加到.env文件中。 通过运行sh downloadSources.sh源文件 通过sh run.sh运行ETL管道 这将执行任务文件中定义的所有任务 任务 要与任务运行器进行交互,请连接到作业容器(容器的名称取决于您对项


【文件预览】:
bso-data-pipeline-main
----.gitignore(280B)
----docker-compose.researchspace.yml(1KB)
----.env.example(397B)
----data()
--------.gitkeep(1B)
--------xml()
--------ttl()
--------manifests()
--------source()
----experiments()
--------retrieve-gnd-data.ipynb(3KB)
--------generate-zbz-example-xml.ipynb(5KB)
--------parse-dates.ipynb(4KB)
--------output()
--------cache-iiif-manifests.ipynb(3KB)
--------retrieve-wd-data.ipynb(3KB)
--------nb-make-individual-records.ipynb(14KB)
--------json-to-xml.ipynb(13KB)
--------edtf-to-cidoc.ipynb(10KB)
--------generateConstructQueriesFromField.ipynb(6KB)
----services()
--------proxy()
--------jobs()
--------researchspace()
--------researchplatform()
----docker-compose.local.yml(216B)
----docker-compose.yml(1KB)
----.gitmodules(149B)
----scripts()
--------getFileContentsFromGit.py(2KB)
--------generate-materialise-query-from-field-definitions.py(2KB)
--------extract-gnd-data.py(1KB)
--------helpers()
--------Taskfile.yml(6KB)
--------queries()
--------cache-iiif-manifests.py(1KB)
--------extract-wd-data.py(2KB)
--------prepare-xml-records-nb.py(11KB)
--------prepare-xml-records-zbz.py(9KB)
--------performMapping.sh(1KB)
----README.md(3KB)
----run.sh(3KB)
----docker-compose.3m.yml(418B)
----downloadSources.sh(2KB)
----mapping()
--------example-zbz.xml(37KB)
--------schemas()
--------testing-zbz.xml(9KB)
--------example-nb.xml(56KB)
--------generator-policy.xml(6KB)
--------mappings-zbz.x3ml(201KB)
--------mappings-nb.x3ml(89KB)
----docker-compose.prod.yml(441B)

网友评论