文件名称:rabbit-index-ingest:处理rabbitMQ事件并向Elasticsearch添加文档
文件大小:91KB
文件格式:ZIP
更新时间:2024-03-03 17:53:09
Python
兔子索引器
此代码连接到RabbitMQ交换并读取由存款服务器创建的消息。 这些消息将进行解析,处理程序并进行初始化以处理事件。 将DEPOSIT和REMOVE操作发送到ceda-fbi索引,并将MKDIR,RMDIR,SYMLINK和00README操作发送到ceda ceda-dirs索引。 这是为了确保索引的内容与用于archive_browser的存档匹配。
下图是该库如何处理来自存款服务器的事件的示意图。
正在安装
为了易于设置正确的环境,此代码库应作为软件包安装。 可以使用以下方法完成:
克隆环境git clone https://github.com/cedadev/rabbit-index-ingest
安装软件包pip install -e
【文件预览】:
rabbit-index-ingest-master
----rabbit_indexer()
--------conf()
--------utils()
--------scripts()
--------queue_handler()
--------LICENSE(2KB)
--------index_updaters()
----environment.yml(2KB)
----setup.py(3KB)
----README.md(1KB)
----docs()
--------images()
----tests()
--------__init__.py(265B)
--------test_path_tools.py(3KB)
--------test_tree()
--------test_directory_updates.py(4KB)
--------moles_mapping_file.json(269B)
----.gitignore(68B)