rabbit-index-ingest:处理rabbitMQ事件并向Elasticsearch添加文档

时间:2024-03-03 17:53:09
【文件属性】:

文件名称:rabbit-index-ingest:处理rabbitMQ事件并向Elasticsearch添加文档

文件大小:91KB

文件格式:ZIP

更新时间:2024-03-03 17:53:09

Python

兔子索引器 此代码连接到RabbitMQ交换并读取由存款服务器创建的消息。 这些消息将进行解析,处理程序并进行初始化以处理事件。 将DEPOSIT和REMOVE操作发送到ceda-fbi索引,并将MKDIR,RMDIR,SYMLINK和00README操作发送到ceda ceda-dirs索引。 这是为了确保索引的内容与用于archive_browser的存档匹配。 下图是该库如何处理来自存款服务器的事件的示意图。 正在安装 为了易于设置正确的环境,此代码库应作为软件包安装。 可以使用以下方法完成: 克隆环境git clone https://github.com/cedadev/rabbit-index-ingest 安装软件包pip install -e 建立 该代码库需要一个配置文件来设置Rabbit服务器。 这可以在rabbit_inde


【文件预览】:
rabbit-index-ingest-master
----rabbit_indexer()
--------conf()
--------utils()
--------scripts()
--------queue_handler()
--------LICENSE(2KB)
--------index_updaters()
----environment.yml(2KB)
----setup.py(3KB)
----README.md(1KB)
----docs()
--------images()
----tests()
--------__init__.py(265B)
--------test_path_tools.py(3KB)
--------test_tree()
--------test_directory_updates.py(4KB)
--------moles_mapping_file.json(269B)
----.gitignore(68B)

网友评论