flux-capacitor:Amazon Kinesis记录的存档,搜索和重播

时间:2024-06-10 08:32:24
【文件属性】:

文件名称:flux-capacitor:Amazon Kinesis记录的存档,搜索和重播

文件大小:22KB

文件格式:ZIP

更新时间:2024-06-10 08:32:24

stream aws-cli amazon-kinesis drill replay-operation

磁通电容器 在不使用任何昂贵数据库的情况下,该解决方案通过以下功能对进行了补充: 长期存档记录。 使当前记录和存档记录都可用于基于SQL的探索和分析。 重播已存档的记录: 它支持键值压缩,因此仅重播键的最后一条记录。 支持有限制的重播(无需重播完整档案)。 它支持过滤的重播(仅符合某些条件的重播记录)。 它支持在重播记录时进行注解,以更改消费者行为,例如强制覆盖。 通过与消费者的合作,它可以提供与重播操作同时到达流中的记录有关的最终一致性的某种定义,而无需此解决方案来调解流的流。 项目状态 正在积极开发中,供CommerceHub使用。 能够使用SQL搜索流存档和实时流。 流归档功能将紧随其后。 遵循消息重播功能。 假设和适用性约束 这主要是一个集成项目,取决于实际软件。 将使用 ,并假定已安装和配置了 。 与服务相比,这可能更像是临时工具,但归档部分必须每24小时


【文件预览】:
flux-capacitor-master
----conf()
--------defaults.conf(4KB)
----wait-until-ready(1KB)
----terminate-clusters(1KB)
----forward-local-ports(3KB)
----LICENSE(11KB)
----upload-resources(985B)
----README.md(4KB)
----resources()
--------s3()
----launch-cluster(3KB)
----.gitignore(47B)
----ssh-to-master(2KB)

网友评论