ConveyorBelt:将Azure诊断数据铲除到ElasticSearch

时间:2024-05-31 18:08:03
【文件属性】:

文件名称:ConveyorBelt:将Azure诊断数据铲除到ElasticSearch

文件大小:612KB

文件格式:ZIP

更新时间:2024-05-31 18:08:03

C#

输送带 水平可扩展的无头群集,可将Azure诊断数据(和其他自定义数据)转换为ElasticSearch 介绍 Elasticsearch和Kibana的混合物非常强大,可以分析和可视化您的数据-如果您在知道我的意思之前使用过一次。 使用其文档REST API,将少量数据复制到ElasticSearch ES很简单。 对于适量的数据,它可以是相同的,但是会花费更长的时间。 但是对于大量操作,您希望并行化此操作并使用多个进程来执行此操作,这需要进行调度。 另一方面,编写代码以转换稍有不同的模式的数据可能很繁琐。 这些是ConveyorBelt试图解决的确切问题。 好消息是,如果需要更多节点,只需将工作程序实例添加到您的Azure工作人员角色部署中-无需进行更多配置,设置或麻烦。 概念 在开始之前,最好先了解一些我们经常提到的内容: 来源:一个日期来源,其中包含需要铲到Elasticsea


网友评论