文件名称:mobydq:自动化数据管道上的数据质量检查的工具
文件大小:189.3MB
文件格式:ZIP
更新时间:2024-05-24 10:05:20
big-data data-warehouse data-quality-checks data-pipeline data-quality
MobyDQ MobyDQ是用于数据工程团队的工具,可以自动对其数据管道进行数据质量检查,捕获数据质量问题并在出现异常情况时触发警报,而无论他们使用的数据源如何。 该工具的灵感来自于开发的一个内部项目,该项目旨在测量和改善其企业数据平台的数据质量。 但是,已对该开放源代码版本进行了改进,以改进其设计,简化它并消除与商业软件的技术依赖性。 入门 遵循跳过bla bla并运行数据质量指标。 完整的文档也可以在Github页面上找到: : 。 屏幕截图 Web应用程序的一些屏幕截图,让您了解它的样子。 运行开发 使用以下命令在开发模式下运行MobyDQ: $ cd mobydq $ docker-compose -f docker-compose.yml -f docker-compose.dev.yml up db graphql app nginx 运行产品 使用以下命令在生产模式