project-fortis-pipeline:Project Fortis是数据摄取,分析和可视化管道

时间:2024-02-22 22:56:45
【文件属性】:

文件名称:project-fortis-pipeline:Project Fortis是数据摄取,分析和可视化管道

文件大小:3.38MB

文件格式:ZIP

更新时间:2024-02-22 22:56:45

cassandra azure spark-streaming deis kubernetes-setup

该存储库已过时,并已迁移到 。 部署富通管道 通过单击将您自己的Fortis管道部署到Azure订阅。 管道架构 完全容器化的实时火花管道关闭了Kubernetes的电源。 背景 Fortis项目是数据摄取,分析和可视化管道。 Fortis管道从公共网络和Darknet数据源收集社交媒体对话和帖子。 相关资料库 基于Spark的管道: : 仪表板界面: : Graphql服务: : Kubernetes舵图: : 文献资料 示范影片 部署先决条件 首先,您需要一个现有的Azure订阅。 您可以免费创建一个。 按照说明生成公共/专用ssh密钥对。 生成的MyKey.pub文件中的内容将用于SSh Public Key字段。 您将需要一个现有的Azure服务主体。 如果需要生成新的服务主体,则可以按照以下。 您的服务原则“ Application ID将用于“ Service Principal App ID字段,而“ Authentication Key将用于“ Service Principal App Key 。 富通监控的数据源 公共网站-Bing Redd


【文件预览】:
project-fortis-pipeline-master
----.travis.yml(145B)
----azuredeploy.parameters.json(1003B)
----docs()
--------developer()
--------upgrade()
----local-deploy.sh(8KB)
----fortis-deploy.sh(9KB)
----LICENSE(11KB)
----ops()
--------create-cluster.sh(3KB)
--------storage-ddls()
--------deis-apps()
--------install-cassandra.sh(474B)
--------install-deis.sh(2KB)
--------setup-environment.sh(3KB)
--------install-feature-service-db.sh(3KB)
--------snapshot-feature-service-db.sh(2KB)
--------create_site.py(1KB)
--------spark-namespace.yaml(133B)
--------install-spark.sh(2KB)
--------upgrade-spark.sh(1KB)
----metadata.json(247B)
----.gitignore(8B)
----README.md(4KB)
----azuredeploy.json(22KB)

网友评论