spark-streaming-scala-example:使用Kafka和Cassandra的Spark Streaming作业示例

时间:2024-06-02 12:59:25
【文件属性】:

文件名称:spark-streaming-scala-example:使用Kafka和Cassandra的Spark Streaming作业示例

文件大小:6KB

文件格式:ZIP

更新时间:2024-06-02 12:59:25

Scala

kafka-spark-cassandra-示例 该项目提供了Kafka / Spark Streaming / Cassandra堆栈的简单示例。 该代码是基于Kafka和Cassandra群集实现的,您可以使用以下项目在本地构建自己: 先决条件 安装SBT 对于Mac,可以使用Homebrew完成此操作: brew install sbt 用法 在Cassandra中创建表 假设您的Cassandra群集是由* ansible-kafka-cassandra-cluster *建立的,则必须使用以下命令将ssh切换到其中一个节点: vagrant ssh cassandra-node-1 /etc/dsc-cassandra-2.2.0/bin/cqlsh cassandra-node-1 然后创建一个键空间和表以保留您的数据。 CREATE KEYSPACE dev WIT


【文件预览】:
spark-streaming-scala-example-master
----src()
--------main()
----build.sbt(412B)
----.gitignore(2KB)
----README.md(3KB)

网友评论