文件名称:spark-streaming-scala-example:使用Kafka和Cassandra的Spark Streaming作业示例
文件大小:6KB
文件格式:ZIP
更新时间:2024-06-02 12:59:25
Scala
kafka-spark-cassandra-示例 该项目提供了Kafka / Spark Streaming / Cassandra堆栈的简单示例。 该代码是基于Kafka和Cassandra群集实现的,您可以使用以下项目在本地构建自己: 先决条件 安装SBT 对于Mac,可以使用Homebrew完成此操作: brew install sbt 用法 在Cassandra中创建表 假设您的Cassandra群集是由* ansible-kafka-cassandra-cluster *建立的,则必须使用以下命令将ssh切换到其中一个节点: vagrant ssh cassandra-node-1 /etc/dsc-cassandra-2.2.0/bin/cqlsh cassandra-node-1 然后创建一个键空间和表以保留您的数据。 CREATE KEYSPACE dev WIT
【文件预览】:
spark-streaming-scala-example-master
----src()
--------main()
----build.sbt(412B)
----.gitignore(2KB)
----README.md(3KB)