【文件属性】:
文件名称:spark-streaming-scala-example:使用Kafka和Cassandra的Spark Streaming作业示例
文件大小:6KB
文件格式:ZIP
更新时间:2021-05-13 19:12:45
Scala
kafka-spark-cassandra-示例
该项目提供了Kafka / Spark Streaming / Cassandra堆栈的简单示例。 该代码是基于Kafka和Cassandra群集实现的,您可以使用以下项目在本地构建自己:
先决条件
安装SBT
对于Mac,可以使用Homebrew完成此操作:
brew install sbt
用法
在Cassandra中创建表
假设您的Cassandra群集是由* ansible-kafka-cassandra-cluster *建立的,则必须使用以下命令将ssh切换到其中一个节点:
vagrant ssh cassandra-node-1
/etc/dsc-cassandra-2.2.0/bin/cqlsh cassandra-node-1
然后创建一个键空间和表以保留您的数据。
CREATE KEYSPACE dev
WIT
【文件预览】:
spark-streaming-scala-example-master
----src()
--------main()
----build.sbt(412B)
----.gitignore(2KB)
----README.md(3KB)