spark-streaming:Spark Streaming学习项目

时间:2021-04-09 06:38:38
【文件属性】:
文件名称:spark-streaming:Spark Streaming学习项目
文件大小:360KB
文件格式:ZIP
更新时间:2021-04-09 06:38:38
Scala 火花流 如何运行应用程序 转到Run选项卡,然后单击“ Edit Configurations... 单击+号,然后选择“ Application 选择您的Module和Main Class 打开VM Options然后复制/粘贴(并根据需要更改): -Dlog4j.configuration=file:log4j.properties -Dlogfile.name=application -Dspark.yarn.app.container.log.dir=app-logs/example4 Dlog4j.configuration对应于根目录下的log4j.properties文件。 Dlogfile.name将是您的日志文件的名称。 Dspark.yarn.app.container.log.dir对应于将保存日志文件的目录。 您的Program Arguments如下
【文件预览】:
spark-streaming-main
----.bsp()
--------sbt.json(279B)
----data()
--------invoice_samples.json(7KB)
--------Invoice-set3.json(403KB)
--------sensor_samples.json(487B)
--------Invoice-set2.json(336KB)
--------trades_samples.txt(544B)
--------Invoice-set1.json(345KB)
----log4j.properties(2KB)
----spark.conf(104B)
----src()
--------main()
----build.sbt(472B)
----.gitignore(109B)
----SampleData()
--------Invoice-set3.json(403KB)
--------Invoice-set3.parquet(26KB)
--------Invoice-set1.parquet(29KB)
--------Invoice-set2.json(336KB)
--------Invoice-set2.parquet(27KB)
--------Invoice-set1.json(345KB)
----project()
--------plugins.sbt(60B)
--------build.properties(19B)
----README.md(859B)

网友评论