【文件属性】:
文件名称:apache-spark-3-course
文件大小:20.67MB
文件格式:ZIP
更新时间:2021-03-20 06:08:35
Scala
Apache Spark 3课程
如何运行应用程序
转到Run选项卡,然后单击“ Edit Configurations...
单击+号,然后选择“ Application
选择您的Module和Main Class
打开VM Options然后复制/粘贴(并根据需要更改):
-Dlog4j.configuration=file:log4j.properties
-Dlogfile.name=application
-Dspark.yarn.app.container.log.dir=app-logs/example4
Dlog4j.configuration对应于根目录下的log4j.properties文件。
Dlogfile.name将是您的日志文件的名称。
Dspark.yarn.app.container.log.dir对应于将保存日志文件的目录。
您的Program Ar
【文件预览】:
apache-spark-3-course-master
----project()
--------build.properties(19B)
----src()
--------test()
--------main()
----build.sbt(553B)
----log4j.properties(2KB)
----README.md(865B)
----spark.conf(56B)
----data()
--------apache_logs.txt(2.26MB)
--------flight-time.parquet(4.77MB)
--------flight-time.json(82.83MB)
--------sample_no_header.csv(2KB)
--------flight-time.csv(39.96MB)
--------sample.csv(2KB)
----.gitignore(197B)