TensorFlowOnSpark将TensorFlow程序引入Apache Spark集群。-Python开发

时间:2021-05-25 12:00:43
【文件属性】:
文件名称:TensorFlowOnSpark将TensorFlow程序引入Apache Spark集群。-Python开发
文件大小:272KB
文件格式:ZIP
更新时间:2021-05-25 12:00:43
Python Deep Learning TensorFlowOnSpark TensorFlowOnSpark为Apache Hadoop和Apache Spark集群带来了可扩展的深度学习。 通过将TensorFlow深度学习框架中的突出功能与Apache Spark和Apache Hadoop相结合,TensorFlowOnSpark TensorFlowOnSpark为Apache Hadoop和Apache Spark集群带来了可扩展的深度学习。 通过将TensorFlow深度学习框架中的突出功能与Apache Spark和Apache Hadoop相结合,TensorFlowOnSpark可以在GPU和CPU服务器集群上实现分布式深度学习。 它支持在Spark集群上进行分布式TensorFlow训练和推理,其目标是最大程度地减少在sh上运行现有TensorFlow程序所需的代码更改量
【文件预览】:
TensorFlowOnSpark-master
----setup.py(805B)
----Code-of-Conduct.md(7KB)
----.tidelift.yml(42B)
----.gitignore(175B)
----Contributing.md(2KB)
----requirements.txt(62B)
----screwdriver.yaml(2KB)
----src()
--------main()
--------test()
----LICENSE(9KB)
----doc()
--------source()
----setup.cfg(3KB)
----.github()
--------ISSUE_TEMPLATE()
----pom.xml(7KB)
----examples()
--------segmentation()
--------utils()
--------resnet()
--------mnist()
----sd.allow(38B)
----scripts()
--------install_spark.sh(444B)
--------deploy.generic()
--------spark-ec2(1KB)
--------spark_ec2.py(60KB)
--------stop_spark.sh(84B)
--------start_spark.sh(495B)
--------ec2-cloud-config.txt(95B)
----README.md(5KB)
----tests()
--------test_reservation.py(4KB)
--------test_TFCluster.py(5KB)
--------test_dfutil.py(2KB)
--------test_TFParallel.py(2KB)
--------README.md(2KB)
--------test_TFNode.py(2KB)
--------test.py(1KB)
--------test_TFSparkNode.py(8KB)
--------run_tests.sh(801B)
--------test_pipeline.py(7KB)
----lib()
--------tensorflow-hadoop-1.0-SNAPSHOT.jar(115KB)
----tox.ini(3KB)
----tensorflowonspark()
--------compat.py(1KB)
--------dfutil.py(8KB)
--------pipeline.py(25KB)
--------__init__.py(156B)
--------marker.py(480B)
--------reservation.py(9KB)
--------TFCluster.py(17KB)
--------TFManager.py(2KB)
--------TFSparkNode.py(26KB)
--------TFParallel.py(2KB)
--------gpu_info.py(3KB)
--------util.py(3KB)
--------TFNode.py(12KB)

网友评论