aws-batch-example:AWS批处理的示例使用

时间:2021-01-30 17:43:28
【文件属性】:
文件名称:aws-batch-example:AWS批处理的示例使用
文件大小:72KB
文件格式:ZIP
更新时间:2021-01-30 17:43:28
python docker aws workflow lambda AWS Batch示例 目的 这是用于部署示例批处理工作流的Amazon Batch Service的示例。 该示例旨在成为可部署的工件POC。 本示例将使用CloudFormation,AWS Lambda,Docker,AWS Batch和S3存储桶触发器。 在此示例中创建的批处理工作流不是如何进行批处理的处方,而只是一个示例。 在此示例中,工作流的所有作业都被立即调度。 这样,您的调度程序可以传递环境变量或更改每个作业的命令,以指示作业在何处存储数据以及在何处期望数据。 另一种方法是让处理作业安排其依赖作业,指示那些依赖作业在何处查找其生成的数据。 可以采用多种方式使用批处理,这只是一个示例。 为什么我认为批处理很酷 AWS Batch可以为您管理基础架构,并根据队列中的作业数量进行放大或缩小。 将您的Compute Environment实例类型设置为“最佳”时,AWS Batch也能够垂直扩展。 AWS Batch可以为您自动竞价实例。 您的作业队列可以由多个计算环境处理。 您可以为竞价型实例计算环境设置首选项 当第一个计算环境不可用或工作过度时,下一个可以接管该工
【文件预览】:
aws-batch-example-master
----lambda()
--------trigger()
----Batch-POC-Diagram.png(36KB)
----LICENSE(1KB)
----docker()
--------batchpocprocess()
--------batchpocstart()
----.gitignore(26B)
----README.md(10KB)
----scripts()
--------env_prep.sh(4KB)
--------validate_template.sh(76B)
----cloudformation()
--------batch()

网友评论