Hadoop-2.6.0-on-USC-HPCC-Clusters

时间:2021-06-09 17:25:17
【文件属性】:
文件名称:Hadoop-2.6.0-on-USC-HPCC-Clusters
文件大小:36KB
文件格式:ZIP
更新时间:2021-06-09 17:25:17
Shell Hadoop-2.6.0-on-USC-HPCC-Clusters 该项目旨在支持 USC HPCC 集群上的 Hadoop-2.6.0。 HPCC 提供的当前 Hadoop 版本是 Hadoop-1.1.2,它依赖于 /scratch 文件系统而不是 HDFS。 在这种情况下,HPC 用户通过将他们的文件放入 /scratch 来执行他们的 Hadoop 程序,然后 Hadoop 在运行 map-reduce 时将访问 /scratch 中的数据文件。 这里展示了 Hadoop-2.6.0 如何在 HPCC 集群上成功启动 HDFS 和 YARN。 我们提供了两个不同的教程作为运行 Hadoop 的选项。 **互动模式** 将 hadoop 存储库复制到您的工作目录。 git clone https://github.com/JackMing/Hadoop-2.6.0-on-
【文件预览】:
Hadoop-2.6.0-on-USC-HPCC-Clusters-master
----setup-and-start-hadoop-on-hpcc(5KB)
----hadoop-example.pbs(1KB)
----README.md(3KB)
----setup.sh(485B)
----conf()
--------configuration.xsl(1KB)
--------kms-acls.xml(3KB)
--------hadoop-policy.xml(9KB)
--------mapred-queues.xml.template(4KB)
--------yarn-env.cmd(2KB)
--------kms-log4j.properties(2KB)
--------hdfs-site.xml(1KB)
--------slaves(10B)
--------kms-env.sh(1KB)
--------hadoop-env.cmd(4KB)
--------hadoop-metrics2.properties(3KB)
--------container-executor.cfg(318B)
--------kms-site.xml(5KB)
--------mapred-site.xml.template(758B)
--------httpfs-signature.secret(21B)
--------core-site.xml(363B)
--------yarn-site.xml(902B)
--------httpfs-env.sh(1KB)
--------yarn-env.sh(4KB)
--------log4j.properties(11KB)
--------ssl-client.xml.example(2KB)
--------mapred-site.xml(1KB)
--------mapred-env.cmd(938B)
--------httpfs-site.xml(620B)
--------mapred-env.sh(1KB)
--------hadoop-env.sh(4KB)
--------ssl-server.xml.example(2KB)
--------httpfs-log4j.properties(2KB)
--------hadoop-metrics.properties(2KB)
--------capacity-scheduler.xml(4KB)

网友评论