【文件属性】:
文件名称:伦敦:在Python和Hadoop中实现Map Reduce作业
文件大小:694KB
文件格式:ZIP
更新时间:2021-02-17 19:05:57
python nlp docker natural-language-processing hadoop
伦敦
使用Python和GraphX的Spark中的身份图。
参考
指示
创建虚拟环境
virtualenv -p python3 .env
source .env/bin/activate
pip install -r requirements.txt
构建Docker映像
./bin/build.sh slave
./bin/build.sh master
./bin/build.sh zoo
./bin/build.sh network
运行Docker容器
./bin/start.sh slave
./bin/start.sh master
./bin/start.sh zoo
使用Hadoop集群UI
访问http://0.0.0.0:8088/cluster 。
监控Docker容器
./bin/status.sh
停止Docker容器
./bin/stop.sh slave
【文件预览】:
london-master
----.gitignore(67B)
----requirements.txt(28B)
----hadoop.env(3KB)
----bin()
--------stop.sh(3KB)
--------status.sh(1KB)
--------start.sh(4KB)
--------build.sh(4KB)
----Base.Dockerfile(3KB)
----hadoop.png(238KB)
----docker-compose.yml(3KB)
----README.md(1KB)
----london.jpg(474KB)