问题解决:使用docker中的jupyter时,挂载本地文件夹后,在jupyter中无法进行文件新建、修改等操作,报错“permission denied”

时间:2024-04-03 12:15:38

问题描述:

  • 使用的docker镜像是 jupyter/datascience-notebook,里面预装了常用的机器学习模块:pandas, matplotlib, scipy, seaborn, scikit-learn, scikit-image, sympy, cython, patsy, statsmodel, cloudpickle, dill, numba, bokeh;
  • 非jupyter官方镜像源,此docker容器的普通用户jovyan密码未公开,不能使用sudo命令进行提权
  • 参考文档
  • web方式启动jupyter: docker run -p 8888:8888 jupyter/datascience-notebook
  • 命令行方式启动并进入容器: docker run -it jupyter/datascience-notebook bash
  • 基于Docker镜像的开发环境搭建:配置本地代码所在目录映射到容器内部:sudo docker run -it -p 8888:8888 -v /home/cuc/code:/home/jovyan/work jupyter/datascience-notebook
  • 打开jupyter notebook后,发现无法在挂载的目录下创建文件夹或文件
  • 问题解决:使用docker中的jupyter时,挂载本地文件夹后,在jupyter中无法进行文件新建、修改等操作,报错“permission denied”问题解决:使用docker中的jupyter时,挂载本地文件夹后,在jupyter中无法进行文件新建、修改等操作,报错“permission denied”

问题解决:

本地共享目录的权限情况如下:

[email protected]:~/code $ ll -ls
total 44
 4 drwxrwxr-x 4 cuc  cuc   4096 1月   7 17:01 ./
 4 drwxrwxr-x 6 cuc  cuc   4096 12月 18 14:39 ../
 0 -rw-rw-r-- 1 cuc  cuc      0 1月   7 17:01 a.txt
24 -rw-r--r-- 1 root root 24326 12月 27 10:53 error.log
 4 drwxrwxr-x 6 cuc  cuc   4096 12月 26 20:24 test/
 4 -rw-rw-r-- 1 cuc  cuc    729 12月  6 14:54 README.md
 4 drwxrwxr-x 3 cuc  cuc   4096 12月  6 14:54 test2/

进入docker 容器中进行查看

[email protected]:~/work$ ll -ls
total 44
 4 drwxrwxr-x 5   1001  1001  4096 Jan  7 09:01 ./
 4 drwsrwsr-x 1 jovyan users  4096 Dec 17 22:03 ../
 0 -rw-rw-r-- 1   1001  1001     0 Jan  7 09:01 a.txt
24 -rw-r--r-- 1 root   root  24326 Dec 27 02:53 error.log
 4 drwxrwxr-x 6   1001  1001  4096 Dec 26 12:24 test/
 4 -rw-rw-r-- 1   1001  1001   729 Dec  6 06:54 README.md
 4 drwxrwxr-x 3   1001  1001  4096 Dec  6 06:54 test2/

可以看到,文件的属主不一致

查看docker中的用户信息

[email protected]:~/work$ cat /etc/passwd
root:x:0:0:root:/root:/bin/bash
daemon:x:1:1:daemon:/usr/sbin:/usr/sbin/nologin
bin:x:2:2:bin:/bin:/usr/sbin/nologin
sys:x:3:3:sys:/dev:/usr/sbin/nologin
sync:x:4:65534:sync:/bin:/bin/sync
games:x:5:60:games:/usr/games:/usr/sbin/nologin
man:x:6:12:man:/var/cache/man:/usr/sbin/nologin
lp:x:7:7:lp:/var/spool/lpd:/usr/sbin/nologin
mail:x:8:8:mail:/var/mail:/usr/sbin/nologin
news:x:9:9:news:/var/spool/news:/usr/sbin/nologin
uucp:x:10:10:uucp:/var/spool/uucp:/usr/sbin/nologin
proxy:x:13:13:proxy:/bin:/usr/sbin/nologin
www-data:x:33:33:www-data:/var/www:/usr/sbin/nologin
backup:x:34:34:backup:/var/backups:/usr/sbin/nologin
list:x:38:38:Mailing List Manager:/var/list:/usr/sbin/nologin
irc:x:39:39:ircd:/var/run/ircd:/usr/sbin/nologin
gnats:x:41:41:Gnats Bug-Reporting System (admin):/var/lib/gnats:/usr/sbin/nologin
nobody:x:65534:65534:nobody:/nonexistent:/usr/sbin/nologin
_apt:x:100:65534::/nonexistent:/usr/sbin/nologin
jovyan:x:1000:100::/home/jovyan:/bin/bash

docker 中用户 jovyan 的 UID 是1000 ,但是挂载的目录的属主 UID 是 1001 ,导致 jovyan用户无权限进行文件的操作

解决的方法非常清晰:将UID修改一致即可 -> 要不就修改本地目录文件的属主,要不就修改docker的用户UID

本地使用 chown 指令修改本地目录的属主UID
sudo chown -R 1000.1000 code/

重新挂载到docker,经测试,jupyter可以成功创建文件

问题原因:

本地系统是有两个用户的,用户1的UID是1000,用户2(cuc)的UID是1001。由于本地目录是由cuc用户创建的,挂载到docker中时,文件属主不会更改,所以在docker中查看文件信息时,文件属主是1001,但是在docker中,默认只创建了一个普通用户jovyan,其UID是1000,属主信息不一致,因此无权限进行文件操作。
由此看来,只有本地具有多用户,且操作时不使用UID为1000的用户使用docker挂载文件时会出现权限问题。