博客
关于我
Dockerfile构建Python3.5环境---亲测可行代码
阅读量:296 次
发布时间:2019-03-03

本文共 2547 字,大约阅读时间需要 8 分钟。

因为比赛的需要,我不得不上传Docker镜像文件,但由于对Docker不太熟悉,花了一天时间终于大致弄明白了。其实可以这样理解:通过编写一个Dockerfile,把程序中需要的所有依赖项都封装进去,同时把自己的程序也一起装进去,这些东西就构成了一个Docker镜像文件,然后把这个镜像推送到云端,别人就可以用了。最难的部分就是如何写这个Dockerfile,尤其是指定使用CentOS构建环境的话,确实不太方便,如果不是为了比赛,选择Ubuntu环境可能会更舒服一些。

以下是一个上Python3.5环境的Dockerfile代码示例:

FROM nvidia/cuda:8.0-cudnn6-devel-centos7
MAINTAINER Will_Ye
# 安装你程序需要用到的所有依赖项,如Python,numpy,tensorflow等等
RUN set -ex \
&& yum install -y wget tar libffi-devel zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gcc make initscripts \
&& wget https://www.python.org/ftp/python/3.5.0/Python-3.5.0.tgz \
&& tar -zxvf Python-3.5.0.tgz \
&& cd Python-3.5.0 \
&& ./configure prefix=/usr/local/python3 \
&& make \
&& make install \
&& make clean \
&& cd .. \
&& rm -rf /Python-3.5.0* \
&& yum install -y epel-release \
&& yum install -y python-pip
RUN set -ex \
# 备份旧版本python
&& mv /usr/bin/python /usr/bin/python27 \
# 配置默认为python3
&& ln -s /usr/local/python3/bin/pip3 /usr/bin/pip \
&& pip install scipy
# 修复因修改python版本导致yum失效问题
RUN set -ex \
&& sed -i "s#/usr/bin/python#/usr/bin/python2.7#" /usr/bin/yum \
&& sed -i "s#/usr/bin/python#/usr/bin/python2.7#" /usr/libexec/urlgrabber-ext-down \
&& yum install -y deltarpm
# 安装python3.5相关开发库
RUN yum -y install python-devel scipy
# 更新pip
RUN pip install --upgrade pip
# 安装其他依赖
RUN pip install matplotlib
RUN pip install --upgrade setuptools
RUN pip install tensorflow-gpu
RUN pip install Pillow
# 注:opencv部分暂时搁置,后续有需要再补充
# 安装wave
RUN pip install wave
# 安装scikit-image
RUN pip install scikit-image
# 添加项目文件
ADD ./competition/application.py /data/application.py
ADD ./competition/model_weights20190430.h5 /data/model_weights20190430.h5
# 定义入口命令
CMD python /data/application.py

技术要点解析:

  • RUN set -ex

    这个命令的作用是将后续命令以批处理模式执行。如果任何一个命令出错,整个脚本就会停止执行,避免了后续命令因为前一步错误而无法执行的问题。这种情况在构建Python环境时尤为重要,因为环境搭建的每一步都很关键,任何一个错误可能导致后续问题无法解决。

  • mkdir -p /usr/local/python3.5

    这个命令的-p选项表示在目标目录的父目录不存在时,会自动创建父目录。这样可以避免手动创建目录的麻烦,减少代码量。

  • ADDCOPY 的区别

    ADD命令比COPY更强大,不仅可以复制本地文件到镜像,还可以通过URL直接下载文件到指定路径。COPY则只能从本地复制文件到镜像中。

  • MAINTAINER Will_Ye

    这行代码用于指定镜像的维护者,方便以后有问题时联系到你。

  • ENVRUN 的区别

    ENV用于设置环境变量,而RUN是用来执行命令的。如果需要在镜像构建完成后保留某个环境变量,可以使用ENV命令。

  • VOLUME 的作用

    使用VOLUME命令可以将镜像中的根文件系统设置为读写层,这样镜像本身不会被修改,只有容器中的文件才会改变,便于镜像共享和缓存。

  • CMD 的作用

    CMD命令指定了容器执行的入口命令。如果需要执行多个命令,可以使用CMD执行一个入口命令,内部使用&&连接多个命令。

  • ENTRYPOINT 的作用

    ENTRYPOINT用于指定容器的入口点,也就是容器运行时的执行命令。如果不指定的话,默认会从CMD中获取入口点。

  • 总结

    通过以上Dockerfile,我们可以轻松地构建包含所有依赖项和程序的镜像文件,然后将镜像推送到云端。其他人只需要下载这个镜像,就能直接运行你的程序,无需额外安装依赖项。

    转载地址:http://cxgl.baihongyu.com/

    你可能感兴趣的文章
    Netty源码—3.Reactor线程模型三
    查看>>
    Netty源码—4.客户端接入流程一
    查看>>
    Netty源码—4.客户端接入流程二
    查看>>
    Netty源码—5.Pipeline和Handler一
    查看>>
    Netty源码—5.Pipeline和Handler二
    查看>>
    Netty源码—6.ByteBuf原理一
    查看>>
    Netty源码—6.ByteBuf原理二
    查看>>
    Netty源码—7.ByteBuf原理三
    查看>>
    Netty源码—7.ByteBuf原理四
    查看>>
    Netty源码—8.编解码原理一
    查看>>
    Netty源码—8.编解码原理二
    查看>>
    Netty源码解读
    查看>>
    Netty的Socket编程详解-搭建服务端与客户端并进行数据传输
    查看>>
    Netty相关
    查看>>
    Netty遇到TCP发送缓冲区满了 写半包操作该如何处理
    查看>>
    Netty:ChannelPipeline和ChannelHandler为什么会鬼混在一起?
    查看>>
    Netty:原理架构解析
    查看>>
    Network Dissection:Quantifying Interpretability of Deep Visual Representations(深层视觉表征的量化解释)
    查看>>
    Network Sniffer and Connection Analyzer
    查看>>
    Network 灰鸽宝典【目录】
    查看>>