文章目录
- 一:说明
- 二:dockerfile 参数说明
- 1. 一般常用的 参数,以及它的含义
- 2. 我自己的 dockerfile
- 三:示例操作
- 1. Gunicorn + Gevent启动服务的好处
- 2. 用Gunicorn + Gevent的好处:
- 3. Gunicorn + Gevent的 使用示例
- 4. 创建自己的镜像
- 5. docker-compose
- 1. docker-compose 的好处
- 2. docker-compose 的参数以及使用示例
- 6. 服务器部署:创建容器并且启动服务
- 7. 调用服务测试
一:说明
- 以前没有使用过docker,近期需要使用部署自己的服务,因此需要学习,先从简单的使用起来,后面专门整理一篇 如何部署 模型的方法。
- 理论知识就不说了,网上很多,咱直接上步骤
- 整理逻辑分为: 基于dockerfile创建镜像 >>>> 使用 docker-compose 创建容器 >>>> 后台启动
当然这些步骤完全可以都写在 dockerfile中,这里我拆开了。
我的项目文件:
- 系统说明:
Linux系统:
docker的安装 和启动 ,以及 镜像和容器的 增删改查工作,网上有很多教程。
咱们只讨论 实现逻辑流程。
二:dockerfile 参数说明
1. 一般常用的 参数,以及它的含义
2. 我自己的 dockerfile
FROM python:3.9.5
:该 image 文件继承官方的 python,冒号表示标签,这里标签是3.9.5,即3.9.5版本的 python。
COPY . /app
:将当前目录下的所有文件(除了.dockerignore
排除的路径,注意:这个文件,根据自己需要创建,也就是项目中有些文件不需要放入镜像中,就将这些文件路径放入.dockerignore
文件中就行了 ),都拷贝进入 image
文件的/app
目录。
WORKDIR /app
:指定接下来的工作路径为/app
就是你进入容器后,的目录。(我用了docker-compose
方法,因此这里的路径基本上我用不到了,后面在docker-compose
中会重新设置。)
RUN pip install
:在/app
目录下,运行pip install
命令安装依赖。注意,安装后所有的依赖,都将打包进入 image 文件。
COPY . .
:我这里 写重复了,当命令重复了,(懒得 删除了,反正几个文件占不了多大内存)。这里含义就是 将项目中的所有文件复制到 .
路径中。
EXPOSE 50002
:将容器 50002端口暴露出来, 允许外部连接这个端口。
三:示例操作
1. Gunicorn + Gevent启动服务的好处
一般我们可以使用命令python start.py
运行这个应用,打开浏览器,输入网址127.0.0.1:5000
并回车,将会打开我们的网站。
但是:
Gunicorn + Gevent
运行以下命令即可安装这两个利器
安装命令:pip install gunicorn gevent
在根目录下新建文件 /gunicorn.conf.py
workers = 5
# 定义同时开启的处理请求的进程数量,根据网站流量适当调整
worker_class = "gevent"
# 采用gevent库,支持异步处理请求,提高吞吐量
bind = "0.0.0.0:80"
可以使用gunicorn命令来测试是否可以正确运行,命令如下,打开网址127.0.0.1:80,将会打开我们的网站。
执行命令:gunicorn start:app -c gunicorn.conf.py
2. 用Gunicorn + Gevent的好处:
Gunicorn
是一个用于部署Python Web
应用程序的WSGI
服务器,它可以处理多个请求并发地。Gunicorn可以通过多进程的方式来实现并发处理,每个进程都可以独立地处理客户端请求。这使得Gunicorn非常适合在高负载情况下使用,因为它可以有效地利用多核CPU资源,提高应用程序的性能和稳定性。
而Gevent是一个基于协程的网络库,它使用一种称为"Greenlet"的轻量级线程来实现并发
。与传统的多线程或多进程模型相比,协程模型可以更高效地使用系统资源,并且在编程上更加简单和直观。使用Gevent时,可以将阻塞式的I/O操作转化为非阻塞式,从而提高应用程序的响应速度
。
结合使用Gunicorn和Gevent可以发挥它们各自的优势。Gunicorn作为Web服务器负责接收和分发请求,而Gevent作为协程库负责处理请求。这样可以充分利用Gunicorn的多进程能力,同时又能享受到Gevent协程模型的优势,提供高性能和高并发的服务
。
3. Gunicorn + Gevent的 使用示例
当使用Gunicorn
和Gevent
启动服务时,你可以使用一些参数来配置它们的行为。下面是一些常用的参数和使用示例:
Gunicorn
参数:
-w 或 --workers
:指定工作进程的数量。例如,gunicorn -w 4 app:app 将启动4个工作进程来处理请求。
-b 或 --bind
:指定服务器绑定的地址和端口。例如,gunicorn -b 0.0.0.0:8000 app:app 将在本地的8000端口上监听请求。
-t 或 --timeout
:指定超时时间,即请求的最大处理时间。例如,gunicorn -t 30 app:app 将设置请求超时时间为30秒。
Gevent
参数:
--worker-class
:指定Gevent的工作类。例如,gunicorn --worker-class gevent app:app 将使用Gevent作为工作类来处理请求。
--worker-connections
:指定每个工作进程的最大并发连接数。例如,gunicorn --worker-connections 1000 app:app
将设置每个工作进程最大连接数为1000。
使用示例
:
使用Gunicorn默认配置启动应用程序:gunicorn app:app
启动4个工作进程,并将服务器绑定到本地的8000端口:gunicorn -w 4 -b 0.0.0.0:8000 app:app
设置请求超时时间为30秒:gunicorn -t 30 app:app
使用Gevent作为工作类启动应用程序:gunicorn --worker-class gevent app:app
设置每个工作进程的最大连接数为1000:gunicorn --worker-connections 1000 app:app
4. 创建自己的镜像
我这里使用的是 dockerfile方法进行镜像创建:具体流程如下:
注意:开始之前先cd 进入项目文件夹中
:
- 首先,在项目的根目录下,新建一个文本文件.dockerignore写入下面的内容。
使用vim .dockerignore
生成文件:
.git # 这个是不写入镜像的文件
- 在项目的根目录下,新建一个文本文件 Dockerfile,写入下面的内容
FROM python:3.9.5
COPY . /app
WORKDIR /app
RUN pip install -r requ.txt -i http://mirrors.aliyun.com/pypi/simple --trusted-host mirrors.aliyun.com
EXPOSE 50002
COPY . .
CMD gunicorn GIIKIN_RECOMMEN_WEB_v1:app -c gunicorn.conf.py
- 将 创建的文件 放在 项目文件中:
执行:sudo docker build -t '(这里自己根据需要命名)':(标签也是) .
注意:代码最后的 .
不要忘了,
执行情况如下:
- 查看镜像
命令:sudo docker images
v1是标签:
IMAGE ID是镜像ID:
如果想要删除的话,可以这么做: docker rmi -f 镜像ID
5. docker-compose
创建容器可以使用这种方法:sudo docker container run -p 50002:50002 -it giikin_recommen_web /bin/bash
但是该方法并没有达到我想要的效果,我想在容器启动时候,服务是启动。并且,这种方法有个弊端就是,一旦我的项目有什么变化,可能就需要重新构建镜像。
因此我这里使用 docker-compose
方法进行创建容器。
1. docker-compose 的好处
-
简化部署:使用Docker Compose可以轻松地定义和配置多个容器,并将它们组合成一个应用程序。这使得部署变得非常简单,只需要一条命令即可启动整个应用。
-
可移植性:Docker Compose使用统一的配置文件来定义应用程序的环境、服务和依赖关系。这意味着你可以在不同的环境中轻松地复制和部署应用程序,而不会出现任何问题。
-
高效管理:通过Docker Compose,你可以方便地管理多个容器应用程序,包括启动、停止、重新构建和扩展等操作。这使得开发人员可以更加高效地处理应用程序的生命周期。
-
灵活性:Docker Compose允许你定义和组织多个容器,并指定它们之间的依赖关系和交互方式。这使得你可以轻松地创建复杂的应用程序架构,同时保持灵活性和可维护性。
2. docker-compose 的参数以及使用示例
up 命令
:启动并运行所有定义的服务。
示例:docker-compose up
down 命令
:停止并删除所有已经运行的服务。
示例:docker-compose down
build 命令
:构建镜像。
示例:docker-compose build
start 命令
:启动服务。
示例:docker-compose start
stop 命令
:停止服务。
示例:docker-compose stop
restart 命令
:重启服务。
示例:docker-compose restart
logs 命令
:查看服务的日志输出。
示例:docker-compose logs
ps 命令
:列出当前正在运行的服务。
示例:docker-compose ps
6. 服务器部署:创建容器并且启动服务
好镜像创建完后,来创建我们想要的容器
- 先构建
docker-compose.yml
脚本文件。:代码如下:
version: '3.3'
services: # web # 自定
giikin_recommen_web01: # 这些名字自定
image: giikin_recommen_web:v1 # 镜像的名字以及 标签
ports: # 我们的服务端口 进行映射,我这里为避免麻烦,一样
- "50002:50002"
restart: always
container_name: web01 # 容器的名字
privileged: true
volumes:# 这里是将你的项目地址与 容器中的工作地址做一个映射
- /home/zhangsan/GIIKIN_ITEM_FILE/giikin_recommen_item:/home/giikin_recommen_item
- /etc/localtime:/etc/localtime # 日志中的时间信息
shm_size: 10g
working_dir: /home/giikin_recommen_item # 容器中的工作地址
command: gunicorn -c gunicorn.conf.py GIIKIN_RECOMMEN_WEB_v1:app # 接口服务启动代码
- 将该脚本文件放在项目中 如下:
- 执行 代码 :
sudo docker-compose up
执行代码如下:
- 如此就完成容器创建,
当我们部署的时候,就可以将镜像文件,打包下来上传git,另外将容器的创建文件写好,以及执行命令,写好给使用者。
那么想要让服务后台 一直执行可以执行: nohup sudo docker-compose up &
即可:
注意:
停止容器代码:sudo docker stop (容易ID)
删除容器: sudo docker rm (容器ID)