django和celery的项目,nginx和uwsgi协议,在通过api端口进行deeplearning任务的训练和排队

问题汇总

  1. redis 安装
  2. django和celery的安装
  3. nginx和uwsgi的安装
    一. Django 的项目,有个runserver直接起了一个webserver,为什么还要Nginx包一层,起一个webserver呢?
    Nginx的性能比Django自带的Webserver的性能要好,python写的程序,deeplab想要被web访问,需要有python写的webserver,
    常见的webserver:uWSGI,Guncom, wsgiref等
    Django自带的runserver的性能不好,其作用主要用于搭建时的功能测试和试运行
    所以通常webserver是联合nginx和uwsgi一起做,WSGI是web服务的网关接口,是web服务器(nginx)和应用服务器(uWSGI)的通信规范
    在实际的应用过程中,web的所有的动态请求会通过uWSGI,而所有的静态请求会通过nginx,(所有的良好的架构都会实现动静分离,这会大大提高web的响应效率)
    二,已经有了本地的Django项目,将其部署到服务器上的步骤
    1 上传项目至目标服务器,保证项目在服务器上能正常运行runserver起来
    2 安装nginx
    pip install nginx
    3 实际生产以conf配置文件启动uwsgi,需要配置相应的conf
    4 安装uwsgi
    conda install uwsgi
    (pip 安装会error)
    5 修改nginx的配置文件

一些config的配置

Django项目和celery结合的项目中的config文件(独立于nginx,能独立运行)

  • ai_service中的settings.py
    其中的ALLOW_HOSTS = [内网访问的地址] (vscode远程连接时,左下角的地址)
  • mycelery文件夹中的config.py
    这里的broker_url和result_backend是redis中的内容,用来接收什么信号到celery队列中吧,我也不知道
    mycelery中的main,会使用这两个config文件,其中ai_service中的settings会设置到os.environ.setdefult,而mycelery.config会被配置到celery的对象app中的app.config_from_object中

========================================================================

nginx和uwsgi中的配置文件

在上面两个config文件配置好后,就不需要再改变了

而在ai_service中有wsgi.py,其中会用到settings.py这个config用以配置环境

为在生产环境中使用,通常会将uwsgi以配置文件的方式启动,uwsgi.ini会在Django项目的根目录下,其中会配置socket(虽然不知什么用),chdir(Django项目的根目录路径), module(ai_server.wsgi) 实际上指向的是wsgi.py文件

ngix在启动时,如果不配置nginx的配置文件,则只会有nginx的欢迎页,其配置文件在/etc/nginx/nginx.conf中,需要以sudo的方式vim更改,在更改时,需要向http中添加server的{},同时,listen和server_name是最重要的;location中的uwsgi_pass后的内容需要和uwsgi.ini中的socket字段相同,uwsgi_read_timeout 是请求发出后,多久定义为timeout并返回(由于计算分类任务的tsne点需要进行迭代,所以需要耗费较长时间,可以将其定义的时间长一点,否则,还没等请求计算完场,就需要返回,并显示timeout,这是不合理的)

修改nginx.conf后需要重启nginx

使用命令 sudo /etc/init.d/nginx restart

报错socket的端口被占用:原因,没有停掉uwsgi,直接关闭了窗口

解决方式: 将那个端口杀死,并重启服务

相关推荐
Victory_orsh3 分钟前
“自然搞懂”深度学习(基于Pytorch架构)——010203
人工智能·pytorch·python·深度学习·神经网络·算法·机器学习
java1234_小锋3 分钟前
PyTorch2 Python深度学习 - 模型保存与加载
开发语言·python·深度学习·pytorch2
Python图像识别6 分钟前
74_基于深度学习的垃圾桶垃圾溢出检测系统(yolo11、yolov8、yolov5+UI界面+Python项目源码+模型+标注好的数据集)
python·深度学习·yolo
MrSYJ14 分钟前
可以指定 Jupyter Notebook 使用的虚拟环境吗
python·llm·agent
quant_198628 分钟前
【教程】使用加密货币行情接口 - 查询比特币实时价格
开发语言·后端·python·websocket·网络协议
ytttr87330 分钟前
MATLAB实现经验模态分解(EMD)与希尔伯特变换获取能量谱
人工智能·python·matlab
yumgpkpm33 分钟前
Doris在CMP7(类Cloudera CDP 7 404版华为Kunpeng)启用 Kerberos部署Doris
大数据·hive·hadoop·python·oracle·flink·cloudera
熊猫_豆豆36 分钟前
Python 写一个标准版和程序员版计算器
开发语言·python·计算器
小白学大数据1 小时前
构建1688店铺商品数据集:Python爬虫数据采集与格式化实践
开发语言·爬虫·python
闲人编程1 小时前
用Python和Telegram API构建一个消息机器人
网络·python·机器人·api·毕设·telegram·codecapsule