C语言实现基于Linux,epoll和多线程的WebServer服务器

代码结构:

在这里插入图片描述

Server.h

头文件,对函数进行了声明

#pragma once
#include<stdio.h>
// 新建一个用于TCP监听的socket文件描述符,并返回
int initListenFd(unsigned short port);

// 启动epoll
int epollRun(int lfd);

// accept建立连接
void* acceptClient(void* arg);

// 接收http请求, cfd表示连接socket, epfd表示epoll树
void* recvHttpRequest(void* arg);

// 解析HTTP的请求行
int parseRequestLine(const char *line, int cfd);

// 发送文件(即HTTP相应报文的数据部分,不包括状态行和首部行)
int sendFile(const char* fileName, int cfd);

// 发送响应头(状态行+首部行)
int sendHeadMsg(int cfd, int status, const char* descr, const char* type, int length);

// 根据文件的后缀/文件名,得到文件的type,作为HTTP响应报文的首部字段content_type的值
const char* getFileType(const char* name);

//发送目录
int sendDir(const char* dirName, int cfd);

// 将字符转换为整形
int hexToDec(char c);

//解码
// to 存储解码之后的数据, 传出参数, from被解码的数据, 传入参数
void decodeMsg(char* to, char* from);

Server.c

函数实现

#include "Server.h"
#include <arpa/inet.h>
#include <sys/epoll.h>
#include <pthread.h>
#include <stdio.h>
#include <fcntl.h>  // 设置socket非阻塞
#include <errno.h>  // 判断errno
#include <unistd.h>
#include <strings.h>
#include <string.h>
#include <sys/stat.h>
#include <assert.h>
#include <sys/sendfile.h>
#include <dirent.h>
#include <stdlib.h>
#include <pthread.h>
#include <ctype.h> 

// 封装线程工作函数的参数
typedef struct FdInfo{
    int fd; // 文件描述符(用于监听/通信)
    int epfd; // epoll树实例 
    pthread_t tid; // 线程id 
}FdInfo;

// 新建一个用于TCP监听的socket文件描述符,并返回
int initListenFd(unsigned short port){
    // 1. 创建监听的fd
    int lfd = socket(AF_INET, SOCK_STREAM, 0);
    if(lfd==-1){
        perror("socket");
        return -1;
    }
    // 2. 设置端口复用
    int opt = -1;
    int ret = setsockopt(lfd, SOL_SOCKET, SO_REUSEADDR, &opt, sizeof opt);
    
    if(ret == -1){
        perror("setsockopt");
        return -1;
    }
    // 3. 绑定Ip和端口号
    struct sockaddr_in addr;
    addr.sin_family = AF_INET;
    addr.sin_port = htons(port);
    addr.sin_addr.s_addr = INADDR_ANY;
    ret = bind(lfd, (struct sockaddr*)&addr, sizeof addr);
    if(ret == -1){
        perror("bind");
        return -1;
    }    
    // 4. 设置监听
    ret = listen(lfd, 128);
    if(ret == -1){
        perror("listen");
        return -1;
    }

    // 5. 返回fd
    return lfd;
}


// 启动epoll
int epollRun(int lfd){
    // 1. 创建epoll实例
    int epfd = epoll_create(1); // 该参数已经费用,1没有实际意义
    if(epfd == -1){
        perror("epoll_create");
        return -1;
    }

    // 2. 将lfd添加到epoll的红黑树上
     struct epoll_event ev; // 创建返回时的数据ev
     ev.data.fd=lfd;
     ev.events = EPOLLIN;
     int ret = epoll_ctl(epfd, EPOLL_CTL_ADD, lfd, &ev);
     if(ret == -1){
        perror("epoll_ctl(EPOLL_CTL_ADD)");
        return -1;
     }

     // 3. 开始检测epoll树上是否有就绪的节点,并进行处理
     struct epoll_event evs[1024];  //epoll_wait的传出参数,就绪的节点被放在里面
     int size = sizeof(evs) / sizeof(struct epoll_event);  
     while(1){
        int num = epoll_wait(epfd, evs, size, -1); //-1表示一直阻塞,直到检测到已就绪的文件描述符
        for(int i=0;i<num;++i){  //遍历前num个就绪的节点

            FdInfo *info = (FdInfo *)malloc(sizeof(FdInfo));        
            int fd = evs[i].data.fd;
            info->epfd = epfd;
            info->fd = fd;
            if(fd == lfd){ 
                // 如果是监听socket,则建立新的连接 accept
                // acceptClient(fd, epfd); 
                pthread_create(&info->tid, NULL, acceptClient, info);
            }
            else{ // 如果是连接socket,则进行处理
                // recvHttpRequest(fd, epfd); 
                pthread_create(&info->tid, NULL, recvHttpRequest, info);
            }
        }
     }
}

// accept建立连接,并将得到的用于连接的socket文件描述符添加到epoll树实例上去
void* acceptClient(void* arg){ // lfd表示用于监听的socket,epfd表示epoll实例

    FdInfo *info = (FdInfo*)arg;
    // 1. 建立连接
    int cfd = accept(info->fd, NULL, NULL);
    if(cfd == -1){
        perror("accept");
        return NULL;
    }
    // printf("连接socket:%d\n",cfd);

    //2. 设置连接socket非阻塞
    int flag = fcntl(cfd, F_GETFL);
    flag |= O_NONBLOCK;
    fcntl(cfd, F_SETFL, flag);

    //3. 将用于连接的socket添加到epoll树上
    struct epoll_event ev;
    ev.data.fd=cfd ;
    ev.events = EPOLLIN | EPOLLET ;  // 用于连接的socket即需要读,又需要写
    int ret = epoll_ctl(info->epfd, EPOLL_CTL_ADD, cfd, &ev);
    if(ret == -1){
        perror("epoll_ctl(EPOLL_CTL_ADD)");
        return NULL;
    }
    free(info);
    return NULL;
}

// 连接socket的工作函数
void* recvHttpRequest(void* arg){
    FdInfo *info = (FdInfo*)arg;
    int len = 0, total=0; // len是每一次while读取的数据长度,total表示总共的长度
    char tmp[1024] = { 0 };  // 每一次循环读取的数据
    char buf[4096] = { 0 }; // 存储整个的客户端数据块,即将每一次循环读取的数据连在一起
    // 由于使用了非阻塞cfd,所以需要循环的接受数据
    while((len=recv(info->fd, tmp, sizeof tmp, 0)) > 0){
        if(total+len<sizeof buf){
            memcpy(buf+total,tmp, len); //将mid_buf拼接到buf后面
        }
        total+=len;  // 更新total
        
    }
    // 判断recv是读完了数据,还是读数据失败了,因为二者都会返回-1(根据error number进行判断)
    if(len==-1 && errno == EAGAIN){  //如果是读数据读完了,则可以得到一个HTTP请求报文
        // 截取出HTTP的请求行
        char *pt = strstr(buf, "\r\n"); //pt指针指向\r这个字符
        int reqLen = pt-buf;
        buf[reqLen] = '\0'; //直接截断
        parseRequestLine(buf, info->fd);
    }
    else if (len == 0 ){ // 客户端断开了连接
        epoll_ctl(info->epfd, EPOLL_CTL_DEL, info->fd, NULL); //从epoll模型上删除当前用于通信的节点
        close(info->fd); //关闭文件描述符
    }
    else{ // 如果是读数据失败了
        perror("recv");
    }
    free(info);
    return NULL;
}


// HTTP报文格式:
// 方法 URL 版本[CRLF]  如:get /xxx/1.jpg HTTP/1.1
// 首部字段: 值[CRLF]
// ...[CRLF]
// 首部字段: 值[CRLF]
// [CRLF]
// 数据实体

// 解析HTTP的请求行
int parseRequestLine(const char *line, int cfd){

    // 解析请求行
    char method[12]; // 存储客户端请求方法,如GET/POST
    char path[1024];
    sscanf(line, "%[^ ] %[^ ]", method, path);

    printf("请求内容: \nmethod:%s, path:%s\n\n",method, path);

    // 不区分大小写的比较,如果不等于0,则返回-1(目前只接收get方法)
    if(strcasecmp(method, "get") != 0){ 
        return -1;
    }
    decodeMsg(path, path); //转换为utf8编码,这样可以支持中文等特殊字符

    // 处理客户端请求的静态资源(目录或文件),因为当前获得的/xxx/1.jpg是相对于工作路径的,所以需要转换为./xxx/1.jpg或者xxx/1.jpg
    char *file = NULL;
    if(strcmp(path, "/") == 0){ //如果get当前的工作目录
        file = "./";
    }
    else{
        file = path+1; // get工作目录中的一个资源
    }

    // 判断文件的属性(目录还是文件)
    struct stat st; //stat函数的传出采纳数
    int ret = stat(file, &st);
    if(ret == -1){ //-1表示文件不存在
        // 如果文件不存在,返回404界面
        sendHeadMsg(cfd, 404, "Not Found", getFileType(".html"), -1); //发送HTTP相应报文的状态行和首部行,-1表示让浏览器自己读数据的长度
        sendFile("404.html", cfd);
        return 0;
    }

    // 判断文件的类型,如果是目录
    if(S_ISDIR(st.st_mode)) //S_ISDIR是Linux提供的宏,判断是否是目录,是则返回1
    {
        // 将本地目录的内容发送给客户端
        sendHeadMsg(cfd, 200, "OK", getFileType(".html"), -1);
        sendDir(file, cfd);
    }
    // 如果是文件
    else{
        // 将文件的内容发送给客户端
        sendHeadMsg(cfd, 200, "OK", getFileType(file), st.st_size); //发送HTTP相应报文的状态行和首部行
        sendFile(file, cfd);  //发送文件
    }
    return 0;
}

// 发送响应头(状态行+首部行)
int sendHeadMsg(int cfd, int status, const char* descr, const char* type, int length){

    char buf[4096] = {0};
    // 状态行
    sprintf(buf, "http/1.1 %d %s\r\n", status, descr);
    // 首部行和空行(\r\n)
    sprintf(buf+strlen(buf), "content-type: %s\r\n", type);
    sprintf(buf+strlen(buf), "content-length: %d\r\n\r\n", length);

    //发送状态行和首部行
    send(cfd, buf, strlen(buf), 0);

    return 0;
}

// 发送数文件(HTTP相应报文的数据部分),由于使用了TCP面向连接的流式传输协议,所以可以读一部分发一部分数据
int sendFile(const char* fileName, int cfd){  // cfd表示建立连接的socket文件描述符
    // 1.打开文件,并获得文件描述符
    int fd = open(fileName, O_RDONLY); //O_RDONLY表示只读文件
    assert(fd>0);
#if 0  
    // 直接手写发送数据,但是可以有更简单的方式
    while(1){
        char buf[1024];
        int len = read(fd, buf, sizeof(buf)); //读数据

        if(len>0){
            send(cfd, buf, len, 0);  // 将读到的数据发送给客户端
            usleep(10); // 给接收端一些时间去接收数据,防止客户端接收数据出错
        }
        else if(len == 0){
            break;
        }
        else{
            perror("read");
        }
    }
#else 
    //直接使用系统函数sendfile发送文件,相比于手写更简单

    off_t offset = 0;
    int size = lseek(fd, 0, SEEK_END); //得到文件的大小,seek_end将文件指针移动到文件的末尾
    lseek(fd, 0, SEEK_SET); // seek_set将文件的指针重新移动到文件的头部
    while(offset<size) //循环发送文件,如果是大文件,只发送一次sendfile会导致写缓存写满,剩余的数据就发送不出去了
    {
        int ret = sendfile(cfd, fd, &offset, size-offset); //sendfile会自动给offset赋值,表示当前读的偏移量
        // printf("ret value: %d\n", ret);
        if(ret == -1 && errno!=EAGAIN){
            perror("sendfile");
        }
    }
        
#endif
    close(fd);
    return 0;
}

/* HTML文件发送目录时的格式
<html>
    <head>
        <title>test</title>
    </head>
    <body>
        <table>
            <tr>     // 每一都tr都是一个行,td是一个列
                <td></td>  // 文件名
                <td></td>   // 文件大小
            </tr>
            <tr>
                <td></td>
                <td></td>
            </tr>
        </table>
    </body>
</html>
*/
//发送目录,使用scandir进行单层目录的遍历
int sendDir(const char* dirName, int cfd){ //dirName表示目录名
    char buf[4096] = { 0 };
    sprintf(buf, "<html><head><title>%s</title></head><body><table>", dirName);
    
    struct dirent** namelist; //namelist指向的是一个指针数组struct dirent* tmp[]
    int num = scandir(dirName, &namelist, NULL, alphasort);
    for(int i=0;i<num;++i){
        char* name = namelist[i]->d_name; //拿到了文件名字
        struct stat st;  
        //将目录名与文件名进行拼接
        char subPath[1024] = { 0 };
        sprintf(subPath, "%s/%s", dirName, name);
        stat(subPath, &st);  //用于判断name所表示的文件的类型
        if(S_ISDIR(st.st_mode)){ //如果是目录
            sprintf(buf+strlen(buf),   
            "<tr><td><a href=\"%s/\">%s</a></td><td>%ld</td></tr>",
            name, name, st.st_size); //使用a标签设置超链接标签
        }
        else{  // 如果是文件
            sprintf(buf+strlen(buf), 
            "<tr><td><a href=\"%s\">%s</a></td><td>%ld</td></tr>",
            name, name, st.st_size); //使用a标签设置超链接标签
        }
        send(cfd, buf, strlen(buf),0);
        memset(buf,0,sizeof buf);
        free(namelist[i]);
    }
    sprintf(buf, "</table></body></html> ");
    send(cfd, buf, strlen(buf), 0);
    free(namelist);

    return 0;
}


// 根据文件的后缀/文件名,得到文件的type,作为HTTP响应报文的首部字段content_type的值
const char* getFileType(const char* name)
{
    // a.jpg a.mp4 a.html
    // 自右向左查找‘.’字符, 如不存在返回NULL
    const char* dot = strrchr(name, '.');
    if (dot == NULL)
        return "text/plain; charset=utf-8";	// 纯文本
    if (strcmp(dot, ".html") == 0 || strcmp(dot, ".htm") == 0)
        return "text/html; charset=utf-8";
    if (strcmp(dot, ".jpg") == 0 || strcmp(dot, ".jpeg") == 0)
        return "image/jpeg";
    if (strcmp(dot, ".gif") == 0)
        return "image/gif";
    if (strcmp(dot, ".png") == 0)
        return "image/png";
    if (strcmp(dot, ".css") == 0)
        return "text/css";
    if (strcmp(dot, ".au") == 0)
        return "audio/basic";
    if (strcmp(dot, ".wav") == 0)
        return "audio/wav";
    if (strcmp(dot, ".avi") == 0)
        return "video/x-msvideo";
    if (strcmp(dot, ".mov") == 0 || strcmp(dot, ".qt") == 0)
        return "video/quicktime";
    if (strcmp(dot, ".mpeg") == 0 || strcmp(dot, ".mpe") == 0)
        return "video/mpeg";
    if (strcmp(dot, ".vrml") == 0 || strcmp(dot, ".wrl") == 0)
        return "model/vrml";
    if (strcmp(dot, ".midi") == 0 || strcmp(dot, ".mid") == 0)
        return "audio/midi";
    if (strcmp(dot, ".mp3") == 0)
        return "audio/mpeg";
    if (strcmp(dot, ".ogg") == 0)
        return "application/ogg";
    if (strcmp(dot, ".pac") == 0)
        return "application/x-ns-proxy-autoconfig";

    return "text/plain; charset=utf-8";
}


// 将字符转换为整形数
int hexToDec(char c)
{
    if (c >= '0' && c <= '9')
        return c - '0';
    if (c >= 'a' && c <= 'f')
        return c - 'a' + 10;
    if (c >= 'A' && c <= 'F')
        return c - 'A' + 10;

    return 0;
}

// 解码
// to 存储解码之后的数据, 传出参数, from被解码的数据, 传入参数
void decodeMsg(char* to, char* from)
{
    for (; *from != '\0'; ++to, ++from)
    {
        // isxdigit -> 判断字符是不是16进制格式, 取值在 0-f
        // Linux%E5%86%85%E6%A0%B8.jpg
        if (from[0] == '%' && isxdigit(from[1]) && isxdigit(from[2]))
        {
            // 将16进制的数 -> 十进制 将这个数值赋值给了字符 int -> char
            // B2 == 178
            // 将3个字符, 变成了一个字符, 这个字符就是原始数据
            *to = hexToDec(from[1]) * 16 + hexToDec(from[2]);

            // 跳过 from[1] 和 from[2] 因此在当前循环中已经处理过了
            from += 2;
        }
        else
        {
            // 字符拷贝, 赋值
            *to = *from;
        }

    }
    *to = '\0';
}

main函数

#include "Server.h"
#include <stdio.h>
#include <unistd.h>
#include <stdlib.h>
int main(int argc, char* argv[]){

    // 用户传入的参数为 [默认参数,port, path],即启动当前服务器,设置端口号port和工作路目录path
    if(argc<3){
        printf("./a.out port path\n");
        return -1;
    }

    // 拿到端口号
    unsigned short port = atoi(argv[1]);  // argv to int

    // 修改当前目录到工作目录
    chdir(argv[2]);

    printf("端口号: %d\n工作目录: %s\n", port, argv[2]);


    // 初始化用于监听的套接字
    int lfd = initListenFd(port); //设置端口号,并返回一个监听文件描述符

    printf("用于监听的文件描述符: %d\n",lfd);

    //启动服务器程序
    epollRun(lfd);
    
    return 0;
}

启动指令:

# 1. 在文件目录下,编译所有.c文件,生成可执行文件Server
gcc *.c -l pthread -o Server

# 2. 运行Server, 运行指令的格式为 ./Server port filePath, 如:
./Server 10000 /
# 表示端口号为10000, 工作目录为根目录/(只是实例,一般需要自己的一个sources资源目录)

控制台输打印示例在这里插入图片描述

参考:大丙课堂

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/45950.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

NLP(六十一)使用Baichuan-13B-Chat模型构建智能文档问答助手

在文章NLP&#xff08;六十&#xff09;Baichuan-13B-Chat模型使用体验中&#xff0c;我们介绍了Baichuan-13B-Chat模型及其在向量嵌入和文档阅读上的初步尝试。   本文将详细介绍如何使用Baichuan-13B-Chat模型来构建智能文档问答助手。 文档问答流程 智能文档问答助手的流…

Kafka集群——(区别于Master/Slave架构的的分布式集群)

Kafka角色介绍&#xff1a; 1. Producer:消息生产者&#xff1a; 2. Broker: kafka实例&#xff0c;可以理解为一台kafka服务器&#xff0c;kafka cluster 是由多个broker构成的集群。 3. Topic: 消息主题&#xff0c;理解为消息队列&#xff0c;kafka数据就保存在topic里。…

Docker——compose单机容器集群编排

Docker——compose单机容器集群编排 一、Docker-compose概述1.为何需要Docker-compose2.Docker-compose 的特征3.Docker-compose 的优势4.Docker-compose 的劣势5.Docker-compose 的生产环境 二、Docker Compose 环境安装三、YAML 文件格式及编写注意事项四、Docker Compose配置…

常用的数据结构 JAVA

目录 1、线性表2、栈&#xff1a;3、队列&#xff1a; 1、线性表 List<Object> narnat new ArrayList<>();ArrayList&#xff1a;动态数组 1、可以嵌套使用 2、add(x)添加元素x&#xff0c;remove(index)删除某个位置的元素 3、注意list是指向性的&#xff0c…

STM32MP157驱动开发——按键驱动(中断)

文章目录 编写使用中断的按键驱动程序编程思路设备树相关驱动代码相关 代码修改设备树文件gpio_key_drv.cMakefile编译测试 编写使用中断的按键驱动程序 对于使用中断的按键驱动&#xff0c;内核自带的驱动程序 drivers/input/keyboard/gpio_keys.c 就可以&#xff0c;需要做的…

【vue3】常见的使用vue3创建项目的几种方法

1、使用ui界面创建&#xff0c;winr打开命令提示符&#xff0c;输入vue ui 2、winr打开命令提示符&#xff0c;输入vue create 项目名称 3、使用脚手架创建 其中方法一&#xff0c;方法二是使用npm run serve来运行的&#xff0c;方法三是使用npm run dev运行的

Unity进阶--对象池数据场景管理器笔记

文章目录 泛型单例类泛型单例类&#xff08;不带组件版&#xff09;对象池管理器数据管理器场景管理器 泛型单例类 using System.Collections; using System.Collections.Generic;public abstract class ManagersSingle<T> where T : new() {private static T instance;…

线性代数(主题篇):第三章:向量组 、第四章:方程组

文章目录 第3章 n维向量1.概念(1)n维单位列向量 2.向量、向量组的的线性关系(线性相关性)(1)线性表示 &#xff1a;AXβ(2)线性相关、线性无关&#xff1a; AX0①线性相关②线性无关③线性相关性7大定理 3.极大线性无关组、等价向量组、向量组的秩1.极大线性无关组2.等价向量组…

Cesium态势标绘专题-简单箭头(标绘+编辑)

标绘专题介绍:态势标绘专题介绍_总要学点什么的博客-CSDN博客 入口文件:Cesium态势标绘专题-入口_总要学点什么的博客-CSDN博客 辅助文件:Cesium态势标绘专题-辅助文件_总要学点什么的博客-CSDN博客 本专题没有废话,只有代码,代码中涉及到的引入文件方法,从上面三个链…

跃焱邵隼网站demo

xdm 网站的代码开源了。 今年迷上摄影和剪辑了&#xff0c;所以很少投入到网站的维护。 然后经过群友的一些反馈&#xff0c;所以决定 将网站上demo开源放出来了。 后面有机会再出一些好玩的东西。 哦 对了 3d 编辑器我已经融入地图了 年底搞一些好玩的东西出来。 可以关注…

树、二叉树(C语言版)详解

&#x1f355;博客主页&#xff1a;️自信不孤单 &#x1f36c;文章专栏&#xff1a;数据结构与算法 &#x1f35a;代码仓库&#xff1a;破浪晓梦 &#x1f36d;欢迎关注&#xff1a;欢迎大家点赞收藏关注 文章目录 &#x1f34a;树的概念及结构1. 树的概念2. 树的相关概念3.树…

算法通关村第一关-链表黄金挑战笔记|环的入口

解决链表环入口问题 文章目录 解决链表环入口问题前言链表中环的问题Hash和集合的解法&#xff1a;快慢指针实现解决&#xff1a; 解题思路&#xff1a;Hash或者使用集合的方式实现快慢指针&#xff08;这里使用三次刚好解决&#xff09; 总结 前言 提示&#xff1a;无论今天过…

C++笔记之使用普通指针和shared_ptr在堆上申请类对象的各种写法

C笔记之使用普通指针和shared_ptr在堆上申请类对象的各种写法 code review! 文章目录 C笔记之使用普通指针和shared_ptr在堆上申请类对象的各种写法1.几种不同的写法2.ChatGpt回答 1.几种不同的写法 注&#xff1a;使用普通指针申请堆内存&#xff0c;其实是应该有delete的&…

Redis常用数据类型和使用场景

Redis目前支持5种数据类型&#xff0c;分别是&#xff1a; String&#xff08;字符串&#xff09; List&#xff08;列表&#xff09; Hash&#xff08;字典&#xff09; Set&#xff08;集合&#xff09; Sorted Set&#xff08;有序集合&#xff09; 下面就分别介绍这五…

得物词分发平台技术架构建设与演进

前言 在文章开始前先介绍下导购&#xff0c;导购通常是指帮助消费者在购物过程中做出最佳决策的人或系统。在电商网站中&#xff0c;导购可以引导用户关注热卖商品或促销活动等&#xff0c;帮助用户更好地进行购物。导购的目的是为了提高用户的购物体验&#xff0c;促进销售额…

抽象工厂模式——产品族的创建

1、简介 1.1、简介 抽象工厂模式为创建一组对象提供了一种解决方案。与工厂方法模式相比&#xff0c;抽象工厂模式中的具体工厂不只是创建一种产品&#xff0c;它负责创建一族产品 1.2、定义 抽象工厂模式&#xff08;Abstract Factory Pattern&#xff09;&#xff1a;提供…

4、非线性数据结构

上一节课我们讲了线性数据结构&#xff0c;这一节我们说下非线性数据结构。 非线性数据结构&#xff0c;从字面意思来看&#xff0c;就是指不是线性的结构。线性结构的特点是只有一个前驱和一个后继。 那么非线性结构的特点就是有多个前驱或后继了。 如果只存在一个没有前驱的…

Python爬虫基础

文章目录 Python学习记录Python基础爬虫&#xff1a;代码&#xff1a;运行结果&#xff1a; Python学习记录 Python基础爬虫&#xff1a; 代码&#xff1a; import urllib.request import random import chardet#请求头列表 us["Mozilla/4.0 (compatible; MSIE 6.0; Wi…

(学习笔记-IP)IP基础知识

基本认识 IP在TCP/IP参考模型中处于第三层&#xff0c;也就是网络层。 网络层的主要作用是&#xff1a;实现主机与主机之间的通信&#xff0c;也叫点对点的通信。 网络层与数据链路层的关系&#xff1a; MAC的作用是实现直连的两个设备之间通信&#xff0c;而IP负责没有直连的…

消息队列- 背景知识

这里写目录标题 前言消息队列消息队列的作用常见的消息队列消息队列的核心概念BrokerServer核心概念消息队列的核心API消息队列与消费者之间的工作模式交换机的类型消息队列的持久化 总结 前言 消息队列,不知道大家是否陌生,如果说消息队列感到陌生的话, 有一个模型肯定大家都…