Nginx之进程间通信-共享内存篇

前面我们介绍了Nginx的多进程模型,多个worker进程间通信 主要是用共享内存来实现的。

今天我们就来学习下Nginx的共享内存。

那么进程该如何创建共享内存呢?

如果按照使用我们的malloc来分配内存的话,只会分配出进程的私有内存,并不能在多个worker进程间共享。Linux为我们封装了POSIX API 如 mmap, munmap。


Nginx已经为我们封装了一套统一的接口来使用共享内存:

文件名:ngx_cycle.h

typedef struct ngx_shm_zone_s  ngx_shm_zone_t;

typedef ngx_int_t (*ngx_shm_zone_init_pt) (ngx_shm_zone_t *zone, void *data);

struct ngx_shm_zone_s {
    void                     *data;  // 
    ngx_shm_t                 shm;   // 共享内存关键结构
    ngx_shm_zone_init_pt      init;  // 初始回调函数
    void                     *tag;   // 标签 一般设置为模块名 类似包名 防止shm.name重复
    void                     *sync;
    ngx_uint_t                noreuse;  /* unsigned  noreuse:1; */
};



文件名:ngx_shmem.h

typedef struct {
    u_char      *addr;  // 分配内存的起始地址
    size_t       size;  // 内存大小
    ngx_str_t    name;  // 共享内存名称
    ngx_log_t   *log;   // 日志
    ngx_uint_t   exists;   /* unsigned  exists:1;  */
} ngx_shm_t;

// 创建共享内存快
ngx_int_t ngx_shm_alloc(ngx_shm_t *shm);
// 释放共享内存快
void ngx_shm_free(ngx_shm_t *shm);


Nginx主要使用了共享内存的模块:


这里主要用到了2种数据结构:

红黑树:比如限速,流控,缓存等。 因为这些场景需要快速增加 删除节点。

单链表:这种场景只需要把信息串起来就可以了。


Nginx为了保证多个worker进程之间同步,防止多个进程同时写共享内存块,从而引入了自旋锁。


如果进程1持有了锁,那么进程2会不停地去访问这把锁。打个比喻的话,就类似一个坑已经被进程1蹲了,那么进程2来了就在门口一直敲门。正是由于这种机制,Nginx要求所有的模块都要快速使用共享内存,即:快速获得锁,快速释放锁。一旦出现有拿着锁 长时间不放的,就会严重降低性能。

我们来一起了解一下Nginx锁的相关数据结构

文件名:ngx_shmtx.h


typedef struct {
    ngx_atomic_t   lock;
} ngx_shmtx_sh_t;


typedef struct {
    ngx_atomic_t  *lock;    // 指向ngx_shmtx_sh_t的lock锁
    ngx_uint_t     spin;    // 自选次数
} ngx_shmtx_t;

// 创建互斥锁
ngx_int_t ngx_shmtx_create(ngx_shmtx_t *mtx, ngx_shmtx_sh_t *addr, u_char *name);
// 销毁互斥锁
void ngx_shmtx_destroy(ngx_shmtx_t *mtx);
// 无阻塞试图获取互斥锁
ngx_uint_t ngx_shmtx_trylock(ngx_shmtx_t *mtx);
// 阻塞方式获取锁
void ngx_shmtx_lock(ngx_shmtx_t *mtx);
// 释放互斥锁
void ngx_shmtx_unlock(ngx_shmtx_t *mtx);


Nginx锁的操作方法:


此外,Nginx还使用了Slab管理共享内存。 下篇继续

#程序员##Nginx#

相关文章

nginx proxy_pass 头信息处理

简介 有些应用需要验证请求和响应的头部信息。而现在的架构基本都会在前端使用nginx进行转发。如果没有处理头部信息,就会导致信息丢失,无法通过验证,出现403等请求异常的情况。nginx指令proxy...

Linux 系统信息命令大全,极其详细!

在日常运维、排障、性能优化或系统审计中,我们常常需要了解 Linux 系统的详细信息,包括内核版本、硬件配置、内存、磁盘、网络状态、进程负载等。掌握这些信息命令,不仅能让你看清系统运行的“全貌”,更是...

Nginx之http模块是如何解析http请求的,6个步骤一目了然-02

解析http请求:在解析http请求之前,我们先来复习下http请求包含的各个部分及每个部分的协议格式。一个http请求一般由 请求行、请求头、请求体、响应行、响应头、响应体 这6个部分组成。我们就以...

Nginx熔断操作:一行代码搞定临时流量控制!

直接在目标接口的location块中添加if判断,通过注释/取消注释一行代码,即可轻松控制熔断状态!无需复杂指令,简单高效!快速配置示例快速实现熔断!示例:熔断/api/order接口server {...

Nginx实现认证登录

Nginx 是一个很强大的高性能Web和反向代理服务,本配置实现Nginx认证登录以免重要信息暴露在公网。ngx_http_auth_basic_module模块实现让访问者访问,只有输入正确的用户密...