redis,memcached,nginx网络组件

1.理解阻塞io,非阻塞io,同步io,异步io的区别

2.理解BIO和AIO的区别


io多路复用只负责io检测,不负责io操作

阻塞io中的write,能写多少是多少,只要写成功就返回,譬如准备写500字节,但是只写成功了300就会返回,不会阻塞到500字节全部写成功才返回


iocp是一种异步io

listen(fd, backlog)backlog是指全连接队列长度吗?


connect和accept函数同时具备检测io和操作io的功能,

譬如,①多次调用connect,但是errno的值可能不同 ②若全连接队列为空,调用accept返回-1,errno为EWOULDBLOCK,这是检测功能,若全连接队列不为空,会对全连接队列进行操作



断开连接:close和shutdown,close关闭读写端,shutdown关闭读端或者写端

有的服务器框架需要支持半关闭状态,所以要注意一下读端关闭和写端关闭


当read()返回-1,errno为EWOULDBLOCK,说明读缓冲区为空,errno为EINTR说明read操作被打断了?

io函数只能检测一条连接的就绪状态以及操作一条连接的io数据


在reactor中,io多路复用是用来做io检测的,io函数去操作io(io函数的检测功能不使用)

reactor为什么搭配非阻塞io?(因为io已经检测好了,调用阻塞的io不一样吗?select,poll,epoll)

  1. 多线程环境 考虑场景(将一个listenfd放到多个epoll去处理,有多个线程,每个线程有一个epoll,这个行为是被允许的)这一条没理解
  2. 边缘触发下必须使用非阻塞io,读事件触发的时候,read在一次事件循环中,要把read buffer读空,因为当read恰好读不到数据的情况下,如果使用阻塞io就会阻塞
  3. select bug 使用man select,然后搜索”bugs“,当某个socket接收缓冲区又新数据到达,然后select报告这个socket描述符可读,但随后,协议栈检查这个新数据校验和错误,并且丢弃这个数据,这时候调用read没有数据可读,如果socket没有被设置为NON_BLOCK,此read将阻塞当前线程


redis

  1. 环境(①keyvalue数据结构,支持多种数据结构,内存数据库②命令处理是单线程的(为什么用单线程,答:因为使用了丰富的数据结构,给这些数据结构枷锁有点复杂))
  2. redis为什么要使用单reactor(①因为是单线程的,所以也是单reactor②操作具体命令的时间复杂度比较低)
  3. redis怎么处理reactor
  4. redis针对reactor做了哪些优化?(io多线程①read和decode放一个线程,②write和encode放一个线程,③reactor和acceptor放一个线程)

redis源码解读



memcached

多reactor

  1. 环境(①keyvalue数据结构,不支持丰富的数据结构,内存数据库②命令处理是多线程的(为什么用多线程,答:因为数据结构简单,给这些数据结构枷锁比较方便,用多线程效率高))
  2. memcached为什么要使用多reactor(多线程效率高)
  3. memcached怎么处理reactor

相关文章

深入Linux C/C++ Timer定时器的实现核心原理

我曾以为像定时器这样基础的功能,操作系统会有一个完备的实现。当需要开启一个定时任务的时候,会有一个优雅的、如下形式的接口:1 2 typedef void (*callback)(void*); vo...

只需要90分钟,醍醐灌顶,读透Nginx源码

前言总结有福利如何快速的把Nginx读明白,更加深入的了解Nginx,有很多朋友就想我能用Nginx就可以了,搞那么明白干嘛,学Nginx我们到底是先用,还是了解源码,在这里我觉的当然还是先用起来,在...

如何修改 Nginx 源码实现 worker 进程隔离

背景最近我们线上网关替换为了 APISIX,也遇到了一些问题,有一个比较难解决的问题是 APISIX 的进程隔离问题。APISIX 不同种类请求的互相影响首先我们遇到的就是 APISIX Promet...

Linux 应用开发 - 必须掌握的 5 个底层 IO 函数

底层输入输出(Low-Level Input/Output)这篇文章主要介绍 Linux 原生的 IO 操作(Low IO),你可能会想不是有跨平台的 ANSI C 可以使用么,为啥还要学习底层 IO...

盘点c++几种常见的设计模式及具体实现

1.单例模式作用:保证一个类只有一个实例,并提供一个访问它的全局访问点,使得系统中只有唯一的一个对象实例。应用:常用于管理资源,如日志、线程池实现要点:在类中,要构造一个实例,就必须调用类的构造函数,...