Linux C/C++ 学习笔记（九）：百万并发的服务器实现

本文内容参考自(2条消息) Linux C/C++ 开发（学习笔记十三)：百万并发的服务器实现_菊头蝙蝠的博客-CSDN博客_linux百万并发

一、connection_refuesed ---->文件系统最大的进程fd个数

nat 模式，物理机的VMnet8网卡，连接到了VMnet8虚拟交换机，在本机使用网络调试助手要使用此ip，其他ip连不上。

linux 文件系统默认的文件描述符的数量是1024个，可以通过ulimit -a命令查看

可通过ulimit -n命令进行修改，这种修改方式是临时修改，系统重启后又恢复原状

可通过修改文件永久修改系统默认的文件描述符数量

 在那个文件下添加两行

 reboot后即可

二、Cannot assign requested address-----> 在服务器开多个端口

问题及原因

在客户端这边,远程ip，远程端口,协议都是确定的，本机ip也是确定的，那么实际上就是本机的端口耗尽了。

解决方法就是 在服务器开多个端口。

解决问题

通过一个循环，开MAX_PORT个端口，每个为一个sockfd
并把每个sockfd加入到epoll中去
最后还需要用一个数组,将每次遇到的sockfd存入到数组后。（由于后续在监听到数据后，需要区分是listenfd还是客户端的信息）

后续while(1) 持续监听的时候，通过sockfds数组（理解为sockfd的集合）判断是listenfd还是clientfd就行了。

通过将MAX_PORT个io都放入到epoll中去管理

三、Connection time out----->设置当前系统设置最大连接数和防火墙对外的最大连接数

 运行到后来,客户端还是会出现问题

 可以看到64999非常接近65535这个数

排查问题

通过命令来查看 系统所有进程一共可以打开的文件数量 

 

结果很大，因此和最大可打开的文件数量没有关系

查看当前系统设置最大连接数

 这是 内核里面设置的防火墙对外的最大连接数

 因此需要设置参数,linux内核中的参数，都可以通过sysctl.conf来设置

 修改后，通过下面这条命令进行生效

 

四、服务器 too many open files in system ----> 设置file_max

然后发现，服务器端，出现了问题，too many open files in system 

发现服务器的file-max不够大

 

 对服务器端的/etc/sysctl.conf 同样进行修改

 

通过sudo sysctl -p去更新

如果出现问题

 需要 运行下列命令。

 

Linux modprobe命令用于自动处理可载入模块。modprobe可载入指定的个别模块，或是载入一组相依的模块。

 然后再sudo sysctl -p去更新

五、内存不够----->调整TCP/IP协议栈 参数

在跑的时候查看htop，发现当一段时间后，fd个数不再增加了

服务器停住了，因为内存满了，但是过一会又开始下降，说明是内存开始回收。
一旦开始对客户端大量进程结束，cpu的利用率会到达100%（而一般不能这么做，一般不能超过80%）

这时候就要调整 TCP/IP协议栈了。

 net.ipv4.tcp_mem, tcp全局缓存大小，单位是页（4k）从左到右分别是 1G   2G   3G

  2G之前系统不会有什么行动，2~3G系统会进行内存优化（比如对没用的TCP连接进行回收），3G以上禁止分配

net.ipv4.tcp_wmem对应tcp套接字的发送缓冲区，单位是B，从左到右分别是最小值、默认值（创建套接字时分配的大小）和最大值

net.ipv4.tcp_rmem对应tcp套接字的接收缓冲区，单位是B，从左到右分别是最小值、默认值（创建套接字时分配的大小）和最大值 

sockfd-->2k

1024字节2*100w差不多为2G。（通过这种方式计算出来）

总的缓存=（每个fd发送缓存+每个fd接受缓存）*fd数量

如果想做到千万并发，就要用到用户态协议栈了

如果想提升客户端连接速度，可以将100个listenfd放入100个线程中去
把clientfd和listenfd放到不同的线程中
如果只利用一个端口8888，开多个进程