LinuxC/C++学习笔记(九):百万并发的服务器实现-创新互联

本文内容参考自(2条消息) Linux C/C++ 开发(学习笔记十三):百万并发的服务器实现_菊头蝙蝠的博客-博客_linux百万并发

让客户满意是我们工作的目标,不断超越客户的期望值来自于我们对这个行业的热爱。我们立志把好的技术通过有效、简单的方式提供给客户,将通过不懈努力成为客户在信息化领域值得信任、有价值的长期合作伙伴,公司提供的服务项目有:域名与空间、雅安服务器托管、营销软件、网站建设、西安网站维护、网站推广。一、connection_refuesed ---->文件系统大的进程fd个数

nat 模式,物理机的VMnet8网卡,连接到了VMnet8虚拟交换机,在本机使用网络调试助手要使用此ip,其他ip连不上。

linux 文件系统默认的文件描述符的数量是1024个,可以通过ulimit -a命令查看

可通过ulimit -n命令进行修改,这种修改方式是临时修改,系统重启后又恢复原状

可通过修改文件永久修改系统默认的文件描述符数量

在这里插入图片描述

在那个文件下添加两行

在这里插入图片描述

reboot后即可

二、Cannot assign requested address----->在服务器开多个端口 问题及原因

在客户端这边,远程ip,远程端口,协议都是确定的,本机ip也是确定的,那么实际上就是本机的端口耗尽了。

解决方法就是 在服务器开多个端口。

解决问题

通过一个循环,开MAX_PORT个端口,每个为一个sockfd
并把每个sockfd加入到epoll中去
最后还需要用一个数组,将每次遇到的sockfd存入到数组后。(由于后续在监听到数据后,需要区分是listenfd还是客户端的信息)

后续while(1) 持续监听的时候,通过sockfds数组(理解为sockfd的集合)判断是listenfd还是clientfd就行了。

通过将MAX_PORT个io都放入到epoll中去管理

三、Connection time out----->设置当前系统设置大连接数和防火墙对外的大连接数

运行到后来,客户端还是会出现问题

可以看到64999非常接近65535这个数

排查问题

通过命令来查看 系统所有进程一共可以打开的文件数量 

结果很大,因此和大可打开的文件数量没有关系

查看当前系统设置大连接数

这是 内核里面设置的防火墙对外的大连接数

在这里插入图片描述

因此需要设置参数,linux内核中的参数,都可以通过sysctl.conf来设置

在这里插入图片描述

修改后,通过下面这条命令进行生效

在这里插入图片描述

四、服务器 too many open files in system ---->设置file_max

然后发现,服务器端,出现了问题,too many open files in system 

在这里插入图片描述发现服务器的file-max不够大

在这里插入图片描述

对服务器端的/etc/sysctl.conf 同样进行修改

在这里插入图片描述

通过sudo sysctl -p去更新

如果出现问题

在这里插入图片描述

需要 运行下列命令。

在这里插入图片描述

Linux modprobe命令用于自动处理可载入模块。modprobe可载入指定的个别模块,或是载入一组相依的模块。

然后再sudo sysctl -p去更新

五、内存不够----->调整TCP/IP协议栈 参数

在跑的时候查看htop,发现当一段时间后,fd个数不再增加了

在这里插入图片描述

服务器停住了,因为内存满了,但是过一会又开始下降,说明是内存开始回收。
一旦开始对客户端大量进程结束,cpu的利用率会到达100%(而一般不能这么做,一般不能超过80%)

这时候就要调整 TCP/IP协议栈了。

在这里插入图片描述

在这里插入图片描述

net.ipv4.tcp_mem, tcp全局缓存大小,单位是页(4k)从左到右分别是 1G   2G   3G

2G之前系统不会有什么行动,2~3G系统会进行内存优化(比如对没用的TCP连接进行回收),3G以上禁止分配

net.ipv4.tcp_wmem对应tcp套接字的发送缓冲区,单位是B,从左到右分别是最小值、默认值(创建套接字时分配的大小)和大值

net.ipv4.tcp_rmem对应tcp套接字的接收缓冲区,单位是B,从左到右分别是最小值、默认值(创建套接字时分配的大小)和大值 

sockfd-->2k

1024字节2*100w差不多为2G。(通过这种方式计算出来)

总的缓存=(每个fd发送缓存+每个fd接受缓存)*fd数量

如果想做到千万并发,就要用到用户态协议栈了

如果想提升客户端连接速度,可以将100个listenfd放入100个线程中去
把clientfd和listenfd放到不同的线程中

如果只利用一个端口8888,开多个进程

你是否还在寻找稳定的海外服务器提供商?创新互联www.cdcxhl.cn海外机房具备T级流量清洗系统配攻击溯源,准确流量调度确保服务器高可用性,企业级服务器适合批量采购,新人活动首月15元起,快前往官网查看详情吧


分享文章:LinuxC/C++学习笔记(九):百万并发的服务器实现-创新互联
文章起源:http://myzitong.com/article/ddijce.html