Ubuntu系统中怎么统计HTTP请求数

本篇内容介绍了“Ubuntu系统中怎么统计HTTP请求数”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!

站在用户的角度思考问题,与客户深入沟通,找到新田网站设计与新田网站推广的解决方案,凭借多年的经验,让设计与互联网技术结合,创造个性化、用户体验好的作品,建站类型包括:网站设计制作、成都网站设计、企业官网、英文网站、手机端网站、网站推广、域名申请雅安服务器托管、企业邮箱。业务覆盖新田地区。

安装
tcpdump的安装还是比较讨厌的...
1.网上下载获得libpcap和tcpdump
http://www.tcpdump.org/
2.安装c编译所需包:

代码如下:

apt-get install build-essential


3.安装 libpcap的前置:

代码如下:

apt-get install flex,apt-get install bison


4.安装libpcap。
tcpdump的使用必须有这库。

代码如下:


tar  xvfz libpcap-1.2.1.tar.gz     //解压


进入解压之后的文件目录   运行

代码如下:


./configure      //生成makefile文件
make              //进行编译
make install   //安装  


库文件默认安装在目录  /usr/lib,头文件默认安装在  /usr/include
5.安装tcpdump

代码如下:


tar  xvfz tcpdump.4.2.1.tar.gz     //解压


进入解压之后的文件目录   运行

代码如下:


./configure      //生成makefile文件
make              //进行编译
make install   //安装   库文件默认安装在目录  /usr/lib,头文件默认安装在  /usr/include


测试是否成功安装:命令行输入 tcpdump有网络信息显示!!
6.可能遇到的问题:

代码如下:


#tcpdump
#tcpdump: no suitable device found


原因:网络监听需要root权限,切换到root用户下就可以正常使用了。

借助tcpdump统计http请求
这里所说的统计http请求,是指统计QPS(每秒请求数),统计前十条被访问最多的url。一般做这样的统计时,我们经常会使用网站访问日志来统计。当我们来到一个陌生的服务器环境,需要立即统计当前前十条被访问最多的url,来初步确定是否存在攻击行为,使用tcpdump则简单得多,因为我们不需要关心网站日志在哪,不需要考虑网站日志有没有开启之类的问题,直接用tcpdump捕捉当前的http包,再进一步过滤,就会得出我们想要的统计。此功能已集成到EZHTTP,下面是效果图:
Ubuntu系统中怎么统计HTTP请求数

下面介绍其统计方法。
1、捕捉10秒的数据包。

代码如下:


tcpdump -i eth0 tcp[20:2]=0x4745 or tcp[20:2]=0x504f -w /tmp/tcp.cap -s 512 2>&1 &
sleep 10
kill `ps aux | grep tcpdump | grep -v grep | awk '{print $2}'`


此命令表示监控网卡eth0,捕捉tcp,且21-22字节字符为GE或者PO,表示匹配GET或者POST请求的数据包,并写到/tmp/tcp.cap文件。
2、这时候我们得到最新10秒的二进制数据包文件,我们下一步就是通过strings命令来找出GET/POST的url以及Host。

代码如下:


strings /tmp/tcp.cap | grep -E "GET /|POST /|Host:" | grep --no-group-separator -B 1 "Host:" | grep --no-group-separator -A 1 -E "GET /|POST /" | awk '{url=$2;getline;host=$2;printf ("%s\n",host""url)}' > url.txt


此命令是本文的关键,通过strings显示二进制文件tcp.cap所有可打印字符,然后通过grep和awk过滤出http请求,并把拼接得到的url(包括域名+uri)写进一个文件url.txt。
3、这时我们拿到了近10秒钟所有的访问url,接下来的统计就容易得出,比如:
统计QPS:

代码如下:


(( qps=$(wc -l /tmp/url.txt | cut -d' ' -f 1) / 10 ))


排除静态文件统计前10访问url:

代码如下:


grep -v -i -E "\.(gif|png|jpg|jpeg|ico|js|swf|css)" /tmp/url.txt | sort | uniq -c | sort -nr | head -n 10

“Ubuntu系统中怎么统计HTTP请求数”的内容就介绍到这里了,感谢大家的阅读。如果想了解更多行业相关的知识可以关注创新互联网站,小编将为大家输出更多高质量的实用文章!


网站标题:Ubuntu系统中怎么统计HTTP请求数
路径分享:http://myzitong.com/article/pshjih.html