资讯专栏INFORMATION COLUMN

上云采购季！| 2核2G4M爆款云服务器低至59元/年，更有多台、长期优惠，快来选购！

立即前往
首页/文章专栏/【Nginx源码研究】Nginx中FastCGI浅析

【Nginx源码研究】Nginx中FastCGI浅析

Taste / 1160人阅读

摘要：可以通过等方式按照协议通信。上述都需要发送结束包。函数所需的变量在进入该函数之前认为已经初始化完成。和都有自己的，且互不干涉，后续发送的序列号以此为基准。

运营研发团队 施洪宝

一. FastCGI协议简介 1.1 简介

FastCGI(Fast Common Gateway Interface, 快速通用网关接口)是一种通信协议。可以通过Unix Domain Socket, Named Pipe, TCP等方式按照FastCGI协议通信。

图 1.1 FastCGI简介

1.2 数据包格式

FastCGI数据包两部分, 头部(header), 包体(body), 每个数据包都必须包含header, body可以没有。header为8个字节, body必须为8的整数倍, 不是的话需要填充。

1.2.1 头部 
typedef struct {
    unsigned char version;            // 版本号
    unsigned char type;               // 数据包类型
    unsigned char requestIdB1;        // 记录id高8位
    unsigned char requestIdB0;        // 记录id低8位
    unsigned char contentLengthB1;    // 记录内容长度高8位(body长度高8位)
    unsigned char contentLengthB0;    // 记录内容长度低8位(body长度低8位)
    unsigned char paddingLength;      // 补齐位长度(body补齐长度)
    unsigned char reserved;           // 补齐位
}Header;

图 1.2 FastCGI协议数据包头部字段说明

type的取值

#define FCGI_BEGIN_REQUEST       1                     //(web->fastcgi)请求开始数据包
#define FCGI_ABORT_REQUEST       2                     //(web->fastcgi)终止请求
#define FCGI_END_REQUEST         3                     //(fastcgi->web)请求结束
#define FCGI_PARAMS              4                     //(web->fastcgi)传递参数
#define FCGI_STDIN               5                     //(web->fastcgi)数据流传输数据
#define FCGI_STDOUT              6                     //(fastcgi->web)数据流传输数据
#define FCGI_STDERR              7                     //(fastcgi->web)数据流传输
#define FCGI_DATA                8                     //(web->fastcgi)数据流传输
#define FCGI_GET_VALUES          9                     //(web->fastcgi)查询fastcgi服务器性能参数
#define FCGI_GET_VALUES_RESULT  10                     //(fastcgi->web)fastcgi性能参数查询返回
#define FCGI_UNKNOWN_TYPE       11
#define FCGI_MAXTYPE (FCGI_UNKNOWN_TYPE)
1.2.2 params类型数据包

图 1.3 Params数据包

说明:

params数据包以key, value格式发送, 具体格式为(keyLen, valLen, key, val)

key或者val长度大于127时，会用4个字节存储长度，否则用一个字节

1.2.3 数据流类型数据包(stdin, stdout, stderr, data)

图 1.4 数据流类型数据包

1.3 通信流程示例

图 1.5 FastCGI简单通信流程

说明:

begin request 代表请求开始, end request 代表请求结束。

除begin request, end request类型数据包外, 其他类型数据包在发送完成后，需要发送一个只有头部，包体长度为0, 也就是没有包体的数据包，代表这种类型的数据包发送结束。上述params, stdin, stdout, stderr 都需要发送结束包。

1.4 参考

https://segmentfault.com/a/11...

https://blog.csdn.net/hepangd...

二. Nginx FastCGI

nginx发送的缓冲区数据格式如下:

图 2.1 FastCGI数据包总体结构图

说明:

本部分主要依据ngx_http_fastcgi_create_request函数, 该函数会构造缓存区，并向其中写入上图所示内容，在该函数执行完后，会根据实际情况选择是否继续向缓冲区写入数据，后续情况在此不做讨论。

ngx_http_fastcgi_create_request 函数所需的变量, 在进入该函数之前认为已经初始化完成。

2.1 示例 2.1.1 upstream 发送缓冲区 
//r.upstream.request_bufs.buf.pos
//begin request header
01010001000000
//begin request body
0001000000000000
//begin params header
01040001020000
//begin parmas body

04PRODUCTIONtrue
1761SCRIPT_FILENAME/home/codes/nginx-1.6.2/output/html8100/index.php
f00QUERY_STRING
1603REQUEST_METHODGET
f00CONTENT_TYPE
1600CONTENT_LENGTH
v
SCRIPT_NAME/index.php
v01REQUEST_URI/
f
DOCUMENT_URI/index.php

"DOCUMENT_ROOT/home/codes/nginx-1.6.2/output/html8100
17SERVER_PROTOCOLHTTP/1.1
21aGATEWAY_INTERFACECGI/1.1
17vSERVER_SOFTWAREnginx/1.6.2
v	REMOTE_ADDR127.0.0.1
v05REMOTE_PORT42146
v	SERVER_ADDR127.0.0.1
v04SERVER_PORT8100
v00SERVER_NAME
1703REDIRECT_STATUS200
17vHTTP_USER_AGENTcurl/7.29.0
	16HTTP_HOSTlocalhost:8100
v03HTTP_ACCEPT*/*
//end params header
0104000100000000
//begin stdin header, 包体长度为0, 可以认为stdin类型数据包发送结束
0105000100000000
2.1.2 Params 数据包参数整理

2.2 源码解析 2.2.1 基础 2.2.1.1 le.ip结构图

图 2.2 le.ip 结构图

2.2.1.2 e.ip结构图

图2.3 e.ip结构图

2.2.2 ngx_http_fastcgi_create_request

该函数主要依据图2.1， 将所需数据写入到ngx_http_request_t对应的ngx_http_upstream_t的缓冲区中。

写入key, val时, 通过调用相应函数实现, 该函数是与对应的key, val放置在一起的, 如图2.3所示。

//params数据包写入核心代码
while (*(uintptr_t *) le.ip) {
    lcode = *(ngx_http_script_len_code_pt *) le.ip;
    key_len = (u_char) lcode(&le); //获取key的长度
    lcode = *(ngx_http_script_len_code_pt *) le.ip;
    skip_empty = lcode(&le);      //查看空时是否跳过
    for (val_len = 0; *(uintptr_t *) le.ip; val_len += lcode(&le)) {
        lcode = *(ngx_http_script_len_code_pt *) le.ip;
    }
    le.ip += sizeof(uintptr_t);        //当前key:value结束, le.ip后移1位
    if (skip_empty && val_len == 0) { //value为空, 并且设置空时跳过该key
        e.skip = 1;
        while (*(uintptr_t *) e.ip) {
            code = *(ngx_http_script_code_pt *) e.ip;
            code((ngx_http_script_engine_t *) &e);
        }
        e.ip += sizeof(uintptr_t);
        e.skip = 0;
        continue;
    }
    *e.pos++ = (u_char) key_len; //写入key len 
    if (val_len > 127) {         //写入value len
        *e.pos++ = (u_char) (((val_len >> 24) & 0x7f) | 0x80);
        *e.pos++ = (u_char) ((val_len >> 16) & 0xff);
        *e.pos++ = (u_char) ((val_len >> 8) & 0xff);
        *e.pos++ = (u_char) (val_len & 0xff);
    } else {
        *e.pos++ = (u_char) val_len;
    }
    while (*(uintptr_t *) e.ip) {
        code = *(ngx_http_script_code_pt *) e.ip;
        code((ngx_http_script_engine_t *) &e);  //调用code存储的处理函数, 负责将key, value内容写入缓存, 并将e.ip后移
    }
    e.ip += sizeof(uintptr_t);                  //当前Key:Value结束, 跳过NULL, e.ip后移一位
    ngx_log_debug4(NGX_LOG_DEBUG_HTTP, r->connection->log, 0,
                   "fastcgi param: "%*s: %*s"",
                   key_len, e.pos - (key_len + val_len),
                   val_len, e.pos - val_len);
}
三. 抓包分析 3.1 TCP三次握手 
14:50:02.836252 IP bogon.46288 > localhost.cslistener: Flags [S], seq 304127093, win 29200, options [mss 1460,sackOK,TS val 105743206 ecr 0,nop,wscale 7], length 0
14:50:02.874743 IP localhost.cslistener > bogon.46288: Flags [S.], seq 15154, ack 304127094, win 32768, options [mss 1460], length 0
14:50:02.874804 IP bogon.46288 > localhost.cslistener: Flags [.], ack 15155, win 29200, length 0

代码1.1 tcpdump三次握手

图1.1 三次握手链接过程

Client发送请求包seq 304127093，Server返回确认数据包ack=seq(client)+1，同时返回Server自己的seq 15154，Client收到后发送确认包ack=seq(server)+1，建立链接。
Client和Server都有自己的seq，且互不干涉，后续发送的序列号以此为基准。

3.2 发送数据

图2.2 请求数据包图2.1 Client向Server发送请求数据包

Mac帧头部(14字节)

IP头部(20字节)

TCP头部(20字节)

FastCGI数据包(begin request(8+ 8 = 16) + params(8 + 507 + 5 = 520) + end params(8+ 0 = 8) + stdin(8 + 0 = 8) = 552)

Params 数据包参数整理:

说明

stdin类型数据包长度大于32k时, nginx fastcgi会进行分包, 此时会发送多个stdin类型数据包, 发送完成后再发送stdin结束包(只有包头，没有包体的数据包)。

wireshark或者tcpdump抓包时, 可能会出现某个数据包长度大于MTU, 主要是由于主机开启TSO功能导致, 具体可以参考http://wsfdl.com/%E8%B8%A9%E5...

TSO进行的是TCP分段, 不是IP分片

如果抓到的包, IP头部, identified field is 0, 表明tcp不需分段, don"t fragment 置位1, 具体参考http://www.linuxsa.org.au/pip...

TCP头部可选项含义参考https://www.jianshu.com/p/39b...

3.3 响应包 
14:50:02.913289 IP localhost.cslistener > bogon.46288: Flags [P.], seq 15155:15395, ack 304127646, win 32216, length 240
    0x0000:  0800 2701 5190 5254 0012 3500 0800 4500  ..".Q.RT..5...E.
    0x0010:  0118 02bf 0000 ff06 2fb6 0a60 7207 0a00  ......../..`r...
    0x0020:  0204 2328 b4d0 0000 3b33 1220 9e9e 5018  ..#(....;3....P.
    0x0030:  7dd8 df40 0000 0106 0001 00d8 0000 5365  }..@..........Se
    0x0040:  742d 436f 6f6b 6965 3a20 5048 5053 4553  t-Cookie:.PHPSES
    0x0050:  5349 443d 6268 3174 3772 6e61 3233 716c  SID=bh1t7rna23ql
    0x0060:  6d63 6235 6d6a 686d 3967 756f 7631 3b20  mcb5mjhm9guov1;.
    0x0070:  7061 7468 3d2f 0d0a 4578 7069 7265 733a  path=/..Expires:
    0x0080:  2054 6875 2c20 3139 204e 6f76 2031 3938  .Thu,.19.Nov.198
    0x0090:  3120 3038 3a35 323a 3030 2047 4d54 0d0a  1.08:52:00.GMT..
    0x00a0:  4361 6368 652d 436f 6e74 726f 6c3a 206e  Cache-Control:.n
    0x00b0:  6f2d 7374 6f72 652c 206e 6f2d 6361 6368  o-store,.no-cach
    0x00c0:  652c 206d 7573 742d 7265 7661 6c69 6461  e,.must-revalida
    0x00d0:  7465 0d0a 5072 6167 6d61 3a20 6e6f 2d63  te..Pragma:.no-c
    0x00e0:  6163 6865 0d0a 436f 6e74 656e 742d 7479  ache..Content-ty
    0x00f0:  7065 3a20 7465 7874 2f68 746d 6c3b 2063  pe:.text/html;.c
    0x0100:  6861 7273 6574 3d55 5446 2d38 0d0a 0d0a  harset=UTF-8....
    0x0110:  646f 636b 6572 0103 0001 0008 0000 0000  docker..........
    0x0120:  0000 0064 223a                           ...d":

代码2.2 Server向Client发送响应数据包

Mac帧头部(14字节)

IP头部(20字节)

TCP头部(20字节)

FastCGI数据包(begin stdout(8+ 216 = 224) + end request(8+ 8 = 16) = 240)

3.4 Client发送接收Server数据的确认包 
14:50:02.913365 IP bogon.46288 > localhost.cslistener: Flags [.], ack 15395, win 30016, length 0

图2.2 数据发送

3.5 断开链接 
14:50:02.913629 IP bogon.46288 > localhost.cslistener: Flags [F.], seq 304127646, ack 15395, win 30016, length 0
14:50:02.913767 IP localhost.cslistener > bogon.46288: Flags [.], ack 304127647, win 32215, length 0
14:50:02.951270 IP localhost.cslistener > bogon.46288: Flags [F.], seq 15395, ack 304127647, win 32215, length 0
14:50:02.951452 IP bogon.46288 > localhost.cslistener: Flags [.], ack 15396, win 30016, length 0

代码3.1 tcp断开链接

图3.1 tcpdump抓包对应的tcp流程图

3.6 参考

https://my.oschina.net/manmao...

https://segmentfault.com/a/11...

GPU云服务器 云服务器 nginx源码 nginx源码分析 nginx配置中开启gzip 源码浅析

文章版权归作者所有，未经允许请勿转载,若此文章存在违规行为，您可以联系管理员删除。

转载请注明本文地址：https://www.ucloud.cn/yun/40128.html

相关文章

  • 【Nginx源码研究】Tcpdump抓包Nginx中FastCGI协议实战

    摘要：可以通过等方式按照协议通信。函数所需的变量在进入该函数之前认为已经初始化完成。和都有自己的，且互不干涉，后续发送的序列号以此为基准。 运营研发团队 方波 施洪宝 一. FastCGI协议简介 1.1 简介 FastCGI(Fast Common Gateway Interface, 快速通用网关接口)是一种通信协议。可以通过Unix Domain Socket, Named Pipe...

    leone 评论0 收藏0

  • 【Nginx源码研究】FastCGI模块详解总结篇

    摘要：定义了一个统一结构的个字节消息头，用来标识每个消息的消息体，以及实现消息数据的分割。 运营研发 李乐 1.初识FastCGI协议 FastCGI 是一种协议，规定了FastCGI应用和支持FastCGI的Web服务器之间的接口。FastCGI是二进制连续传递的。 1.1消息头 FastCGI定义了多种类型的消息；nginx对FastCGI消息类型定义如下： #define NGX_HT...

    awkj 评论0 收藏0

  • 编译安装nginx1.9.7+php7.0.0服务器环境

    摘要：为提供模块，需要库支持为提供功能为支持地址重写功能确保已正确安装在上面的基础环境安装中，我们已经安装了，但是部分服务器上并没有的安装包，所以我们可以通过下载包自行编译安装。 一直以来我都通过网上的一些材料去搭建lnmp环境，通过直接yum安装nginx mysql php等软件。但是为了原生态的编译安装最新的软件版本，我决定自己亲手搭建lnmp环境，采用最新的nginx1.9.7(昨天...

    gggggggbong 评论0 收藏0

  • 给自己的博客网站加上酷炫的初音未来音乐游戏？

    摘要：嘻嘻大功告成计划完美实现参考文献乐柔嘴巴反向代理学习及实例笔记利用的反向代理克隆生成镜像网站中间人攻击原作者的原始游戏页面上国人搬运的开源镜像特别致谢执着的少年 先前在某个Q群里有位网友发了个链接，一点进去，发现是个极度让人耳目一新的初音未来音乐网页游戏。 为了让有幸看到这篇文章的看官也来体会下本人第一次玩时的激动，抛个链接——乐柔嘴巴。链接的具体地址是blog.eunji.cn/m...

    caozhijian 评论0 收藏0

发表评论

登陆后可评论

0条评论

Taste

男|高级讲师
我要私信

TA的文章

阅读更多
最新活动
阅读需要支付1元查看
<