• 网络协议定制


    目录

    一、协议定制

    1.再谈协议

    2.认识序列化与反序列化

    二、网络计算器

    1.序列化与反序列化头文件

    2.服务端

    3.客户端

    4.makefile

    5.运行结果

    三、json序列化与反序列化

    1.常用序列化与反序列化库

    2.安装

    3.使用

    (1)Request的序列化

    (2)Request的反序列化


    一、协议定制

    1.再谈协议

    协议本质是一种“约定”,在前面的TCP和UDP网络通信中,读写数据的时候都是按照"字符串"的形式发送和接收的,那我们如果不发送字符串,而是要传送一些结构化的数据怎么办呢?

    比如说,我们观察QQ或微信的聊天窗口,屏幕上的信息包括头像(url)、时间、昵称、消息等。

    用户发送的消息虽然大部分是字符串,但是经过用户层(QQ或微信软件)处理后,还需要增加头像,时间,昵称等信息。如果我们将这几个信息看做多个字符串,那么就可以将这多个字符串形成一个结构化的数据,比如下面示例的struct message。

    此时网络中发送的就不再只是一个字符串,而是像类变量这样的复杂结构。

    1. struct message
    2. {
    3. string url;
    4. string time;
    5. string nickname;
    6. string msg;
    7. };

    2.认识序列化与反序列化

    序列化:将任意类型的数据或者数据结构转换成一个字符串。

    由于系统调用接口的限制,在发送这样的结构体之前,必须将结构化的数据序列化,然后才能通过socket发送到网络中。

    比如用户用微信A向用户B发送信息,微信就创建了一个上面的message结构体。序列化可将所有成员合并成一个字符串报文,网络再将序列化后的数据发送给用户B。

    反序列化:将一个字符串中不同信息类型的字串提取出来,并且还原回结构化类型的数据。

    用户B接收到一个字符串报文,然后用户B的应用层(微信软件)将接收到的报文反序列化,还原回原来结构化的message结构体,此时微信就能将对应数据显示在不同位置,用户B就可以看到这些信息。

    对于面向字节流的TCP协议,业务结构数据在发送到网络中的时候,需要先序列化。接收方收到的是序列化后的字节流,要先进行反序列化才能使用。

    由于UDP协议面向数据报,所以无需进行序列化以及反序列化。

    在微信聊天的过程中,用户A发送的与用户B接受的都是同一种数据结构,所以用户A构建的message是按照特定的成员顺序组成的,用户B就必须按照这样的成员顺序去使用它接收到的message。

    所以我们可以说,这样的通信“约定”就是一个用户层的协议,者个协议的载体就是message结构体。

    二、网络计算器

    我们使用之前写过的tcp通信客户端和服务端的多进程版本实现这个网络计算器。

    数据的处理与流转过程大致如下:

    用户输入计算式(比如:1+1)->构造一个Request变量->序列化为字符串"a op b"

    ->添加报头转化为报文"content_len"\r\n"a op b"\r\n->将报文发给服务端

    服务端接收报文->去掉报头得到正文"a op b"->反序列化为Request变量->服务端使用计算函数处理Request变量得到Response变量->Response变量序列化为字符串"exitcode result"->添加报头转化为报文"content_len"\r\n"exitcode result"\r\n->将报文发给客户端

    客户端接收报文->去掉报头得到正文"exitcode result"->反序列化为Response变量->打印Response变量的内容。

    下面的代码中有详细的注释介绍

    1.序列化与反序列化头文件

    protocol.hpp

    1. #pragma once
    2. #define MYSELF
    3. #include
    4. #include
    5. #include
    6. #include
    7. #include
    8. #include
    9. #define SEP " "
    10. #define SEP_LEN strlen(SEP) //使用sizeof()多了一个\0
    11. #define LINE_SEP "\r\n"
    12. #define LINE_SEP_LEN strlen(LINE_SEP) //使用sizeof()多了一个\0
    13. enum
    14. {
    15. OK = 0,
    16. DIV_ZERO,
    17. MOD_ZERO,
    18. OP_ERROR
    19. };
    20. //"content" 转化为 "content_len"\r\n"content"\r\n
    21. //加上报头
    22. std::string enlength(const std::string &text)
    23. {
    24. //按"content_len"\r\n"content"\r\n拼接字符串
    25. std::string send_string = std::to_string(text.size());
    26. send_string += LINE_SEP;
    27. send_string += text;
    28. send_string += LINE_SEP;
    29. return send_string;
    30. }
    31. //"content_len"\r\n"content"\r\n 转化为 "content"
    32. //去掉报头
    33. bool delength(const std::string &package, std::string *text)
    34. {
    35. //查找左侧的\r\n
    36. auto pos = package.find(LINE_SEP);
    37. if (pos == std::string::npos)
    38. return false;//没找到表明数据有问题
    39. //截取正文长度的字符串并转为整形
    40. std::string text_len_string = package.substr(0, pos);
    41. int text_len = std::stoi(text_len_string);
    42. //截取正文放入储存正文的string里
    43. *text = package.substr(pos + LINE_SEP_LEN, text_len);
    44. return true;
    45. }
    46. class Request
    47. {
    48. public:
    49. Request()
    50. :_a(0)
    51. ,_b(0)
    52. ,_op(0)
    53. {}
    54. Request(int a, int b, char op)
    55. :_a(a)
    56. ,_b(b)
    57. ,_op(op)
    58. {}
    59. //Request序列化
    60. //Request结构体转化为字符串"a op b"
    61. bool serialize(std::string *out)
    62. {
    63. out->clear();//清空
    64. //将变量转为字符串
    65. std::string a_string = std::to_string(_a);
    66. std::string b_string = std::to_string(_b);
    67. *out = a_string;
    68. *out += SEP;
    69. *out += _op;
    70. *out += SEP;
    71. *out += b_string;
    72. return true;
    73. }
    74. //Request反序列化
    75. //字符串"a op b"转化为Request结构体
    76. bool deserialize(const std::string &in)
    77. {
    78. auto left = in.find(SEP);//查找左侧的SEP
    79. auto right = in.rfind(SEP);//查找右侧的SEP
    80. if (left == std::string::npos || right == std::string::npos)
    81. return false;//找不到,数据有问题
    82. if (left == right)
    83. return false;//只有一个SEP,数据有问题
    84. if ((right - 1) != (left + SEP_LEN))//在字符串"a op b"中,right - 1和left + SEP_LEN都指向op
    85. return false;//指向的不是一个位置,数据有问题
    86. //按左闭右开的方式构造两个数字
    87. std::string a_string = in.substr(0, left);
    88. std::string b_string = in.substr(right + SEP_LEN);
    89. //读取到的数字不能为空
    90. if (a_string.empty() || b_string.empty())
    91. return false;
    92. //填入数据
    93. _a = std::stoi(a_string);
    94. _b = std::stoi(b_string);
    95. _op = in[left + SEP_LEN];
    96. return true;
    97. }
    98. public:
    99. int _a;
    100. int _b;
    101. char _op;
    102. };
    103. class Response
    104. {
    105. public:
    106. Response()
    107. :_exitcode(0)
    108. ,_result(0)
    109. {}
    110. Response(int exitcode, int result)
    111. :_exitcode(exitcode)
    112. ,_result(result)
    113. {}
    114. //Response序列化
    115. //Response结构体转化为字符串"exitcode result"
    116. bool serialize(std::string *out)
    117. {
    118. out->clear();//清空
    119. //将变量转为字符串
    120. std::string ec_string = std::to_string(_exitcode);
    121. std::string res_string = std::to_string(_result);
    122. //拼接字符串
    123. *out = ec_string;
    124. *out += SEP;
    125. *out += res_string;
    126. return true;
    127. }
    128. //Response反序列化
    129. //字符串"exitcode result"转化为Response结构体
    130. bool deserialize(const std::string &in)
    131. {
    132. auto mid = in.find(SEP);//查找中间的SEP
    133. if (mid == std::string::npos)
    134. return false;//找不到,出错
    135. //按左闭右开的方式构造两个数字
    136. std::string ec_string = in.substr(0, mid);
    137. std::string res_string = in.substr(mid + SEP_LEN);
    138. //读取到的退出码和计算结果不能为空
    139. if (ec_string.empty() || res_string.empty())
    140. return false;
    141. //填入数据
    142. _exitcode = std::stoi(ec_string);
    143. _result = std::stoi(res_string);
    144. return true;
    145. }
    146. public:
    147. int _exitcode; // 0:计算成功,!0表示计算失败,具体是多少,定好标准
    148. int _result; // 计算结果
    149. };
    150. //接收的数据:"content_len"\r\n"a op b"\r\n ......
    151. bool recvpackage(int sock, std::string &inbuffer, std::string *text)
    152. {
    153. char buffer[1024];//接收网络数据的字符串
    154. while (true)
    155. {
    156. ssize_t n = recv(sock, buffer, sizeof(buffer) - 1, 0);//接收数据
    157. if (n > 0)//读到了数据
    158. {
    159. buffer[n] = 0;
    160. inbuffer += buffer;//以追加的方式放入缓冲区ibuffer
    161. auto pos = inbuffer.find(LINE_SEP);//查找LINE_SEP,就是\r\n
    162. if (pos == std::string::npos)
    163. //如果没有找到LINE_SEP,就说明报文"content_len"的部分可能没有读全
    164. continue;//接着到最开始读数据直到读全
    165. //执行至此时,报文"content_len"\r\n这部分一定读全了
    166. //可以将"content_len"的部分取出来并转化为整形
    167. std::string text_len_string = inbuffer.substr(0, pos);
    168. int text_len = std::stoi(text_len_string);
    169. //我们现在知道了报文中正文部分的长度,所以就能确定我们读到的是否是一个完整的报文
    170. //一个报文的组成为:text_len_string + "\r\n" + text + "\r\n"
    171. //所以,只要缓冲区ibuffer的内容多于一个报文的字符个数,我们就必定保证ibuffer中已经存在了一个完整的报头;
    172. int total_len = text_len_string.size() + 2 * LINE_SEP_LEN + text_len;
    173. std::cout << "处理前#inbuffer: \n" << inbuffer << std::endl;
    174. if (inbuffer.size() < total_len)
    175. {
    176. std::cout << "输入的消息没有遵守协议,正在等待后续内容" << std::endl;
    177. continue;//报文没读全继续到上面读取
    178. }
    179. //此时缓冲区中就至少有一个完整的报文
    180. *text = inbuffer.substr(0, total_len);//将一个完整报文构建子串放入输出参数中
    181. inbuffer.erase(0, total_len);//删除缓冲区中的完整报文
    182. std::cout << "处理后#inbuffer:\n " << inbuffer << std::endl;
    183. break;//准备处理报文,跳出循环
    184. }
    185. else//没读到数据
    186. return false;
    187. }
    188. return true;
    189. }

    2.服务端

    server.hpp

    1. #pragma once
    2. #include
    3. #include
    4. #include
    5. #include
    6. #include
    7. #include
    8. #include
    9. #include
    10. #include
    11. #include
    12. #include
    13. #include"log.hpp"
    14. #include"protocol.hpp"
    15. using namespace std;
    16. enum errorcode
    17. {
    18. USAGE_ERROR = 1,
    19. SOCKET_ERROR,
    20. BIND_ERROR,
    21. LISTEN_ERROR
    22. };
    23. static const uint16_t given_port = 8080;
    24. static const int given_backlog = 5;
    25. typedef function<bool(const Request&, Response&)> func_t;
    26. void handler_enter(func_t func, int sock)
    27. {
    28. std::string inbuffer;//缓冲区
    29. while (true)
    30. {
    31. //第一步,读取一个完整的"content_len"\r\n"a op b"\r\n字符串请求
    32. std::string req_text;//原数据
    33. std::string req_str;//正文
    34. //使用recvPackage接收数据并将一个完整的请求放入req_text
    35. if (!recvpackage(sock, inbuffer, &req_text))
    36. return;//函数执行错误,退出
    37. //打印该请求,让我们看到执行流程
    38. std::cout << "未去掉报头的请求:\n" << req_text << std::endl;
    39. //将字符串转化为格式化数据保存在req_text内
    40. if (!delength(req_text, &req_str))
    41. return;//函数执行错误,退出
    42. //打印,让我们看到执行流程
    43. std::cout << "已去掉报头的正文:\n" << req_str << std::endl;
    44. //第二步,对Request进行反序列化
    45. Request req;
    46. if (!req.deserialize(req_str))//将正文信息填入req内
    47. return;//函数执行错误,退出
    48. //第三步,利用func函数处理请求结构体
    49. Response resp;
    50. func(req, resp);//将req的处理结果放入resp
    51. //第四步,对Response进行序列化
    52. std::string resp_str;
    53. resp.serialize(&resp_str);//将序列化后的结构题放入resp_str
    54. std::cout << "计算完成, 序列化后的信息为:\n" << resp_str << std::endl;
    55. //将序列化的Response加上报头并发回客户端
    56. std::string send_string = enlength(resp_str);//加报头
    57. std::cout << "构建完成完整的响应\n" << send_string << std::endl;//打印加上报头后的信息
    58. send(sock, send_string.c_str(), send_string.size(), 0);//发回
    59. }
    60. }
    61. class tcpserver
    62. {
    63. public:
    64. //构造函数
    65. tcpserver(const uint16_t& port = given_port)
    66. :_port(port)
    67. ,_listensock(-1)
    68. {}
    69. //初始化服务端进程
    70. void initserver()
    71. {
    72. _listensock = socket(AF_INET, SOCK_STREAM, 0);//创建套接字
    73. if(_listensock < 0)//创建套接字失败打印错误原因
    74. {
    75. logmessage(FATAL, "create socket error");//socket失败属于最严重的错误
    76. exit(SOCKET_ERROR);//退出
    77. }
    78. logmessage(NORMAL, "create socket success:%d", _listensock);//创建套接字成功,打印让用户观察到
    79. struct sockaddr_in local;//储存本地网络信息
    80. local.sin_family = AF_INET;//通信方式为网络通信
    81. local.sin_port = htons(_port);//将网络字节序的端口号填入
    82. local.sin_addr.s_addr = INADDR_ANY;//INADDR_ANY就是ip地址0.0.0.0的宏
    83. if(bind(_listensock, (struct sockaddr*)&local, sizeof(local)) < 0)//绑定IP,不成功打印信息
    84. {
    85. logmessage(FATAL, "bind socket error");//bind失败也属于最严重的错误
    86. exit(BIND_ERROR);//退出
    87. }
    88. logmessage(NORMAL, "bind socket success");//绑定IP成功,打印让用户观察到
    89. //_listensock用于监听,不是用于通信的端口号
    90. //listen函数可设置socket为监听模式
    91. if(listen(_listensock, given_backlog) < 0) // 第二个参数backlog后面在填这个坑
    92. {
    93. logmessage(FATAL, "listen socket error");
    94. exit(LISTEN_ERROR);
    95. }
    96. logmessage(NORMAL, "listen socket success");
    97. }
    98. //启动服务端进程,多进程版本
    99. void start(func_t func)
    100. {
    101. while(1)
    102. {
    103. struct sockaddr_in peer;//储存本地网络信息
    104. socklen_t len = sizeof(peer);
    105. int sock = accept(_listensock, (struct sockaddr*)&peer, &len);
    106. //如果没有客户端连接服务端,则accept会阻塞等待新连接
    107. //如果有客户端需要连接服务端,则返回一个用于网络通信的描述符sock
    108. if(sock < 0)
    109. {
    110. logmessage(ERROR, "accept fail");//接收新文件描述符失败
    111. continue;//重新回到头接收
    112. }
    113. logmessage(NORMAL, "accept a new link");//接收新文件描述符成功
    114. //创建子进程
    115. pid_t id = fork();
    116. if(id == 0)
    117. {
    118. //由于子进程也继承了父进程的监听套接字,而监听套接字只需要一个,所以需要关闭
    119. close(_listensock);
    120. if(fork() > 0)
    121. {
    122. //子进程再次创建子进程,fork对父进程(当前是服务器的子进程)返回子进程pid,对子进程(当前是服务器的孙子进程)返回0
    123. exit(0);//服务器子进程退出
    124. }
    125. //服务器的孙子进程执行IO处理
    126. //不断处理IO任务
    127. handler_enter(func, sock);
    128. //退出该函数时,客户端已经退出,需要将进行网络传输的文件描述符释放,否则会引起资源泄露
    129. close(sock);
    130. //退出孙子进程,由于它是孤儿进程,所以会被操作系统自行回收
    131. exit(0);
    132. }
    133. }
    134. }
    135. ~tcpserver()
    136. {}
    137. private:
    138. uint16_t _port;//服务端进程的端口号
    139. int _listensock;//监听文件描述符
    140. };

    server.cc

    1. #include"server.hpp"
    2. #include
    3. #include
    4. #include
    5. //计算器函数
    6. const string ops = "+-*/%";
    7. bool calculate(const Request &req, Response &resp)
    8. {
    9. // req已经有结构化完成的数据啦,你可以直接使用
    10. resp._exitcode = OK;
    11. resp._result = 0;
    12. switch (req._op)
    13. {
    14. case '+':
    15. resp._result = req._a + req._b;
    16. break;
    17. case '-':
    18. resp._result = req._a - req._b;
    19. break;
    20. case '*':
    21. resp._result = req._a * req._b;
    22. break;
    23. case '/':
    24. {
    25. if (req._b == 0)
    26. resp._exitcode = DIV_ZERO;
    27. else
    28. resp._result = req._a / req._b;
    29. }
    30. break;
    31. case '%':
    32. {
    33. if (req._b == 0)
    34. resp._exitcode = MOD_ZERO;
    35. else
    36. resp._result = req._a % req._b;
    37. }
    38. break;
    39. default:
    40. resp._exitcode = OP_ERROR;
    41. break;
    42. }
    43. return true;
    44. }
    45. static void Usage(string proc)
    46. {
    47. printf("\nUsage:\n\t%s local_port\n\n",proc.c_str());
    48. }
    49. int main(int argc, char* argv[])
    50. {
    51. if(argc != 2)//如果没输入端口号,argc保存的命令参数只有一个,进程出错
    52. {
    53. Usage(argv[0]);
    54. exit(USAGE_ERROR);
    55. }
    56. uint16_t port = atoi(argv[1]);
    57. unique_ptr p(new tcpserver(port));
    58. p->initserver();
    59. p->start(calculate);
    60. return 0;
    61. }

    3.客户端

    client.hpp

    1. #pragma once
    2. #include
    3. #include
    4. #include
    5. #include
    6. #include
    7. #include
    8. #include
    9. #include
    10. #include
    11. #include
    12. #include
    13. #include
    14. #include
    15. #include"log.hpp"
    16. #include"protocol.hpp"
    17. #define NUM 1024
    18. enum errorcode
    19. {
    20. USAGE_ERROR = 1,
    21. SOCKET_ERROR,
    22. BIND_ERROR,
    23. CONNECT_ERROR
    24. };
    25. Request ParseLine(const std::string &line);
    26. class tcpclient
    27. {
    28. public:
    29. //构造函数
    30. tcpclient(const std::string& ip, const uint16_t& port)
    31. :_ip(ip)
    32. ,_port(port)
    33. ,_sock(-1)
    34. {}
    35. void initclient()
    36. {
    37. //创建套接字,创建失败打印错误原因
    38. _sock = socket(AF_INET, SOCK_STREAM, 0);
    39. if(_sock == -1)
    40. {
    41. logmessage(FATAL, "create socket error");//socket失败属于最严重的错误
    42. exit(SOCKET_ERROR);//退出
    43. }
    44. logmessage(NORMAL, "create socket success:%d", _sock);//创建套接字成功,打印让用户观察到
    45. //客户端不需要显式绑定,该工作交给操作系统完成
    46. }
    47. //启动客户端进程
    48. void run()
    49. {
    50. struct sockaddr_in local;
    51. local.sin_family = AF_INET;//通信方式为网络通信
    52. local.sin_port = htons(_port);//将网络字节序的端口号填入
    53. local.sin_addr.s_addr = inet_addr(_ip.c_str());//填充结构体
    54. //客户端连接服务器
    55. if(connect(_sock, (struct sockaddr*)&local, sizeof(local)) < 0)//客户端与服务器进行连接
    56. {
    57. logmessage(FATAL, "connect error");//connect失败属于最严重的错误
    58. }
    59. else
    60. {
    61. std::string line;
    62. std::string inbuffer;
    63. while (true)
    64. {
    65. std::cout << "mycal>>> ";
    66. std::getline(std::cin, line); // 1+1
    67. Request req = ParseLine(line); // "1+1"
    68. std::string content;
    69. req.serialize(&content);
    70. std::string send_string = enlength(content);
    71. std::cout << "sendstring:\n" << send_string << std::endl;
    72. send(_sock, send_string.c_str(), send_string.size(), 0); // bug?? 不管
    73. std::string package, text;
    74. // "content_len"\r\n"exitcode result"\r\n
    75. if (!recvpackage(_sock, inbuffer, &package))
    76. continue;
    77. if (!delength(package, &text))
    78. continue;
    79. // "exitcode result"
    80. Response resp;
    81. resp.deserialize(text);
    82. std::cout << "exitCode: " << resp._exitcode << std::endl;
    83. std::cout << "result: " << resp._result << std::endl;
    84. }
    85. }
    86. }
    87. Request ParseLine(const std::string &line)
    88. {
    89. // 建议版本的状态机!
    90. //"1+1" "123*456" "12/0"
    91. int status = 0; // 0:操作符之前,1:碰到了操作符 2:操作符之后
    92. int i = 0;
    93. int cnt = line.size();
    94. std::string left, right;
    95. char op;
    96. while (i < cnt)
    97. {
    98. switch (status)
    99. {
    100. case 0:
    101. {
    102. if(!isdigit(line[i]))
    103. {
    104. op = line[i];
    105. status = 1;
    106. }
    107. else left.push_back(line[i++]);
    108. }
    109. break;
    110. case 1:
    111. i++;
    112. status = 2;
    113. break;
    114. case 2:
    115. right.push_back(line[i++]);
    116. break;
    117. }
    118. }
    119. std::cout << std::stoi(left)<<" " << std::stoi(right) << " " << op << std::endl;
    120. return Request(std::stoi(left), std::stoi(right), op);
    121. }
    122. //析构函数要释放不使用的文件描述符
    123. ~tcpclient()
    124. {
    125. if( _sock >= 0)
    126. close(_sock);
    127. }
    128. private:
    129. int _sock;//套接字文件描述符
    130. std::string _ip;//服务器IP地址
    131. uint16_t _port;//服务器的端口号
    132. };

    client.cc

    1. #include"client.hpp"
    2. using namespace std;
    3. static void Usage(string proc)
    4. {
    5. printf("\nUsage:\n\t%s server_ip server_port\n\n", proc.c_str());
    6. }
    7. int main(int argc, char* argv[])
    8. {
    9. if(argc != 3)//如果没输入端口号和目的IP,argc保存的命令参数就不是三个,进程出错
    10. {
    11. Usage(argv[0]);
    12. exit(USAGE_ERROR);
    13. }
    14. uint16_t port = atoi(argv[2]);
    15. string ip = argv[1];
    16. unique_ptr p(new tcpclient(ip, port));
    17. p->initclient();
    18. p->run();
    19. return 0;
    20. }

    4.makefile

    1. .PHONY:
    2. all:server client
    3. server:server.cc
    4. g++ server.cc -o server -std=c++11 -ljsoncpp
    5. client:client.cc
    6. g++ client.cc -o client -std=c++11 -ljsoncpp
    7. .PHONY:
    8. clean:
    9. rm -f server client

    5.运行结果

    对于正确的计算式,也能返回0作为退出码,指示结果有效。

    对于不正确的计算式,也能返回非0退出码,指示结果无效。

    三、json序列化与反序列化

    1.常用序列化与反序列化库

    上面的序列化和反序列化都是我们自己通过处理字符串实现的。其实这部分的工作早就有人写好了现成的库,我们直接使用它们对数据进行序列化和反序列化即可。我们以后代码中的序列化和反序列化,绝对不要自己写。

    常见的有以下三个:

    json——使用简单。

    protobuf——比较复杂,局域网或者本地网络通信使用较多。

    xml——适合在其他编程语言中使用(如Java等)。

    这里只介绍使用最简单也最广泛的json的使用,学有余力可以去了解下protobuf。

    所以,都说到这里了,序列化反序列化与协议又有和关系呢?

    序列化与反序列化可以理解为,为了传输结构体这样的结构将原数据转化为字符串方便传输。

    而协议是网络通信双方约定以某种数据结构或者机制进行数据的解读和包装。

    二者并不相同,协议可以自己定制,序列化一般使用别人写好的库。二者也都是组成程序的重要部分。

    2.安装

    在使用json之前,需要先在Linux机器上使用yum安装json工具

    语句:sudo yum install -y jsoncpp-devel

    如上图所示就是安装成功了。(我直接以root身份安装的,不用sudo)

    json安装后,它的头文件json.h所在路径为/usr/include/jsoncpp/json/。而由于编译器查找头文件的目录仅限usr/include,所以在包含头文件需要加路径jsoncpp/json/json.h。

    json是一个动态库,它所在路径为/lib64/,完整的名字为libjsoncpp.sp。在使用的时候,编译器会自动到/lib64路径下查找所用的库,但编译需要指定库名,也需要加上-ljonscpp。

    还可以在makefile中增加一个宏-DMYSELF,实现条件编译,做到对序列化与反序列化的自我实现函数和json库实现的切换。

    3.使用

    Json数据的格式是采用键值对的形式,key为字符串,value为需要存储的变量如:

    "first" : a、"second" : b、"oper" : op、"exitcode" : exitcode、"result" : result

    序列化就是将这些键值对拼接在一起形成一个字符串。

    反序列化就是将多个字符串拆开,用户根据键值对的对应关系可以找到绑定的变量。

    当然这仅仅是一个很粗糙的理解,它内部的实现很复杂,我们只需要知道如何使用Json这个工具即可。

    我们使用Json对Request和Response进行序列化和反序列化写出一个新的版本,并利用条件编译实现其切换。

    我以Request的序列化和反序列化为例:

    (1)Request的序列化

    Json::Value root创建的Value类型对象root可以看作一个万能对象。

    使用root["字符串"] = 变量;的形式将不同类型的变量和字符串绑定形成键值对。

    然后创建一个Json::FastWriter类型的对象writer,使用write函数对root进行序列化,返回的结果为string类型,赋值给*out。

    (2)Request的反序列化

    首先,依旧要创建一个万能对象root,然后再创建一个Json::Reader类型的对象reader。

    调用对象reader的成员函数parse()将字符串in反序列化并将得到的键值对再放入到万能对象root中。

    根据键值对中的key值("first"等字符串)使用[]就能找到value。由于反序列化后的value依旧为字符串,所以需要使用asInt()转化成int类型,此时才算彻底完成了反序列化。

    再使用Json对Response进行序列化和反序列化的过程除了成员变量的数目和属性不同之外,其他并没有什么不同,代码就都放在下面了。

    1. #pragma once
    2. #define MYSELF
    3. #include
    4. #include
    5. #include
    6. #include
    7. #include
    8. #include
    9. #define SEP " "
    10. #define SEP_LEN strlen(SEP) //使用sizeof()多了一个\0
    11. #define LINE_SEP "\r\n"
    12. #define LINE_SEP_LEN strlen(LINE_SEP) //使用sizeof()多了一个\0
    13. enum
    14. {
    15. OK = 0,
    16. DIV_ZERO,
    17. MOD_ZERO,
    18. OP_ERROR
    19. };
    20. //"content" 转化为 "content_len"\r\n"content"\r\n
    21. //加上报头
    22. std::string enlength(const std::string &text)
    23. {
    24. //按"content_len"\r\n"content"\r\n拼接字符串
    25. std::string send_string = std::to_string(text.size());
    26. send_string += LINE_SEP;
    27. send_string += text;
    28. send_string += LINE_SEP;
    29. return send_string;
    30. }
    31. //"content_len"\r\n"content"\r\n 转化为 "content"
    32. //去掉报头
    33. bool delength(const std::string &package, std::string *text)
    34. {
    35. //查找左侧的\r\n
    36. auto pos = package.find(LINE_SEP);
    37. if (pos == std::string::npos)
    38. return false;//没找到表明数据有问题
    39. //截取正文长度的字符串并转为整形
    40. std::string text_len_string = package.substr(0, pos);
    41. int text_len = std::stoi(text_len_string);
    42. //截取正文放入储存正文的string里
    43. *text = package.substr(pos + LINE_SEP_LEN, text_len);
    44. return true;
    45. }
    46. class Request
    47. {
    48. public:
    49. Request()
    50. :_a(0)
    51. ,_b(0)
    52. ,_op(0)
    53. {}
    54. Request(int a, int b, char op)
    55. :_a(a)
    56. ,_b(b)
    57. ,_op(op)
    58. {}
    59. //Request序列化
    60. //Request结构体转化为字符串"a op b"
    61. bool serialize(std::string *out)
    62. {
    63. #ifdef MYSELF
    64. out->clear();//清空
    65. //将变量转为字符串
    66. std::string a_string = std::to_string(_a);
    67. std::string b_string = std::to_string(_b);
    68. *out = a_string;
    69. *out += SEP;
    70. *out += _op;
    71. *out += SEP;
    72. *out += b_string;
    73. #else
    74. Json::Value root;
    75. root["first"] = _a;
    76. root["second"] = _b;
    77. root["oper"] = _op;
    78. Json::FastWriter writer;
    79. // Json::StyledWriter writer;
    80. *out = writer.write(root);
    81. #endif
    82. return true;
    83. }
    84. //Request反序列化
    85. //字符串"a op b"转化为Request结构体
    86. bool deserialize(const std::string &in)
    87. {
    88. #ifdef MYSELF
    89. auto left = in.find(SEP);//查找左侧的SEP
    90. auto right = in.rfind(SEP);//查找右侧的SEP
    91. if (left == std::string::npos || right == std::string::npos)
    92. return false;//找不到,数据有问题
    93. if (left == right)
    94. return false;//只有一个SEP,数据有问题
    95. if ((right - 1) != (left + SEP_LEN))//在字符串"a op b"中,right - 1和left + SEP_LEN都指向op
    96. return false;//指向的不是一个位置,数据有问题
    97. //按左闭右开的方式构造两个数字
    98. std::string a_string = in.substr(0, left);
    99. std::string b_string = in.substr(right + SEP_LEN);
    100. //读取到的数字不能为空
    101. if (a_string.empty() || b_string.empty())
    102. return false;
    103. //填入数据
    104. _a = std::stoi(a_string);
    105. _b = std::stoi(b_string);
    106. _op = in[left + SEP_LEN];
    107. #else
    108. Json::Value root;
    109. Json::Reader reader;
    110. reader.parse(in, root);
    111. _a = root["first"].asInt();
    112. _b = root["second"].asInt();
    113. _op = root["oper"].asInt();
    114. #endif
    115. return true;
    116. }
    117. public:
    118. int _a;
    119. int _b;
    120. char _op;
    121. };
    122. class Response
    123. {
    124. public:
    125. Response()
    126. :_exitcode(0)
    127. ,_result(0)
    128. {}
    129. Response(int exitcode, int result)
    130. :_exitcode(exitcode)
    131. ,_result(result)
    132. {}
    133. //Response序列化
    134. //Response结构体转化为字符串"exitcode result"
    135. bool serialize(std::string *out)
    136. {
    137. #ifdef MYSELF
    138. out->clear();//清空
    139. //将变量转为字符串
    140. std::string ec_string = std::to_string(_exitcode);
    141. std::string res_string = std::to_string(_result);
    142. //拼接字符串
    143. *out = ec_string;
    144. *out += SEP;
    145. *out += res_string;
    146. #else
    147. Json::Value root;
    148. root["exitcode"] = _exitcode;
    149. root["result"] = _result;
    150. Json::FastWriter writer;
    151. *out = writer.write(root);
    152. #endif
    153. return true;
    154. }
    155. //Response反序列化
    156. //字符串"exitcode result"转化为Response结构体
    157. bool deserialize(const std::string &in)
    158. {
    159. #ifdef MYSELF
    160. auto mid = in.find(SEP);//查找中间的SEP
    161. if (mid == std::string::npos)
    162. return false;//找不到,出错
    163. //按左闭右开的方式构造两个数字
    164. std::string ec_string = in.substr(0, mid);
    165. std::string res_string = in.substr(mid + SEP_LEN);
    166. //读取到的退出码和计算结果不能为空
    167. if (ec_string.empty() || res_string.empty())
    168. return false;
    169. //填入数据
    170. _exitcode = std::stoi(ec_string);
    171. _result = std::stoi(res_string);
    172. #else
    173. Json::Value root;
    174. Json::Reader reader;
    175. reader.parse(in, root);
    176. _exitcode = root["exitcode"].asInt();
    177. _result = root["result"].asInt();
    178. #endif
    179. return true;
    180. }
    181. public:
    182. int _exitcode; // 0:计算成功,!0表示计算失败,具体是多少,定好标准
    183. int _result; // 计算结果
    184. };
    185. //接收的数据:"content_len"\r\n"a op b"\r\n ......
    186. bool recvpackage(int sock, std::string &inbuffer, std::string *text)
    187. {
    188. char buffer[1024];//接收网络数据的字符串
    189. while (true)
    190. {
    191. ssize_t n = recv(sock, buffer, sizeof(buffer) - 1, 0);//接收数据
    192. if (n > 0)//读到了数据
    193. {
    194. buffer[n] = 0;
    195. inbuffer += buffer;//以追加的方式放入缓冲区ibuffer
    196. auto pos = inbuffer.find(LINE_SEP);//查找LINE_SEP,就是\r\n
    197. if (pos == std::string::npos)
    198. //如果没有找到LINE_SEP,就说明报文"content_len"的部分可能没有读全
    199. continue;//接着到最开始读数据直到读全
    200. //执行至此时,报文"content_len"\r\n这部分一定读全了
    201. //可以将"content_len"的部分取出来并转化为整形
    202. std::string text_len_string = inbuffer.substr(0, pos);
    203. int text_len = std::stoi(text_len_string);
    204. //我们现在知道了报文中正文部分的长度,所以就能确定我们读到的是否是一个完整的报文
    205. //一个报文的组成为:text_len_string + "\r\n" + text + "\r\n"
    206. //所以,只要缓冲区ibuffer的内容多于一个报文的字符个数,我们就必定保证ibuffer中已经存在了一个完整的报头;
    207. int total_len = text_len_string.size() + 2 * LINE_SEP_LEN + text_len;
    208. std::cout << "处理前#inbuffer: \n" << inbuffer << std::endl;
    209. if (inbuffer.size() < total_len)
    210. {
    211. std::cout << "输入的消息没有遵守协议,正在等待后续内容" << std::endl;
    212. continue;//报文没读全继续到上面读取
    213. }
    214. //此时缓冲区中就至少有一个完整的报文
    215. *text = inbuffer.substr(0, total_len);//将一个完整报文构建子串放入输出参数中
    216. inbuffer.erase(0, total_len);//删除缓冲区中的完整报文
    217. std::cout << "处理后#inbuffer:\n " << inbuffer << std::endl;
    218. break;//准备处理报文,跳出循环
    219. }
    220. else//没读到数据
    221. return false;
    222. }
    223. return true;
    224. }

    上面我们使用了条件编译,如果MYSELF被定义,就是用我们自己写的序列化和反序列化。

    如果MYSELF没被定义,就使用json库的定义。

  • 相关阅读:
    WEB开发技能树-JavaScript-BOM-Window对象
    部署elasticsearch集群
    向量范数及其Python代码
    面试 | Python 自动化测试技术面试真题
    redis实现未支付时间超时就删除订单,并给前端反应一个已过期
    python面向对象网络程序设计作业
    Docker基础(CentOS 7)
    【面向校招】Golang面试题合集
    电视访问群晖共享文件失败的设置方式,降低协议版本
    栈和队列知识点+例题
  • 原文地址:https://blog.csdn.net/qq_65285898/article/details/133250977