自定义应用层通信协议

摘要:
为了确保网络的每个功能的相对独立性,并且为了便于实现和维护,协议通常被划分为多个子协议,并且这些协议保持分层结构。子协议的集合通常称为协议集群。每个层的协议由每个层的实体实现。在通信双方的对等层中完成相同协议功能的实体称为对等实体。自定义通信协议的关键是数据包的合理构造和正确解析,即编码和解码规则的制定。

标签:通信协议 要素 

1.通信协议的概念及其要素

在OSI开放互联参考模型中,对等实体之间数据单元在发送方逐层封装,在接收方的逐层解析。发送方N层实体从N+1层实体得到的数据包称为服务数据单元(Service Data Unit,SDU)。N层实体只将其视为需要本实体提供服务的数据,将服务数据单元进行封装,使其成为一个对方能够理解的数据单元(Protocol Data Unit,PDU),封装过程实际上是为SDU增加对等实体间约定的控制信息(Protocol Control Information,PCI)的过程。

为了保证网络的各个功能的相对独立性,以及便于实现和维护,通常将协议划分为多个子协议,并且让这些协议保持一种层次结构,子协议的集合通常称为协议簇。

网络协议的分层有利于将复杂的问题分解成多个简单的问题,从而分而治之。各层的协议由各层的实体实现,通信双方对等层中完成相同协议功能的实体称为对等实体。对等实体按协议进行通信,所以协议反映的是对等层的对等实体之间的一种横向关系,严格地说,协议是对等实体共同遵守的规则和约定的集合。

通信协议精确地定义了双方通信控制信息和解释信息:发送方能将特定信息(文本、图片、音频、视频)按协议封装成指定格式的数据包,最终以串行化比特流在网络上传输;接收方接收到数据包后,根据协议将比特流解析为本地化数据,从而获取对方发送过来的原始信息。

通信协议包括三个要素:

(1)语法:规定了信息的结构和格式;

(2)语义:表明信息要表达的内容;

(3)同步:规则涉及双方的交互关系和事件顺序。

整个计算机网络的实现体现为协议的实现,TCP/IP协议是Internet互联网的核心协议。

2.通信协议开发步骤

(1) 协议的开发主要包括协议设计、协议形式描述、协议实现和协议一致性测试。协议的开发过程与步骤如图1所示。

自定义应用层通信协议第1张

    图1 协议开发过程与步骤

(2) 协议设计过程中的分组发送接收模型如图2所示。

自定义应用层通信协议第2张

图2协议设计过程中的分组发送接收模型

(3)协议的一致性测试

协议的一致性测试是指测试协议能否按照预想的控制策略实现正确的通信,主要体现在数据包通过信道从信源传送到信宿后,信宿能够根据协议正确的解析出原始信息。

协议的一致性测试如图3所示。

自定义应用层通信协议第3张

图3 协议一致性测试环境

根据测试环境的可以分为局部测试和分布式测试,如图4所示。

自定义应用层通信协议第4张

图4局部测试法、分布式测试法

3.数据包和数据报

为方便描述自定义协议,还是借用数据包和数据报来描述封装数据单元和传输数据单元,但这里的数据包和数据报完全不同于TCP/IP架构中的Packet和Datagram概念。

下文所述的数据包指封装的基本单位,以TLV(Type-Length-Value)格式封装基本消息单位;数据报Package是传输的基本单位,头部包含序列号和命令信息。接收端根据命令信息分辨事件类型,做出不同的解析。报文实体是多个TLV数据包组成的链表。

 

4.数据包TLV的设计

从应用层HTTP协议,到超文本置标语言HTML(HyperText Mark-up Language),再到可扩展置标语言XML(Extensible Markup Language),它们提供了数据的格式化存储、传输和格式化显示的规范,是网络通信的基石。然而HTTP协议以及HTML/XML置标语言的本质就是定义一堆标签(Tag)对数据进行串行化序列化,然后接收方再根据标签解析、还原数据。

自定义通信协议的关键是对数据包的合理构造(construct)和正确解析(parse),即制定编解码规则。

抽象语法标记ASN(Abstract Syntax Notation) BER的长度确定的编码方式,由3部分组成Identifier octets、Length octets和Contents octets,实际上这就是一中TLV(Type-Length-Value)模型:类型字段(Type或Tag)是关于标签和编码格式的信息;长度字段(Length)定义数值的长度; 内容字段(Value)表示实际的数值。

因此,一个编码值又称TLV三元组。编码可以是基本型或结构型,如果它表示一个简单类型的、完整的显式值,那么编码就是基本型(primitive);如果它表示的值具有嵌套结构,那么编码就是结构型 (constructed)。

TLV编码就是指对Type(Tag)、Length和Value进行编码,形成比特流数据包;解码是编码的逆过程,是从比特流缓冲区中解析还原出原始数据。

采用C++编程语言设计TLV协议类,其类视图如图5所示。

自定义应用层通信协议第5张

图5 CTLV类视图

目前只提供设置整形值(int型)的setValue_Int和设置字符串值(C_String型)的SetValue_Cstring两个接口。

TLV将数据封装成包的格式如表1所示。

表1 TLV包格式

TLV

头部

包实体

m_dwTag

m_nLen

m_pValue

TLV的接口说明:

(1)值类型标签m_vtTag是内部辅助枚举变量,它根据构造TLV时传递的服务类型标签m_dwTag来确定。

(2)TLV::m_nLen在为TLV设置具体值时确定。

(3)TLV包的封装:

1)使用Tag参数创建一个TLV对象后,调用TLV::setValue_*方法为TLV填充具体值;

2)调用TLV::toBuffer方法打包到缓冲区streamBuffer。

(4)TLV包的解析:创建一个TLV对象后,调用TLV::fromBuffer方法从缓冲区streamBuffer解析出TLV。

(5)封装和解析涉及到本机字节顺序和网络字节顺序的转换问题。

(6)调用TLV::setValue_*方法填充TLV时,统一字节边界数为4。

5.数据报Package的设计

不同于底层的数据包/数据报只是对数据层次的封装解析,实际应用程序是以事件驱动的,因此必须注册不同的信令(事件类型标签),然后填充到数据报中。接收端根据信令做出相应的事件处理。

例如在C/S通信系统中,客户端往往要先登录,通过服务器端的校验才能进行后续通信。因此客户端运行后,需要构造并向服务器端发送含有LOGIN信令的包含用户名字符串strUserName和密码字符串strPassWord的数据报;服务器端解析LOGIN信令后做校验处理,然后发送含有LOGIN_RESPONSE信令和校验结果的回执数据报给客户端。

采用C++编程语言设计Package类,其类视图如图6所示。

自定义应用层通信协议第6张

图6 CPackage类视图

Package类将TLV封装成包的格式如表2所示。

表2 Package包格式

Package

头部

序列号

包实体

m_nCmdLen

m_dwCmdID

m_dwCmdState

m_nSeqNo

Count*Tlv

Package的接口说明:

(1)Package::m_nCmdLen是整个Package包的长度,将其作为首个字段的好处在于当传送大数据包时,接收方可以根据数据长度来控制读状态,从而将一个大数据包分批接收。

(2)Package::m_nCmdLen在构造函数中初始化为16,在调用Package::addTLV方法填充包实体时增长。

(3)Package包的封装:

1)创建Package对象后,调用Package::setHeader方法填充头部信令;

2)创建TLV对象并填充数据,再调用Package::addTLV方法填充包实体;

3)调用Package::toBuffer方法将Package打包到缓冲区streamBuffer。

(4)Package包的解析:

1)先创建一个Package对象,调用Package::fromBuffer方法从缓冲区streamBuffer先解析出Package的头部和序列号,再从剩余缓冲区中解析出TLV并将其串行化到链表。

2)调用Package::getTLV方法根据Tag从链表中查找具体TLV包,再调用TLV::getValue方法取得具体值。

(5)Package::toBuffer方法和Package::fromBuffer方法主要遍历Package::m_TLV_List列表,然后调用TLV::toBuffer方法和TLV::fromBuffer方法解析出TLV数据单元。

TLV数据包的功能测试(主要是本地测试)

鉴于实际通信数据最后都要转换成比特流,故只测试发送字符串类型的变量,仅测试协议能否正确打包、解析。其他类型的普通数据都可以转换成字符串传输,最后,接收方根据m_dwTag确定值类型m_vtTag,解析出具体值。

对TLV::setValue_C_String方法填充TLV的测试,需要考虑字节对齐问题。对于长度为4字节倍数的C状态字符串,打包时省去末尾的‘\0’结束标志符。需要测试长度非4倍数的字符串和长度为4倍数的字符串。

经本地测试,调用TLV::setValue_Int方法和TLV::setValue_C_String方法构造整形和字符串时,能够正确封装、正确解析。

Package数据报的功能测试,主要是将TLV组合成包,然后添加信令,完成特定的通信。对登陆LOGIN和发送消息SUBMIT_SM的测试表明Package协议能正确封装、正确解析。

在实际项目中使用Package通信协议,对于稍大一点的数据块需要控制好读的步骤,以便能接收整包完整的信息。

 

免责声明:文章转载自《自定义应用层通信协议》仅用于学习参考。如对内容有疑问,请及时联系本站处理。

上篇密码算法详解——AESJVM性能调优监控工具专题一:JVM自带性能调优工具(jps,jstack,jmap,jhat,jstat,hprof)下篇

宿迁高防,2C2G15M,22元/月;香港BGP,2C5G5M,25元/月 雨云优惠码:MjYwNzM=

相关文章

Essential.C#第五章 类

在第一章中你已经看到了如何声明一个新类Helloworld。在第二章,你也也学习了C#内建的原类型。你也知道了控制流,还有如何声明方法。现在是时候讨论如何定义属于自己的类型了。这在任何C#程序都是核心结构。C#作为一个面向对象的语言是完全支持类和构建对象。 本章为你引入c#的面向对象编程方式。重点是如何定义类,这是对象的模板。 在前面的章节的程序结构一直...

数据流图的绘制方法

数据流图(Data Flow Diagram,DFD),从数据传递和加工的角度,以图形的方式刻画系统内数据的运动情况。它可以用少数几种符号综合地反映出信息在系统中的流动、处理和存储的情况。 数据流图具有抽象性和概括性:抽象性表现在它完全舍去了具体的物质,只剩下数据的流动、加工处理和存储;概括性表现在它可以把信息中的各种不同业务处理过程联系起来,形成一个整体...

C#教程之自己动手写映射第五节[封装添加]

一、动机   我们通常在做项目的时候一般用到的三层结构依赖关系如下:   实体作为数据的载体,传输于各个组件之间。当实体到达数据操作层时,我们会把他承载的具体数据解析出来,然后利用SqlHelper.cs[也存放在数据操作层的组件中]把数据插入到数据库中,具体代码如下: 1 /* 2 * 3 * 创建人:李林峰 4 * 5 * 时...

漫谈 IP 协议

IP数据报格式 IP地址分类 IPV4简单粗暴地把IP地址分为五类。分类方法如下图: 之所以要划分IP地址,目的是为区分不同的组织机构——A类保留给政府机构,B类分配给中等规模的公司,C类分配给任何需要的人,D类用于组播,E类用于实验,各类可容纳的地址数目不同。对于使用者本身,使用的是A/B/C哪一类,倒没有区别。 A、B、C三类IP地址的特征:当将...

1、AJAX里面status的值代表什么 2、get post 的区别 3、怎样把对象转化成字符串 4、闭包、继承、原型、原型链 5 、http传输协议 6、arguments是什么

1、AJAX里面status的值代表什么 在JavaScript里面写AJax的时,最关键的一步是对XMLHttpRequest对象建立监听,即使用“onreadystatechange”方法。监听的时候,要对XMLHttpRequest对象的请求状态进行判断,通常是判断readyState的值为4且status的值为200或者304时执行我们需要的操作...

【计算机网络】应用层

目录 网络应用模型 客户/服务器模型 P2P模型 域名系统(DNS) 层次域名空间 域名服务器 域名解析 文件传输协议(FTP) 工作原理 连接 电子邮件 电子邮件系统的组成结构 多用途网络邮件扩充(MIME) 简单邮件传输协议(SMTP) 邮局协议(POP3) 网际报文存取协议(IMAP) 基于万维网的电子邮件 万维网(WW...