流调度模型A-Flow的设计
流调度模型a-flow的设计
1.1 主动网中传统的数据包调度策略及其改善
在主动网中，每个节点都会处理带有程序的数据包。对输入数据包的处理，由于以下两个原因不利于资源管理：1) 当收到数据包时，处理中断所需的时间不能强加给任何应用，因为数据包的目的地址是未知的，需要检查数据包的内容来确定；2) 接收数据包所需的内存不能立即计算、分配。
对这类问题传统的解决方法是，尽量简化对无效数据包的处理。为此，数据包的处理过程分成两个步骤：包分类和后继协议处理。包分类主要是决定数据包的接收者，其思想主要体现在协议分层上：协议栈的某一层使用本层头部的一个域来决定数据包送往上层的哪个协议。后继协议处理则侧重于对接受者的资源控制，网络包的延迟处理技术lrp就是为了解决太多时间花在那些最终需要丢弃的数据包的处理上而导致的网络吞吐率严重下降的问题(尤其在网络过载的情况下)[2]。
lrp是在内核空间用c语言实现的，且仅限于对传统ip包的处理。为了同时调度主动包及传统ip包，且从移动代码的安全性考虑，本文提出一个架构于传统网络技术之上采用java语言在用户模式实现的a-flow模型，它为每个主动数据流分配一个流队列，与上层ee相关的主动包将直接递交给上层进行计算处理，其他主动包则交给默认流处理，这样可以大大减少对无效数据包的处理时间。
1.2 a-flow主要模块设计
在a-flow模型中如图1所示，流管理器(flow manager)采用对数据流注册的方法，可以屏蔽底层网络传输技术对上层主动计算功能的影响；流处理器(flow processor)实现对数据包的缓存、认证及净荷调度等核心功能。其他辅助类包括流缓冲队列(flow buffer)用于数据包缓存，流调度接口(flow dispatcher)声明调度函数原型，流调度器(anepdispatcher)则负责将数据包调往正确的流。以下是各主要模块的实现：
图1 流调度模型a-flow
1) 流调度接口
首先，需要定义dispatcher接口以调度输入数据包，该接口声明了一个抽象函数dispatchbuffer()。一个dispatcher或者缓存一个数据包，或者指向另一个缓存该数据包的dispatcher。
2) 流调度器
一个实现dispatcher接口的类anepdispatcher可以完成对输入数据流的识别与分发。其算法比较简单：
首先查看buffer中的主动网标识符(anid)。
如果该anid已经在某个ee的flow dispatcher中注册，则将此buffer发往该flow。
如果一个anid没有注册并且未设置discard位(其值由anep数据包头部的flags域标识)，则调度此buffer到默认flow。
否则，丢弃该buffer。
3) 流处理器
这是a-flow模型的核心类，它有三个功能：(1) 数据包缓存。每个流中都有两个队列：一个是空闲队列(freebuffers)，另一个是已用队列(usedbuffers)。后者用来存放已经接收但尚未投递的数据包。除非有空闲队列可用，否则不能缓存数据包。使用者必须保证有足够的缓存可使用。(2) 净荷调度。一个processor和另一个dispatcher相关联的。因此，分发到某个processor的所有数据包的净荷也同样要分发到跟它相关联的dispatcher处，从而实现协议分层。调度之前，processor会将自己的头长度加到调度的偏移量上。(3) 数据包认证。processor必须能够识别某个数据包是否属于某个流。这可以通过分析它所携带的数据来完成。processor是通过下面的过程来完成对输入流的调度工作的。首先，processor检查它的freebuffers队列是否为空。若为空，则说明这个flow的buffer空间已经用完，即未给予processor以足够的内存。这时，直接丢弃该数据包即可，无需进行额外的处理。若不为空，则将buffer从队列中取出，并与调度路径中的系统buffer“交换”。这样，包含数据的buffer就被插入processor的接收队列中。
4) 流管理器
该类提供了一套方法以在系统中注册flow processor。它提供了直接访问设备的方法，或访问现有的协议栈，比如ipv4/udp协议。下面是一个注册udp流的例子：
initialization:
private hashtable udpflows = new hashtable();
register flow module : registerudpflow(int port, flowdispatcher fd)
integer udpport = new integer(port);
udpflow udpflow = (udpflow)udpflows.get(udpport);
if (udpflow == null) then
udpflow = new udpflow(port, fd);
udpflows.put(udpport, udpflow);
5) 流缓冲队列
拷贝数据包是dispatcher不能完成的操作之一。因为一个数据包有可能被传给多个flow processor进行处理，所以要求有它自己的可写的数据备份。第一个接收包的processor将它的freebuffers跟收到数据包的系统buffer进行交换，这个buffer中带有实际的数据，称为原始buffer(originalbuffer)。其余的processor也会进行同样的操作，但得到的buffer中不包含实际数据，称之为从属buffer(dependentbuffer)。originalbuffer与dependentbuffer之间通过链表连接起来。
当在一个buffer上进行写操作或匹配操作时，必须先将它声明为“independent”，指的是：将它从链表中移出，必要的话还需拷贝数据。分两种情况：1) 对于dependentbuffer，需先将原始数据拷贝到它的内存中，然后才能将该buffer从链表中删除；2) 对于originalbuffer，则需先拷贝数据到第一个dependentbuffer，并将它声明为余下buffer的originalbuffer。将buffer设置为相关链表的目的是，当一个buffer需要发往多个目的地时，可以避免进行大量实际的数据拷贝。
主动网流调度模型a-flow的研究
NLP技术为什么这么难落地其中有什么困难
为应对第四次产业革命 韩中小企业加大了对人工智能的研究投入
华为P10对比LG G6两款安卓旗舰买哪个，这里有答案
一禾科技被授予“优质服务商” 致力于音视频领域标杆企业
小米电视5系列的首款高端量子点电视即将发布
流调度模型A-Flow的设计
植物根系扫描系统有哪些用处
海泰方圆举办“引领数据安全创新，加速数字经济发展”技术研讨会
我国AGV行业市场行情分析
Angew：静电屏蔽效应解决钠离子电池合金负极膨胀问题
施工现场扬尘监控设备的测试参数
负载电容CL=12PF时24MHz晶振匹配电容选多大？
橙群微电子与Seltech合作，扩大低延迟、低功耗无线连接SoC的全球分销范围
嵌入式视觉系统的全面解析
全球已经有15家运营商推出了商用5G服务
未来GPU、FPGA和SoC的重要性
壁仞科技发布首款通用GPU芯片 苹果智能指环专利曝光
缺芯浪潮下联瑞推出多款千兆网卡解决方案
oppor11什么时候上？oppor11最新消息：巨额广告费！oppo R11为延续oppo R9s第一的宝座
AMD共享更详细的Radeon RX 6000基准测试和比较
1.1 主动网中传统的数据包调度策略及其改善
在主动网中，每个节点都会处理带有程序的数据包。对输入数据包的处理，由于以下两个原因不利于资源管理：1) 当收到数据包时，处理中断所需的时间不能强加给任何应用，因为数据包的目的地址是未知的，需要检查数据包的内容来确定；2) 接收数据包所需的内存不能立即计算、分配。
对这类问题传统的解决方法是，尽量简化对无效数据包的处理。为此，数据包的处理过程分成两个步骤：包分类和后继协议处理。包分类主要是决定数据包的接收者，其思想主要体现在协议分层上：协议栈的某一层使用本层头部的一个域来决定数据包送往上层的哪个协议。后继协议处理则侧重于对接受者的资源控制，网络包的延迟处理技术lrp就是为了解决太多时间花在那些最终需要丢弃的数据包的处理上而导致的网络吞吐率严重下降的问题(尤其在网络过载的情况下)[2]。
lrp是在内核空间用c语言实现的，且仅限于对传统ip包的处理。为了同时调度主动包及传统ip包，且从移动代码的安全性考虑，本文提出一个架构于传统网络技术之上采用java语言在用户模式实现的a-flow模型，它为每个主动数据流分配一个流队列，与上层ee相关的主动包将直接递交给上层进行计算处理，其他主动包则交给默认流处理，这样可以大大减少对无效数据包的处理时间。
1.2 a-flow主要模块设计
在a-flow模型中如图1所示，流管理器(flow manager)采用对数据流注册的方法，可以屏蔽底层网络传输技术对上层主动计算功能的影响；流处理器(flow processor)实现对数据包的缓存、认证及净荷调度等核心功能。其他辅助类包括流缓冲队列(flow buffer)用于数据包缓存，流调度接口(flow dispatcher)声明调度函数原型，流调度器(anepdispatcher)则负责将数据包调往正确的流。以下是各主要模块的实现：
图1 流调度模型a-flow
1) 流调度接口
首先，需要定义dispatcher接口以调度输入数据包，该接口声明了一个抽象函数dispatchbuffer()。一个dispatcher或者缓存一个数据包，或者指向另一个缓存该数据包的dispatcher。
2) 流调度器
一个实现dispatcher接口的类anepdispatcher可以完成对输入数据流的识别与分发。其算法比较简单：
首先查看buffer中的主动网标识符(anid)。
如果该anid已经在某个ee的flow dispatcher中注册，则将此buffer发往该flow。
如果一个anid没有注册并且未设置discard位(其值由anep数据包头部的flags域标识)，则调度此buffer到默认flow。
否则，丢弃该buffer。
3) 流处理器
这是a-flow模型的核心类，它有三个功能：(1) 数据包缓存。每个流中都有两个队列：一个是空闲队列(freebuffers)，另一个是已用队列(usedbuffers)。后者用来存放已经接收但尚未投递的数据包。除非有空闲队列可用，否则不能缓存数据包。使用者必须保证有足够的缓存可使用。(2) 净荷调度。一个processor和另一个dispatcher相关联的。因此，分发到某个processor的所有数据包的净荷也同样要分发到跟它相关联的dispatcher处，从而实现协议分层。调度之前，processor会将自己的头长度加到调度的偏移量上。(3) 数据包认证。processor必须能够识别某个数据包是否属于某个流。这可以通过分析它所携带的数据来完成。processor是通过下面的过程来完成对输入流的调度工作的。首先，processor检查它的freebuffers队列是否为空。若为空，则说明这个flow的buffer空间已经用完，即未给予processor以足够的内存。这时，直接丢弃该数据包即可，无需进行额外的处理。若不为空，则将buffer从队列中取出，并与调度路径中的系统buffer“交换”。这样，包含数据的buffer就被插入processor的接收队列中。
4) 流管理器
该类提供了一套方法以在系统中注册flow processor。它提供了直接访问设备的方法，或访问现有的协议栈，比如ipv4/udp协议。下面是一个注册udp流的例子：
initialization:
private hashtable udpflows = new hashtable();
register flow module : registerudpflow(int port, flowdispatcher fd)
integer udpport = new integer(port);
udpflow udpflow = (udpflow)udpflows.get(udpport);
if (udpflow == null) then
udpflow = new udpflow(port, fd);
udpflows.put(udpport, udpflow);
5) 流缓冲队列
拷贝数据包是dispatcher不能完成的操作之一。因为一个数据包有可能被传给多个flow processor进行处理，所以要求有它自己的可写的数据备份。第一个接收包的processor将它的freebuffers跟收到数据包的系统buffer进行交换，这个buffer中带有实际的数据，称为原始buffer(originalbuffer)。其余的processor也会进行同样的操作，但得到的buffer中不包含实际数据，称之为从属buffer(dependentbuffer)。originalbuffer与dependentbuffer之间通过链表连接起来。
当在一个buffer上进行写操作或匹配操作时，必须先将它声明为“independent”，指的是：将它从链表中移出，必要的话还需拷贝数据。分两种情况：1) 对于dependentbuffer，需先将原始数据拷贝到它的内存中，然后才能将该buffer从链表中删除；2) 对于originalbuffer，则需先拷贝数据到第一个dependentbuffer，并将它声明为余下buffer的originalbuffer。将buffer设置为相关链表的目的是，当一个buffer需要发往多个目的地时，可以避免进行大量实际的数据拷贝。
主动网流调度模型a-flow的研究
NLP技术为什么这么难落地其中有什么困难
为应对第四次产业革命 韩中小企业加大了对人工智能的研究投入
华为P10对比LG G6两款安卓旗舰买哪个，这里有答案
一禾科技被授予“优质服务商” 致力于音视频领域标杆企业
小米电视5系列的首款高端量子点电视即将发布
流调度模型A-Flow的设计
植物根系扫描系统有哪些用处
海泰方圆举办“引领数据安全创新，加速数字经济发展”技术研讨会
我国AGV行业市场行情分析
Angew：静电屏蔽效应解决钠离子电池合金负极膨胀问题
施工现场扬尘监控设备的测试参数
负载电容CL=12PF时24MHz晶振匹配电容选多大？
橙群微电子与Seltech合作，扩大低延迟、低功耗无线连接SoC的全球分销范围
嵌入式视觉系统的全面解析
全球已经有15家运营商推出了商用5G服务
未来GPU、FPGA和SoC的重要性
壁仞科技发布首款通用GPU芯片 苹果智能指环专利曝光
缺芯浪潮下联瑞推出多款千兆网卡解决方案
oppor11什么时候上？oppor11最新消息：巨额广告费！oppo R11为延续oppo R9s第一的宝座
AMD共享更详细的Radeon RX 6000基准测试和比较