[发明专利]一种数据流处理及分类方法、装置和系统在审
申请号: | 202010041246.9 | 申请日: | 2020-01-15 |
公开(公告)号: | CN113132262A | 公开(公告)日: | 2021-07-16 |
发明(设计)人: | 邹勇 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | H04L12/851 | 分类号: | H04L12/851;H04L12/859 |
代理公司: | 北京思格颂知识产权代理有限公司 11635 | 代理人: | 杨超 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据流 处理 分类 方法 装置 系统 | ||
1.一种数据流处理方法,包括:
周期性统计转发数据流中指定数量的一组报文的持续时长;
根据每个数据流的所述持续时长、硬件的数据处理能力,确定符合设定条件的第一数据流;
将所述第一数据流分配给硬件进行转发处理。
2.如权利要求1所述的方法,所述周期性统计转发数据流中指定数量的一组报文的持续时长,包括:
针对每个数据流,以包含预设报文数量的报文包组为单位,周期性统计每个报文包组中的报文转发处理的起始时间和结束时间,得到所述报文包组的所述持续时长。
3.如权利要求1所述的方法,所述根据每个数据流的所述持续时长、硬件的数据处理能力,确定符合设定条件的第一数据流,包括:
根据硬件的数据处理能力,结合待处理的数据流数量,确定硬件的处理比例;
根据统计到的各数据流的所述持续时长的分布情况和所述硬件的处理比例,确定时长分界点;
将持续时长小于所述时长分界点的数据流确定为第一数据流。
4.如权利要求3所述的方法,所述根据统计到的各数据流的所述持续时长的分布情况和所述硬件的处理比例,确定时长分界点,将持续时长小于所述时长分界点的数据流确定为第一数据流,包括:
根据每个数据流的所述持续时长、预先建立的时间轴的起终点和预设的时长单位,确定每个数据流在时间轴上的落点位置;所述时间轴的起点小于等于统计得到的所述持续时长的最小值,终点大于等于统计得到的所述持续时长的最大值;
根据时间轴上各时长单位对应的时间轴长度内包含的落点个数和所述硬件的处理比例,确定时间轴上的时长分界点;
将落点位于时间轴起点到时长分界点之间的数据流确定为第一数据流。
5.如权利要求1所述的方法,所述根据每个数据流的所述持续时长、硬件的数据处理能力,确定符合设定条件的第一数据流,包括:
根据硬件的数据处理能力,结合待处理的数据流数量,确定硬件的处理比例;
根据数据流的所述持续时长和所述一组报文包含的报文数量,得到所述数据流的报文转发频率;
根据各数据流的报文转发频率的分布情况和所述硬件的处理比例,确定频率分界点;
将报文转发频率大于所述频率分界点的数据流确定为第一数据流。
6.如权利要求5所述的方法,所述根据各数据流的报文转发频率的分布情况和所述硬件的处理比例,确定频率分界点,将报文转发频率大于所述频率分界点的数据流确定为第一数据流,包括:
根据统计到的每个数据流的所述报文转发频率、预先建立的频率轴的起终点和预设的频率单位,确定每个数据流在频率轴上的落点位置;所述频率轴的起点小于统计得到的所述报文转发频率的最小值,终点大于统计得到的所述报文转发频率的最大值;
根据频率轴上各频率单位对应的频率轴长度内包含的落点个数和所述硬件的处理比例,确定频率轴上的频率分界点;
将落点位于频率分界点到频率轴终点之间的数据流确定为第一数据流。
7.如权利要求1所述的方法,将所述第一数据流分配给硬件进行转发处理,包括:
若属于所述第一数据流中的数据流正在软件中进行转发处理,将其转移到硬件中进行转发处理;
若不属于所述第一数据流中的数据流正在硬件中进行转发处理,将其转移到软件中进行转发处理;
若属于所述第一数据流中的数据流正在硬件中进行转发处理或不属于所述第一数据流中的数据流正在软件中进行转发处理,则保持不变。
8.如权利要求1-7任一所述的方法,所述周期性统计转发数据流中指定数量的一组报文的持续时长,包括:
对于在硬件和软件中进行转发处理的数据流均由软件统计数据流中指定数量的一组报文的持续时长,统计时将在硬件中进行转发处理的数据流转移到软件中进行一段时间的转发处理;或
对于在硬件中进行转发处理的数据流由硬件统计数据流中指定数量的一组报文的持续时长,对于在软件中进行转发处理的数据流由软件统计数据流中指定数量的一组报文的持续时长。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010041246.9/1.html,转载请声明来源钻瓜专利网。