[发明专利]一种应用于移动互联网的数据过滤系统及方法

摘要

本发明提供一种应用于移动互联网的数据过滤系统，主要包括控制面模块与数据面模块，控制面模块实现过滤规则的插入或删除，数据面模块实现数据报文的解析、过滤规则的匹配以及转发数据的功能，控制面模块与数据面模块通过共享内存进行交互，将规则的配置与规则的匹配分离开，实现灵活配置的需求；同时提供一种基于上述系统的数据过滤方法，使用哈希算法与位图算法相结合，实现灵活插入或删除匹配规则。本发明在信令监测系统或者上网日志管理系统中，实现上网数据过滤功能，通过控制面与数据面两个模块，将配置规则与匹配规则分开处理，充分利用多核处理器性能，实现高性能的实时数据过滤。

主权项

一种应用于移动互联网的数据过滤系统，主要包括控制面模块与数据面模块，其特征在于：控制面模块实现过滤规则的插入或删除，数据面模块实现数据报文的解析、过滤规则的匹配以及转发数据的功能，控制面模块与数据面模块通过共享内存进行交互，将规则的配置与规则的匹配分离开；所述数据过滤系统采用多处理核的方式，其中控制面模块占用1个处理核，数据面模块使用剩余的所有处理核；所述过滤规则分为三种：用户身份规则、设备规则及业务规则；所述用户身份规则包括用户的上网IP地址(USER_IP)、用户的国际移动用户身份识别码(IMSI)、用户的手机号码(MSISDN)、用户的小区位置(CELL_ID)；所述设备规则包括设备的源IP地址(SRC_IP)、设备的目的IP地址(DST_IP)，其中设备是PS域GN接口、核心网的SGSN设备、或者GGSN设备；所述业务规则指用户上网访问的业务(SERVICE_TYPE)，可以是QQ、微信、MSN、QQ视频或P2P下载；所述应用于移动互联网的数据过滤系统的数据过滤方法，包括以下步骤：(1)配置过滤规则，一条过滤规则分配一个唯一的RULE_ID，解析规则的内容，每一条规则单独生成哈希，在每一条规则对应的哈希表中建立条件与该规则RULE_ID的映射关系，哈希表的冲突通过链表解决，而对于某一个条件值在多条规则中出现的情况，采用位图算法解决；(2)解析上网数据报文，提取关键字，所述关键字包括上网IP地址(USER_IP)、用户的国际移动用户身份识别码(IMSI)、用户的手机号码(MSISDN)、用户的小区位置(CELL_ID)、设备的源IP地址(SRC_IP)、设备的目的IP地址(DST_IP)和用户上网访问的业务(SERVICE_TYPE)；将关键字生成哈希，查找对应关键字的哈希表，得到该条件查找的结果；(3)所有的关键字查找完成后，得到多个RULE_ID位图，将所有的RULE_ID位图做与运算，得到整个数据包匹配的最终结果；(4)确定最终匹配的规则后，按照该条过滤规则的要求输出对应的数据报文或者CDR。