[发明专利]一种隔离网络内海量数据分析装置及方法

摘要

本发明公开了一种隔离网络内海量数据分析装置及方法，其中，装置包括A网数据任务生成模块、A网任务分流模块、任务交互模块、任务解析模块、任务调度模块以及数据反馈模块；方法步骤包括读取和生成xml任务文件、解析和判断任务文件、隔离网络内传输文件、执行任务文件获取对应的结果数据信息并存放到任务文件中、调度网络服务资源、生成完结的任务文件并回传给应用系统中。本发明的隔离网络内海量数据分析装置及方法执行中只需要将装置和网络通道调试正常，就可以有效利用其它网络资源，使得减轻单独的网络负载，并减少服务器和网络资源的额外投入，降低投入成本。

主权项

一种隔离网络内海量数据分析装置，其特征在于：包括A网数据任务生成模块、A网任务分流模块、任务交互模块、任务解析模块、任务调度模块以及数据反馈模块；A网数据任务生成模块，用于将A网中需要执行的数据任务生成xml任务文件，并在每条xml任务文件中添加任务ID号、信息来源、回馈段、步骤段以及网络段，且步骤段初始设置为“A网执行”、网络段初始设置为“A网”，再将生成的xml任务文件发送到A网任务分流模块；A网任务分流模块，用于根据A网的服务资源负载大小来确定是否分流以及分流的任务量，若确定为需要分流时，则将分流出的xml任务文件的步骤段设置为“B网执行”后发送给任务解析模块，同时将未分流的xml任务文件在A网执行完数据查询任务后存入结果数据至xml任务文件的回馈段中，再将未分流的xml任务文件的步骤段设置为“完成”后发送给任务解析模块；任务解析模块，用于解析发送过来的xml任务文件， 当xml任务文件中步骤段的状态为“B网执行”且网络段为“A网”时，则将该类型xml任务文件发送到任务交互模块，当xml任务文件中步骤段的状态为“B网执行”且网络段为“B网”时，则将该类型xml任务文件发送到任务调度模块，当xml任务文件中步骤段的状态为“完成”且网络段为“A网”时，则将该类型xml任务文件发送到数据反馈模块，当xml任务文件中步骤段的状态为“完成”且网络段为“B网”时，则将该类型xml任务文件发送到任务交互模块；任务交互模块，用于对接收的xml任务文件的网络段状态进行判断，并在xml任务文件中网络段为“A网”时，将要发送的xml任务文件中的网络段设置为“B网”，再发送到任务解析模块中，或者在xml任务文件中网络段为“B网”时，将要发送的xml任务文件中的网络段设置为“A网”，再发送到任务解析模块中；任务调度模块，用于接收步骤段为“B网执行”的xml任务文件，并根据每个服务器的地址及性能信息将任务文件均衡的分发给相应的服务器进行执行，再将执行后得到的结果数据存入对应xml任务文件的回馈段中，同时将该xml任务文件的步骤段设置为“完成”，最后将这些执行完成后的xml任务文件回传到任务解析模块中；数据反馈模块，用于实时获取步骤段为“完成”的数据任务文件，然后根据任务ID和信息来源将回馈段中得到的结果数据进行反馈回传。