[发明专利]一种高效数据处理服务器系统

摘要

本发明提供了一种高效数据处理服务器系统，其包括数据源服务器、第一数据处理服务器、第二数据处理服务器、备用数据处理服务器以及任务分配服务器，所述任务分配服务器接收所述数据源服务器的数据输入，所述任务分配服务器用于向所述第一数据处理服务器、第二数据处理服务器、备用数据处理服务器提供经过预处理的源数据。本发明提供的高效数据处理服务器系统根据两个数据处理服务器的历史数据处理状态通过备用服务器进行辅助处理，保证了数据处理的高效性；同时本发明可以在获取历史数据处理状态的时间内通过备用数据处理器保证数据处理不受影响。

主权项

一种高效数据处理服务器系统，其特征在于，包括数据源服务器、第一数据处理服务器、第二数据处理服务器、备用数据处理服务器以及任务分配服务器，所述任务分配服务器接收所述数据源服务器的数据输入，所述任务分配服务器用于向所述第一数据处理服务器、第二数据处理服务器、备用数据处理服务器提供经过预处理的源数据；所述数据源服务器通过特定的数据接口根据数据类型、关键词信息获取源数据；并对源数据进行预处理，所述数据源服务器的预处理操作为对缺损数据进行修复，删除无用数据；所述缺损数据为与数据类型库中数据后缀名称近似度超过设定阈值的数据，修复缺损数据的方式为根据数据类型库中的具体数据后缀作为所述缺损数据的后缀替换掉原有的数据后缀；所述无用数据为与数据类型库中数据后缀名称近似度低于设定阈值的数据；其中数据类型的近似度根据数据的后缀名称的字符的数量进行量化；所述任务分配服务器接收所述数据源服务器发送的数据，所述任务分配服务器筛选出特定的两种类型的数据并按照数据类别分别发送至第一数据处理服务器、第二数据处理服务器，所述第一数据处理服务器、第二数据处理服务器分别处理一种类型的数据；所述备用数据处理服务器可以处理所述两种类型的数据中的任意一种；所述第一数据处理服务器、第二数据处理服务器将实时的数据处理进度发送至所述任务分配服务器，所述第一数据处理服务器、第二数据处理服务器至少连续工作48小时，所述任务分配服务器以24小时为一个周期以1小时为记录频率记录第一数据处理服务器、第二数据处理服务器的数据处理进度，所述任务分配服务器记录至少两个周期内第一数据处理服务器、第二数据处理服务器的数据处理进度，并对比两个周期内第一数据处理服务器、第二数据处理服务器在相同的记录时间点的处理进度，若两个周期内在同一个记录时间点第一数据处理服务器都高于第二数据处理服务器的处理进度，在下一个周期内在该记录时间点所述第二数据处理服务器将接收到的数据发送一半至所述备用数据处理服务器，若两个周期内在同一个记录时间点第二数据处理服务器都高于第一数据处理服务器的处理进度，在下一个周期内该记录时间点所述第一数据处理服务器将接收到的数据发送一半至所述备用数据处理服务器。