[发明专利]海量数据高效入库方法

摘要

本发明提供了一种海量数据高效入库方法，包括步骤1）、配置入库方法的配置规则；2）、初始化；3）、数据存储控制器根据配置规则进行入库任务封装和调度管理；4）、入库工作终端管理器根据配置规则对入库任务进行分配调度；5）、入库工作终端管理器将任务并付空闲的入库终端；6）、入库终端执行入库操作；7）、入库工作终端管理器将通知数据存储控制器扫描入库信息转存文件，将转存的入库信息重新进行调度；8）、关闭过程中，转存未入库信息，该方法较现有技术对海量数据入库过程增加了调度管理，可以适应不同的被监控系统及其规模变化、可适应不同的被监控系统的具体业务特点、且提高了数据入库的准确性和完整性。

主权项

海量数据高效入库方法，其特征在于该方法包括以下步骤：1）、配置入库方法的配置规则；2）、启动数据存储控制器并进行初始化；3）、数据存储控制器检测入库信息缓存中是否有需要入库的信息，根据配置规则对需要入库的信息进行入库任务封装和调度管理； 4）、入库工作终端管理器根据配置规则对入库任务进行分配调度； 5）、入库工作终端管理器从入库任务缓存中取出任务，并交给该空闲的入库终端执行；6）、入库终端执行入库操作；7）、入库工作终端管理器将通知数据存储控制器扫描入库信息转存文件，将转存的入库信息重新进行调度；8）、当控制器关闭过程中，转存入库信息缓存、入库任务缓存中的待入库信息以及被入库工作终端拒绝的待入库信息。