[发明专利]一种数据加载的方法和设备

摘要

本发明提供一种数据加载系统和方法。所述方法包括：多个数据加载节点中的一个接收加载请求；响应于该加载请求，在多个数据加载节点中启动与该加载请求相对应的加载服务进程，以及生成加载标识，该加载标识与该加载服务进程相关联；数据源节点基于所述加载标识获得所述加载服务进程的监听地址；数据源节点向该监听地址发送待加载数据；数据加载节点从该监听地址接收来自该数据源节点的待加载数据，以及按照设置的路由规则将数据转发至其他数据加载节点，或者将数据加载到相关联的存储设备。根据本发明的方法，可以提高数据加载的安全性和可靠性，避免采用硬件或者频繁启动加载而带来的损耗成本，并且利用并发的系统资源来执行数据加载的过程。

主权项

1.一种数据加载系统，包括：一个或者多个数据源节点，每个数据源节点包括加载客户端模块；以及多个数据加载节点，所述多个数据加载节点直接或间接地相互耦合以便能够进行通信，并且所述多个数据加载节点中的一些包括存储设备或者耦合到存储设备，每个数据加载节点包括加载服务器模块；其中，所述加载服务器模块用于：接收加载请求；响应于所述加载请求，启动与该加载请求相对应的加载服务进程，以及生成与所述加载服务进程相关联的加载标识；从所述加载服务进程的监听地址接收来自所述加载客户端模块的待加载数据，以及按照设置的路由规则将数据转发至其他加载服务器模块或者将数据加载到相关联的存储设备；所述加载客户端模块用于：基于所述加载标识从加载服务器模块获得所述加载服务进程的监听地址；向所述监听地址发送待加载数据。