[发明专利]一种实现大数据平台输入/输出处理的方法及系统

摘要

本发明实施例公开了一种实现大数据平台I/O处理的方法，Primary server将由client推送的数据写入自身高速缓存后，向master发送已写入Primary server高速缓存的信号；Primary server向client反馈写操作完成信号；Primary server将由client推送的数据发送到各个Secondary server后，各个Secondary server异步将所述数据写入自身的高速缓存中；Primary server异步等待并接收所有Secondary server反馈的写缓存完成信号后，向master发送已写入Secondary server高速缓存的信号。本发明实施例还同时公开了一种实现大数据平台I/O处理的系统。

主权项

1.一种实现大数据平台输入/输出I/O处理的方法，其特征在于，所述方法包括：基本服务器Primary server将由客户端client推送的数据写入自身高速缓存后，向主存储服务器master发送已写入Primary server高速缓存的信号；Primary server向client反馈写操作完成信号；Primary server将由client推送的数据发送到各个从属服务器Secondary server后，各个Secondary server异步将所述数据写入自身的高速缓存中；Primary server异步等待并接收所有Secondary server反馈的写缓存完成信号后，向master发送已写入Secondary server高速缓存的信号；Primary server向master发送已写入Secondary server高速缓存的信号之后，直接将需要存储的数据块写到自身的存储器中；之后，向master发送已写入Primary server的信号；Primary server异步等待所有Secondary server在写操作完成后发送的反馈信号并对所述反馈信号进行检测；当所述反馈信号均为写操作完成信号时，释放自身的高速缓存空间；之后，向master发送已写入Secondary server的信号。