专利详细信息
文献类型:专利
专利类型:发明专利
是否失效:否
是否授权:否
申 请 号:CN201810689100.8
申 请 日:20180628
申 请 人:农信银资金清算中心有限责任公司
申请人地址:100013 北京市东城区北三环东路37号A座
公 开 日:20181109
公 开 号:CN108776710A
代 理 人:王莹;李相雨
代理机构:11002 北京路浩知识产权代理有限公司
语 种:中文
摘 要:本发明公开数据库数据的并发装载方法及装置,方法包括:目标端接收源端发送的数据文件;在全量数据装载阶段通过统计表底层数据块大小按照表的数据量从大到小顺序导出不同表的方式将数据文件按顺序存到目标端不同装载目录,使目标端多进程/线程并发装载;在增量数据装载阶段通过统计表的增量数据大小按照数据量从大到小将数据文件存到目标端不同装载目录,使目标端多进程/线程并发装载;目标端多进程/线程并发装载的整个过程为进程/线程内顺序装载,进程/线程间并发执行。能对数据库数据并发装载,提升装载效率,使数据同步的实时性得以实现,同时配合多队列均衡机制,平均各队列的装载任务量,合理运用资源,保证整体装载性能。
主 权 项:1.一种数据库数据的并发装载方法,其特征在于,包括:目标端接收源端发送的数据文件;在全量数据装载阶段,通过统计表的底层数据块大小,按照表的数据量从大到小顺序导出不同表的方式,将数据文件按顺序存放到目标端不同的装载目录,以使目标端多进程/线程并发装载;在增量数据装载阶段,通过统计表的增量数据的大小,按照数据量从大到小将数据文件存放到目标端不同的装载目录,以使目标端多进程/线程并发装载;其中,所述目标端多进程/线程并发装载的整个过程为进程/线程内顺序装载,进程/线程间并发执行。
关 键 词:装载 目标端 线程 并发 数据文件 多进程 数据库数据 增量数据 统计表 数据量 并发执行 底层数据 均衡机制 全量数据 数据同步 顺序装载 装载性能 多队列 接收源 任务量 实时性 导出 队列 发送 进程 配合 保证
IPC专利分类号:G06F17/30(20060101)
参考文献:
正在载入数据...
二级参考文献:
正在载入数据...
耦合文献:
正在载入数据...
引证文献:
正在载入数据...
二级引证文献:
正在载入数据...
同被引文献:
正在载入数据...