基于多进程并发和插件向数据库快速加载数据方法和系统
授权
摘要

本发明公开了基于多进程并发和插件向数据库快速加载数据方法和系统,包括数据加载工具和注册到数据库服务器的数据加载插件,所述数据加载插件包括一个写进程和多个解析进程;该方法包括以下步骤:所述数据加载工具负责读取配置文件,并连接和调用数据加载插件进行加载工作;所述数据加载插件接受连接的进程为写进程,写进程创建多个所述解析进程;每个所述解析进程分任务并行读取源数据文件中相关的数据并解析和组装成元组,将所述元组放入其对应的共享内存队列;所述写进程遍历所有所述共享内存队列,从中取出元组数据后直接写入目标数据文件中。本发明有益效果:增强了扩展性,降低了与数据库服务器的耦合性,提高了加载效率。

基本信息
专利标题 :
基于多进程并发和插件向数据库快速加载数据方法和系统
专利标题(英):
暂无
公开(公告)号 :
CN110347440A
申请号 :
CN201910549601.0
公开(公告)日 :
2019-10-18
申请日 :
2019-06-24
授权号 :
CN110347440B
授权日 :
2022-06-03
发明人 :
袁远松王建华杜春魁
申请人 :
北京人大金仓信息技术股份有限公司
申请人地址 :
北京市朝阳区容达路7号院5号楼1至3层101内二层201
代理机构 :
北京纽乐康知识产权代理事务所(普通合伙)
代理人 :
白明珠
优先权 :
CN201910549601.0
主分类号 :
G06F9/445
IPC分类号 :
G06F9/445  G06F16/25  
IPC结构图谱
G
G部——物理
G06
计算;推算或计数
G06F
电数字数据处理
G06F9/00
程序控制装置,例如,控制单元
G06F9/06
应用存入的程序的,即应用处理设备的内部存储来接收程序并保持程序的
G06F9/44
用于执行专门程序的装置
G06F9/445
程序的加载或启动
法律状态
2022-06-03 :
授权
2019-11-12 :
实质审查的生效
IPC(主分类) : G06F 9/445
申请日 : 20190624
2019-10-18 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
  • 联系电话
    电话:023-6033-8768
    QQ:1493236332
  • 联系 Q Q
    电话:023-6033-8768
    QQ:1493236332
  • 关注微信
    电话:023-6033-8768
    QQ:1493236332
  • 收藏
    电话:023-6033-8768
    QQ:1493236332