分享

从Oracle、SQLServer、Mysql等异构数据库高速抽取数据到GP(greenPlum)

 新进小设计 2022-03-03

greenplum数据连接配置,注意连接类型要选择PostgreSQL

clipboard

新建数据连接,源选择异构的示例数据库SampleSource(H2数据库)

clipboard

目标页签选择GP的数据连接和表

目标表更新方式:新增并更新数据到目标表

关键字段:不为空即可

插入前执行语句:系统会自动生成Merge语句,将merge语句替换成Copy语句

COPY 表名 FROM STDIN DELIMITER '|' NULL 'None'

(DELIMITER 表示列分隔符;NULL 'None'的意思是值为null的数据会被填充为“None”)

具体可以参考postgresql(greenplum)的COPY ... FROM STDIN 的语法。

clipboard

注意:老的pg版本语法上略有不同,需根据当前版本的语句来写COPY语句。


执行任务,10万行数据导入。实测4G数据导入GP用时100秒左右。

clipboard

    本站是提供个人知识管理的网络存储空间,所有内容均由用户发布,不代表本站观点。请注意甄别内容中的联系方式、诱导购买等信息,谨防诈骗。如发现有害或侵权内容,请点击一键举报。
    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多