PG-实现dblink功能(postgres_fdw|oracle_fdw|mysql_fdw等)

postgres_fdw

通过 postgres_fdw 访问远程 PostgreSQL 数据库表。

配置 postges_fdw

步骤

  1. 在源端(本地库)创建 postgres_fdw 插件
  2. 创建 foreign server 外部服务(即:指连接外部数据源的连接信息)
  3. 创建映射用户(映射用户指定了访问外部表的本地用户和远程用户信息)
  4. 创建外部表(外部表的表定义建议和远端表结构一致)

详细过程

创建安装插件(本地库)

postgres 超级用户登录 PostgreSQL

CREATE EXTENSION postgres_fdw;
权限配置(本地库)
  • 若使用超级用户使用postgres_fdw可以跳过

  • 普通用户使用postgres_fdw需要单独授权

    GRANT USAGE ON FOREIGN DATA WRAPPER postgres_fdw TO pguser;
    
创建外部服务(本地库)

外部服务定义了远端 PostgreSQL 数据库 的 IP 、 端口 、 数据库连接信息

CREATE SERVER fdw2pg2 FOREIGN DATA WRAPPER postgres_fdw OPTIONS (host 'pg2host', port '5432', dbname 'devdb');
创建映射用户(本地库)

映射用户指定了连接源端 PostgreSQL 数据库的用户名和密码信息

CREATE USER MAPPING FOR pguser
SERVER fdw2pg2 OPTIONS (user 'pg2user', password 'pg2user');
  • FOR :配置的用户为本地的数据库用户
  • OPTIONS :配置的是远端 PostgreSQL 数据库的用户和密码
远端数据库创建测试表
CREATE TABLE tl_fdw1 (id int4 ,info text) ;
INSERT INTO tl_fdw1 (id , info ) VALUES (1, 'a'),(2, 'b');
commit;
创建外部表(本地库)
CREATE FOREIGN TABLE ft_fdw1 (
id int4,
info text
) SERVER fdw2pg2 OPTIONS (schema_name 'pg2user', table_name 'tl_fdw1');
通过外部表访问远端数据表

注意:远端数据库pg_hba.conf文件需要允许本地库访问策略

select * from ft_fdw1;

其它特性

支持可写特性

从PostgreSQL 9.3 版本开始支持postgres_fdw 外部表可写的条件

  • 创建映射用户时配置的远端数据库用户需要对远端表具有写权限
  • PostgreSQL 必须是 9.3及以上版本。

聚合函数下推

PostgreSQL 10 版本在 postgres_fdw 扩展模块中新增了一个可以将聚合、关联操作下推到远端 PostgreSQL 数据库进行的特性。它大幅度减少了从远程库传送到本地库的数据量,提升了 postgres_fdw 外部表上聚合查询的性能。

其它插件支持外部表方式访问mysql,oracle等数据库表数据

上一篇:Hadoop 2.2.0版本HDFS的HA配置


下一篇:2021-10-13