PolarDB for PostgreSQL 开源产品 FAQ

一、部署使用类


1. 是否有提供docker镜像

官方暂时没有提供docker镜像,但用户可以通过命令一键构建docker镜像。具体参考:

https://github.com/alibaba/PolarDB-for-PostgreSQL#deployment-using-docker-image


2. 默认ssh 端口非22 的时候,如何配置

目前程序中没有针对修改ssh端口的配置,建议将ssh端口修改回默认22。


3. 有没有提供相关配置列表,可以跑出一定性能的benchmark结果

暂时没有。不同的硬件下会产生不同的benchmark结果。可以搭建polardb数据库,使用pgbench作为benchamark工具进行性能测试。具体参考:

https://github.com/alibaba/PolarDB-for-PostgreSQL/blob/master/doc/polardb/benchmark.md


4. polardb是否有单点故障(搭建分布式的polardb)

没有。通过onekey.sh all或者pgxc_ctl -c $HOME/polardb/polardb_paxos.conf prepare standalone命令部署得到的polardb默认是有三节点部署在同一台物理机器上的。通过将 polardb_paxos.conf配置文件中localhost改为对应的机器ip,就可以避免单点故障。(注意三台机器的ssh需要被打通)

更改文件示例:

datanodeMasterServers=(localhost) # none means this master is not available.
datanodeSlaveServers=(localhost) # value none means this slave is not available
datanodeLearnerServers=(localhost) # value none means this learner is not available

——>

datanodeMasterServers=(Server1 IP) # none means this master is not available.
datanodeSlaveServers=(Server2 IP) # value none means this slave is not available
datanodeLearnerServers=(Server3 IP) # value none means this learner is not available


5. XPaxos是否已经完全开源,包含了一个multi-paxos系统的所有特性

是的,已经开源。参考commit "3b2a3a8cea2a872c0179e8d0ebe50a482420bb0a"


6. 使用pgxc_ctl时报错

使用pgxc_ctl -c $HOME/polardb/polardb_paxos.conf prepare standalone命令时报错

答:需要使用非root用户进行部署。pgxc_ctl会通过scp的方式在多台机器间分发二进制文件等,所以需要对涉及到的机器打通ssh。可以使用ssh-copy-id命令,如"ssh-copy-id username@192.168.2.156"。


7. 使用pgxc_ctl时报错

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf init all初始化集群时,报错如下

答: 需要配置环境变量

vi ~/.bashrc
export PATH="$HOME/polardb/polardbhome/bin:$PATH"
export LD_LIBRARY_PATH="$HOME/polardb/polardbhome/lib:$LD_LIBRARY_PATH"

更多内容参考:https://github.com/alibaba/PolarDB-for-PostgreSQL/#previous-preparation


8. PolarDB-for-PostgreSQL的语法兼容性

语法文档 除了https://github.com/alibaba/PolarDB-for-PostgreSQL,还有其它地方有吗?

答:目前版本polardb for postgresql兼容社区postgresql语法,在语法上可以认为和社区postgresql相同。


9. PolarDB-for-Postgresql开源版本目前只支持单机版吗?

是的,现在是复制高可用集群。数据库本身是单机形态。后续会发布集群版,请关注我们的github动态。


二、编译类


1. docker build失败

使用docker build -t polardb-for-postgresql -f ./docker/Dockerfile . 命令报错

[ 80%] [ 80%] Building CXX object Source/CMakeFiles/CMakeLib.dir/cmNinjaUtilityTargetGenerator.cxx.o

Building CXX object Source/CMakeFiles/CMakeLib.dir/cmNinjaNormalTargetGenerator.cxx.o

�[91mg++: fatal error: Killed signal terminated program cc1plus

compilation terminated.

这是编译安装cmake时的报错。可能是由内存不足引起,可以尝试扩大虚拟机内存。

可以google搜索“Killed signal terminated program cc1plus”尝试各种方法来解决。


2. onekey.sh all 编译报错

执行onekey.sh all时,报错:

checking for Python.h... no

configure: error: header file is required for Python

答:在执行onekey.sh前,需要先安装python。


3. gcc 10.2.0编译报错

执行build.sh报错

/root/PolarDB-for-PostgreSQL/src/backend/polar_dma/libconsensus/dependency/easy/src/thread/easy_uthread.c:266:17: error: ‘SIG_BLOCK’ undeclared (first use in this function)

答:这是gcc版本的问题。已经增加了gcc 10版本下的支持。另外在gcc 4.8或者7.2下也可以正确编译。


4. 编译时报错 link error with SSL_* symbols

编译报错如下:

/usr/bin/ld: ../../src/backend/polar_dma/lib//libpolar_consensus_wrapper.so: undefined reference to `CRYPTO_num_locks'

/usr/bin/ld: ../../src/backend/polar_dma/lib//libpolar_consensus_wrapper.so: undefined reference to `CRYPTO_cleanup_all_ex_data'

/usr/bin/ld: ../../src/backend/polar_dma/lib//libpolar_consensus_wrapper.so: undefined reference to `CRYPTO_mem_leaks_fp'

collect2: error: ld returned 1 exit status

make[2]: *** [Makefile:71: postgres] Error 1

make[2]: Leaving directory '/home/ajung/src/PolarDB-for-PostgreSQL/src/backend'

make[1]: *** [Makefile:42: all-backend-recurse] Error 2

make[1]: Leaving directory '/home/ajung/src/PolarDB-for-PostgreSQL/src'

make: *** [GNUmakefile:11: all-src-recurse] Error 2

答: 在编译前需要安装openssl。需要安装的其他内容参考: https://github.com/alibaba/PolarDB-for-PostgreSQL#deployment-from-source-code


5. macOS上,PG的SPI函数是在哪个so里面实现的?

PG的SPI函数在 src/backend/executor/spi.c 中。属于内核模块。并非编译成so。


三、架构类


1. 是否会写一些high-level的设计文档

文档在不断完善补充中。目前已有的可以参考: https://github.com/alibaba/PolarDB-for-PostgreSQL#architecture--roadmap


2. 相对于pg的代码改动点有哪些

polardb会逐步开源新特性。目前已经开源的特性主要包括HA增强(基于paxos的HA和基于streaming的HA),CTS等特性。欢迎关注后续即将发布的各项增强功能。


3. 后续有计划完整开源吧?想多机、 多DATANODE部署一下

有的,可以看一下roadmap的文档。文档地址: https://github.com/alibaba/PolarDB-for-PostgreSQL#architecture--roadmap


4. 目前开源的版本基本pg哪个版本开发的

基于postgresql 11.2 版本开发


5. 开源版本最大仅支持三个节点的集群吗

可以支持多个副本部署。目前开源的版本本质上是多副本,只有一个计算节点,所以可以在多台机器上部署多个副本,通常三副本就能满足绝大部分场景的可靠性需求。后续会开源集群版本,提供多个计算节点,敬请关注。


6. 这个集群是类似oracle rac 这种share disk的架构吗?

不是的。目前开源版本是单机数据库,提供了多个副本,每个副本使用独立的磁盘,并非shard disk。


四、运维操作类

1. autovacuum操作一月被触发一次, 每次触发的时候数据库就慢

autovacuum触发频率可以由配置参数决定。vacuum的目的在于回收page中的dead tuple、freeze transaction xid,vacuum时会产生IO,也会对表加ShareUpdateExclusiveLock锁。所以会对数据库有性能影响。

更多原理和细节可以参考官方文档: https://www.postgresql.org/docs/11/runtime-config-autovacuum.html

https://www.postgresql.org/docs/11/routine-vacuuming.html


2. pg12 主从+ patroni2.1 patroni leader 切换之后,pg 主从丢失这个是什么情况?

正常时:

patroni 切换leader 之后, 在执行查看主从命令,不再显示。

原因:

解决patroni leader 故障切换之后,pg 主从也发生了切换。


3. 长事务导致autovacuum不能推进oldest xmin解决方法

需要terminate该长事务。可以使用命令 select pg_terminate_backend($backend_pid);


4. 有什么数据库,对于非固定列的数据,存储与查询还有统计支持比较好的?

可以看下HBase 或者 MongoDB。


5. 开源版的polardb支持全文检索吗?性能如何?

全文检索是社区postgresql原生提供的能力,开源版本postgresql for polardb继承了这个能力,但没有进行开发增强。


6. pglogical 插件比原生的逻辑复制有什么优势?

pglogical是一个独立插件,原理与原生的逻辑复制是一样的,pglogical有更加强大的冲突处理能力。具体可以参考:https://www.2ndquadrant.com/en/resources/pglogical/


7. pg 的高可用 在生产环境有在使用pgpool的吗?

pgpool可以使用。也可以看下Patroni是否满足需要。


8. PG性能抖动怎么记录现场?日志记录的执行计划只能看到执行计划突然很慢,1000次只有1次很慢。

可以尝试下auto_explain。具体可以参考 https://github.com/digoal/blog/blob/master/202106/20210621_03.md


9. 阿里云的pg支持btree_gin之类的extension么?

支持。


10. postgresql内置的copyfrom函数为什么拷贝效率那么高

copy在多个方面提高了拷贝效率。具体可以参考 https://*.com/questions/46715354/how-does-copy-work-and-why-is-it-so-much-faster-than-insert


11. pg vacuum analyze 大表的时候,会写很多wal日志吗

如果vacuum修改了page,就会产生wal日志。产生的日志量取决于对表的修改量大小,跟表的大小并没有直接关系。


12. 备份pg表时,为何主键和sequence 也被备份了

物理备份本来就含了主键和序列


13. 在pg里面,我一个用户要授予对所有数据库只有查询和修改,但是没有删除权限. 这要怎么实现,我现在很多库我不想一个一个库去授权

数据库没有提供内置的功能。可以自行编写脚本来对所有数据库进行授权。授权和撤销可以使用 grant和revoke命令。参考 https://www.postgresql.org/docs/11/sql-grant.html

https://www.postgresql.org/docs/11/sql-revoke.html

 

上一篇:C++程序设计课程师生互动(2012年春第12周)


下一篇:LC3视点:从阿里云函数计算看Serverless的演进与思考