PostgreSQL 11 100亿 tpcb 性能测试 on ECS
背景 PostgreSQL 11 发布在即，以下是tpcc与tpch测试的结果： 《PostgreSQL 11 tpcc 测试(103万tpmC on ECS) - use sysbench-tpcc by Percona-Lab》 《(TPC-H测试 SF=10,SF=200) PostgreSQL 11 ...
Recent Posts
PostgreSQL sharding : citus 系列7 - topn 加速(count(*) group by order by count(*) desc limit x) (use 估值插件 topn)
背景 count(*) group by order by count(*) desc limit x 用来统计 topn。 topn是运营的重要指标，比如排行前10的活跃用户。 如果数据量非常庞大，统计会比较耗时，citus提供了一个topn插件，与HLL类似，核心是使用少量空间存储聚合过程中的数据，同时返...
PostgreSQL sharding : citus 系列6 - count(distinct xx) 加速 (use 估值插件 hll hyperloglog)
背景 在分布式数据库中，计算count(distinct xxx)，需要对distinct 的字段， 1、去重， 2、重分布去重后的数据，（这一步，如果distinct值特别多，那么就会比较耗时） 3、然后再去重， 4、最后count (xxx)， 5、求所有节点的count SUM。 例如，以下是G...
PostgreSQL pgsocket: Extension for Simple TCP/IP Socket Client
背景 PostgreSQL 插件，向外部tpc/ip socket服务发生字节流。 pgsocket is an extension for PostgreSQL server to send bytes to remote TCP/IP socket server. For the first versio...
PostgreSQL GUI pgadmin4 v3.3 支持 gis geometry 数据编辑、显示
背景 pgadmin 4 v3.3 开始支持geometry 类型的展示。 https://www.postgresql.org/ftp/pgadmin/pgadmin4/v3.3/windows/ 如果geometry使用的是SRID 4326 (WGS 84 lon/lat)坐标系，则pgadmin会自动...
PostgreSQL 11 tpcc 测试(103万tpmC on ECS) - use sysbench-tpcc by Percona-Lab
背景 环境 阿里云虚拟机 [root@pg11-test ~]# lscpu Architecture: x86_64 CPU op-mode(s): 32-bit, 64-bit Byte Order: Little Endian CPU...
PostgreSQL 大版本升级方法之一 - 不落地并行导出导入
背景 尽量快的大版本升级的方法。 一、9.4以下版本，使用pg_dump并行导出，pg_restore并行导入，迁移 (导出使用源版本pg_dump，导入使用目标版本pg_restore。如果是ppas请使用enterprisedb对应版本。) 1、(源库)全局元数据(用户、表空间)导出 需要superus...
PostgreSQL 块级 snapshot (flash back) - postgrespro improvement
背景 Postgrepro提供了一个snapshot fs的功能，允许用户对数据库状态打快照，并可以在将来迅速的闪回到某个过去的快照。 这个功能是通过数据库page级COW来实现的，类似ZFS文件系统的快照功能，在PostgreSQL 内核层面实现了。 snapshot fs与逻辑flashback quer...