Linux Zombie进程状态介绍 以及 如何清理
背景 Linux 进程有哪些状态 通过ps的帮助手册，能看到进程有几种状态 man ps D uninterruptible sleep (usually IO) R running or runnable (on run queu...
Recent Posts
大量使用临时表带来的系统表如pg_attribute膨胀问题，替代方案，以及如何擦屁股 - Greenplum, PostgreSQL最佳实践
背景 以前有使用Greenplum的朋友遇到元表膨胀的问题，总结了原因写了一篇文章如下。 建议先阅读这篇文档，再阅读本文，里面有些原理我在本文就不讲了。 http://blog.163.com/digoal@126/blog/static/1638770402014616113353555 近日，又有使用P...
PostgreSQL merge json的正确姿势
背景 json merge是业务常用的功能，例如网络爬虫，更新合并新爬到的内容。 PostgreSQL 9.5 对JSON的类型进行了非常大的功能增强，例如支持合并，按KEY删除，更新KEY VALUE等。 https://www.postgresql.org/docs/9.5/static/function...
在PostgreSQL中如何生成线性相关的测试数据
背景 生成线性相关的测试数据。 同样可以用到generate_series和随机数。 例子 生成10万条随机数字。 select trunc(10000 + 1000000*random()) id from generate_series(1,100000); 根据刚才那组数据，加减5以内的...
在PostgreSQL中如何生成测试kmean算法的数据
背景 生成Kmeans的测试数据。 例如每10000为界，生成10个种子，每个节点以100内的随机数相加，生成一组测试数据。 postgres=# create table test(id int, rand int); CREATE TABLE postgres=# insert into ...
PostgreSQL Oracle 兼容性之 - connect by
背景 Oracle用户常用的功能之一connect by。 主要针对的是树形查询，例如上下级关系，家族图谱，分类，等。 用法举例 创建示例表： CREATE TABLE TBL_TEST ( ID NUMBER, NAME VARCHAR2(100 BYTE), PID NU...
EnterpriseDB (PPAS) Oracle兼容性Virtual Private Database(VPD) 数据隔离以及当前缺陷
背景 不带barrier的视图是不安全的，我在前面写过文章来讲这个，以及如何攻击这种视图。 https://yq.aliyun.com/articles/14731 PostgreSQL 为了增强视图的安全，增加了barrier的属性，来解决被攻击的问题。 PostgreSQL 9.5 则提供了RLS来达到...
在java中正确使用PostgreSQL大对象和字节流(bytea)类型的姿势
背景 在PostgreSQL中大对象和字节流是两种数据类型，使用时需要注意。 正文 有人在java中使用getBlob获取所谓的”大对象”失败，问题是用法不对。 groovy:000> rs.getBlob("image") ERROR org.postgresql.util.PSQLExcepti...
Linux cgroup - cpu与cpuset子系统讲解
背景 Linux cgroup - cpu与cpuset子系统讲解 Linux cgroup 有两个子系统支持CPU隔离。 一个是cpu子系统，另一个是cpuset子系统。 cpu子系统根据进程设置的调度属性，选择对应的CPU资源调度方法 1. 完全公平调度 Completely Fair Scheduler...
PostgreSQL的天气预报 - 如何预测Freeze IO风暴
背景 还记得我写的这篇文档吗？ 《PostgreSQL 大表自动 freeze 优化思路》 https://yq.aliyun.com/articles/50411 文章主要针对如何优化大表的freeze调度来减少IO风暴的问题，请注意只是减少，不是避免。 作为一名有追求的PGer，要时刻保持警惕，生于忧患...