PostgreSQL数据保留窗口功能的使用

背景

类似mongodb的rotate collate（设置表的上限容量、上限记录数，持续写入，自动覆盖最老的记录），PostgreSQL通过pipelinedb也能实现类似的功能。

此类功能非常适合日志数据，无需维护成本，持续写入，自动覆盖最老的记录。

pipelinedb计划会在2017-07月份转换为postgresql插件，届时使用会更加便利。

如果不使用pipelinedb的cv ttl功能，直接使用postgresql的话，可以使用PostgreSQL 10的worker process，设置删除任务，自动调度，删除记录，效果也是一样的。

pipelinedb cv ttl例子

创建一个流（定义数据的格式）

CREATE STREAM s1 (id int, info text, crt_time timestamp default now());

创建cv ttl，例如根据crt_time字段，保留1分钟。

CREATE CONTINUOUS VIEW cv1 WITH (ttl = '1 min', ttl_column = 'crt_time') AS  SELECT id,info,crt_time FROM s1;

激活cv

activate cv1;

测试

写入数据

pipeline=# insert into s1 values (1,'test',now());
INSERT 0 1

查看数据

pipeline=# select * from cv1;  id | info |          crt_time
----+------+----------------------------  1 | test | 2017-06-12 17:11:45.774904
(1 row)

1分钟后查看数据，自动被删除。

修改ttl，保留10秒

pipeline=# select set_ttl('cv1', '10 second', 'crt_time');  set_ttl
---------  (10,3)
(1 row)

重新测试，数据写入10秒后，自动删除。

参考

http://docs.pipelinedb.com/continuous-views.html#time-to-live-ttl-expiration

《PostgreSQL 10.0 preview 功能增强 - 后台运行(pg_background)》

PostgreSQL数据保留窗口功能的使用相关推荐

用于数据输入的基本WPF窗口功能
目录介绍用户体验使用代码保存按钮调用updateSaveButtonIsEnabled() 幕后发生了什么获取WpfWindowsLib WpfWindowsLib消除了数据输入窗口所需的 ...
[网络安全自学篇] 二.Chrome浏览器保留密码功能渗透解析及登录加密入门笔记
补充学习资料: TK13大神Windows PE专栏 https://blog.csdn.net/u013761036/article/category/6401236 TK13大神Windows对抗 ...
PostGreSQL语法及高级功能(2022-06-08补充中)
PostGreSQL语法及高级功能 1 createdb ## 首先查看help root@dd50f020b9f4:/# createdb --help createdb creates a Pos ...
PostgreSQL 数据恢复工具
PostgreSQL 本身不具备数据闪回和数据误删除保护功能,但在不同场景下也有对应的解决方案.本文由作者在 2021 PCC 大会的演讲主题<PostgreSQL 数据找回>整理而来,介 ...
PostgreSQL 10.0 preview 功能增强 - 后台运行(pg_background)
标签 PostgreSQL , 10.0 , 后台运行 , pg_background_launch , pg_background_result , pg_background_detach , p ...
MySQL 查询重复数据，删除重复数据保留id最小的一条作为唯一数据
MySQL 查询重复数据,删除重复数据保留id最小的一条作为唯一数据目录导航: 开发背景: 实战: 表结构如下图所示: 操作: 总结: 回到顶部开发背景: 最近在做一个批量数据导入到MySQL数据 ...
checkbox控件的checked属性作用是_VB6基本控件的使用，制作一个数据输入窗口
一个应用程序少不了数据输入的功能,今天教大家使用控件设计一个数据输入窗口,需要使用到6个控件: Label 文字标签 TextBox 文本框 OptionButton 单选按钮 ComboBox 下拉 ...
excel图表交互联动_深入讲解EasyShu图表与引用数据动态联动功能
EasyShu一开始的架构是将制作好的图表最终返回给用户,不依赖用户工作表的单元格区域引用,可满足图表绘制后的脱离数据源分享传播,无奈用户最强烈的反馈是要求图表与数据保持联动,这一需求实在对EasyS ...
IDEA2019 Java连接PostgreSQL数据库实现基础功能增删改查
IDEA2019 Java连接PostgreSQL数据库实现基础功能增删改查注意: 每个方法对应单个java类,可以自行进行整理汇总到一个类中一.Java通过JDBC连接到PostgreSQL数据 ...
pandas删除数据行中的重复数据行、基于dataframe所有列删除重复行、基于特定数据列或者列的作何删除重复行、删除重复行并保留重复行中的最后一行、pandas删除所有重复行（不进行数据保留）
pandas删除数据行中的重复数据行.基于dataframe所有列删除重复行.基于特定数据列或者列的作何删除重复行.删除重复行并保留重复行中的最后一行.pandas删除所有重复行(不进行数据保留) 目 ...

PostgreSQL数据保留窗口功能的使用

标签

背景

pipelinedb cv ttl例子

参考

PostgreSQL数据保留窗口功能的使用相关推荐

最新文章

热门文章