postgresql数据库 timescaledb 时序库 把大数据量表转换为超表的问题_PostgreSQL

来源:脚本之家  责任编辑:小易  

前言

这几天工作的时候发现在 timescaledb 时序库 中有部分大数据量的表不是超表,估计是当时建库的时候没有改 影响插入,查询效率 ,因此需要改成超表
因工作原因 部分内容做保密处理了

一 创建新表

首先因为在 timescaledb 时序库 中创建超表必须是要没有数据的表
因此第一步是 创建一张跟原表一模一样的表(表名后面加个_cs) 你可以直接copy建表语句,也可以直接用工具复制表结构

二 把新表改为超表

把新建的表改为超表,7天一分区

--我是7天一分区
SELECT create_hypertable('表名_cs', 'alarm_time', chunk_time_interval => INTERVAL '7 day');
-- 加个索引
CREATE INDEX "表名_cs_create_time_idx" ON "hrmw"."表名_cs" USING btree (
 "create_time" "code"."列名" DESC NULLS FIRST
);

三 插入数据

1.数据量不大的情况可以直接插入

INSERT into 表名_cs SELECT * from 表名;

2.如果数据量比较大 可以采取 一天一天 插入 或者一个月 或者几个月一起插入

INSERT into 表名_cs SELECT * from 表名 where alarm_time >= '2020-9-1';
INSERT into 表名_cs SELECT * from 表名 where alarm_time >= '2020-10-1' and alarm_time < '2020-11-1'  ;

3.运用函数(储存过程)

对于表数据量太大,一天一天的插入的话 可以运用储存过程(postgresql 数据库叫函数)

下面是我写的函数。大家可以借鉴

CREATE 
	OR REPLACE PROCEDURE "hrmw"."sp_into_表名_pt" ( ) AS $BODY$ BEGIN
	-- 一般按照表名来建函数
	DECLARE --我声明的变量有点多 按实际的来
		target_text TEXT;
	sqltext TEXT;
	sqltext1 TEXT;
	sqltext2 TEXT;
	rd record;
	nloop INT;
	isexist TEXT;
	datestr TEXT;
	begindate TEXT;
	n INT;
	BEGIN
			--查询最早一天的时间
			sqltext := 'select to_char(min(alarm_time),''yyyy-mm-dd'') datestr from tb_hrmw_moni_target';    
		EXECUTE sqltext INTO begindate;
		n := date_part( 'day', now( ) - begindate :: DATE );
--enddate:=(to_char(now(),'yyyy-mm-dd'))::text;
		FOR nloop IN 0..n
		LOOP
		datestr := ( begindate :: DATE + nloop ) :: TEXT;
		sqltext2 := '
		insert into 表名_cs 
		select
		列名1,
		code,
		列名2,
		alarm_time,
		列名3,
		列名4
		from 表名
		where alarm_time >= ''' || datestr || ' 00:00:00''
		and alarm_time <= ''' || datestr || ' 23:59:59''
		'; 
		EXECUTE sqltext2;
		COMMIT;
		
	END loop;
RETURN;

END;

END $BODY$ LANGUAGE plpgsql

四 查看效果

模式 _timescaledb_internal下面的就是分区

在这里插入图片描述

到此这篇关于postgresql数据库 timescaledb 时序库 把大数据量表转换为超表的文章就介绍到这了,更多相关postgresql数据库 timescaledb 时序库内容请搜索真格学网以前的文章或继续浏览下面的相关文章希望大家以后多多支持真格学网!

您可能感兴趣的文章:postgresql 数据库 与TimescaleDB 时序库 join 在一起浅析postgresql 数据库 TimescaleDB 修改分区时间范围

  • 本文相关:
  • abp.nhibernate连接postgresql数据库的方法
  • postgresql 循环函数的简单实现操作
  • postgresql数据库 实现向表中快速插入1000000条数据
  • postgresql中的oid和xid 说明
  • postgresql教程(十二):角色和权限管理介绍
  • postgresql pg_ctl start启动超时实例分析
  • postgresql 切换 log、xlog日志的实现
  • postgresql 使用timestamp转成date格式
  • 如何获取postgresql数据库中的json值
  • postgresql 性能优化之服务器参数配置操作
  • MySQL与PostgreSQL比较 哪个数据库更好
  • 若要玩转大数据,在什么应用场景使用Hadoop,Postg...
  • 哪位大神安装过安装timescaleDB数据库,帮忙提供一...
  • python常用的数据库有哪些?
  • 什么是PLC组态软件
  • 网站首页网页制作脚本下载服务器操作系统网站运营平面设计媒体动画电脑基础硬件教程网络安全mssqlmysqlmariadboracledb2mssql2008mssql2005sqlitepostgresqlmongodbredisaccess数据库文摘数据库其它首页postgresql 数据库 与timescaledb 时序库 join 在一起浅析postgresql 数据库 timescaledb 修改分区时间范围abp.nhibernate连接postgresql数据库的方法postgresql 循环函数的简单实现操作postgresql数据库 实现向表中快速插入1000000条数据postgresql中的oid和xid 说明postgresql教程(十二):角色和权限管理介绍postgresql pg_ctl start启动超时实例分析postgresql 切换 log、xlog日志的实现postgresql 使用timestamp转成date格式如何获取postgresql数据库中的json值postgresql 性能优化之服务器参数配置操作postgresql 角色与用户管理介绍windows下postgresql数据库的下载windows下postgresql安装图解postgresql中的oid和xid 说明15个postgresql数据库实用命令分postgresql alter语句常用操作小windows postgresql 安装图文教程postgresql 安装和简单使用postgresql 创建表分区postgresql新手入门教程postgresql中使用dblink实现跨库查询的方postgresql 添加各种约束语法的操作postgresql 12版本搭建及主备部署操作postgresql数据添加两个字段联合唯一的操sql server数据迁移至postgresql出错的解postgresql 性能优化之服务器参数配置操作postgresql 中字段类型varchar的用法postgresql 实现子查询返回多行的案例postgresql 实现登录及修改密码操作pgsql 如何删除仍有活动链接的数据库
    免责声明 - 关于我们 - 联系我们 - 广告联系 - 友情链接 - 帮助中心 - 频道导航
    Copyright © 2017 www.zgxue.com All Rights Reserved