postgresql數據庫 timescaledb 時序庫 把大數據量表轉換為超表的問題
前言
這幾天工作的時候發現在 timescaledb 時序庫 中有部分大數據量的表不是超表,估計是當時建庫的時候沒有改 影響插入,查詢效率 ,因此需要改成超表
因工作原因 部分內容做保密處理瞭
一 創建新表
首先因為在 timescaledb 時序庫 中創建超表必須是要沒有數據的表
因此第一步是 創建一張跟原表一模一樣的表(表名後面加個_cs) 你可以直接copy建表語句,也可以直接用工具復制表結構
二 把新表改為超表
把新建的表改為超表,7天一分區
--我是7天一分區 SELECT create_hypertable('表名_cs', 'alarm_time', chunk_time_interval => INTERVAL '7 day'); -- 加個索引 CREATE INDEX "表名_cs_create_time_idx" ON "hrmw"."表名_cs" USING btree ( "create_time" "code"."列名" DESC NULLS FIRST );
三 插入數據
1.數據量不大的情況可以直接插入
INSERT into 表名_cs SELECT * from 表名;
2.如果數據量比較大 可以采取 一天一天 插入 或者一個月 或者幾個月一起插入
INSERT into 表名_cs SELECT * from 表名 where alarm_time >= '2020-9-1'; INSERT into 表名_cs SELECT * from 表名 where alarm_time >= '2020-10-1' and alarm_time < '2020-11-1' ;
3.運用函數(儲存過程)
對於表數據量太大,一天一天的插入的話 可以運用儲存過程(postgresql 數據庫叫函數)
下面是我寫的函數。大傢可以借鑒
CREATE OR REPLACE PROCEDURE "hrmw"."sp_into_表名_pt" ( ) AS $BODY$ BEGIN -- 一般按照表名來建函數 DECLARE --我聲明的變量有點多 按實際的來 target_text TEXT; sqltext TEXT; sqltext1 TEXT; sqltext2 TEXT; rd record; nloop INT; isexist TEXT; datestr TEXT; begindate TEXT; n INT; BEGIN --查詢最早一天的時間 sqltext := 'select to_char(min(alarm_time),''yyyy-mm-dd'') datestr from tb_hrmw_moni_target'; EXECUTE sqltext INTO begindate; n := date_part( 'day', now( ) - begindate :: DATE ); --enddate:=(to_char(now(),'yyyy-mm-dd'))::text; FOR nloop IN 0..n LOOP datestr := ( begindate :: DATE + nloop ) :: TEXT; sqltext2 := ' insert into 表名_cs select 列名1, code, 列名2, alarm_time, 列名3, 列名4 from 表名 where alarm_time >= ''' || datestr || ' 00:00:00'' and alarm_time <= ''' || datestr || ' 23:59:59'' '; EXECUTE sqltext2; COMMIT; END loop; RETURN; END; END $BODY$ LANGUAGE plpgsql
四 查看效果
模式 _timescaledb_internal下面的就是分區
到此這篇關於postgresql數據庫 timescaledb 時序庫 把大數據量表轉換為超表的文章就介紹到這瞭,更多相關postgresql數據庫 timescaledb 時序庫內容請搜索WalkonNet以前的文章或繼續瀏覽下面的相關文章希望大傢以後多多支持WalkonNet!
推薦閱讀:
- PostgreSQL存儲過程循環調用方式
- PostgreSQL中的日期/時間函數詳解
- PostgreSQL自動更新時間戳實例代碼
- postgresql 實現replace into功能的代碼
- PostgreSQL 實現將多行合並轉為列