postgresql數據合並,多條數據合並成1條的操作
對於主表中一條記錄,對應明細表中的96條數據,每一條數據相隔15分鐘,明細中沒96條數據對應主表中的一個日期trade_date,並且每條明細中有一個字段start_time, 即明細中每96條數據中第一條數據中start_time為00:00,
第二條為00:15,第三條為00:30,依次類推,直到23:45 ,現在要將明細表中的96條數據合並成24條,即第一條數據中start_time為00:00,第二條為01:00,第三條為02:00
sql:select max(de.bid_num) report_num,concat(to_char(to_timestamp(concat(ru.trade_date,' ',de.start_time), 'YYYY-MM-DD HH24:mi') :: TIMESTAMP WITHOUT TIME ZONE, 'HH24 '),':00') dd from quote_trade_rule ru LEFT JOIN quote_trade_rule_detail de on ru.trade_rule_id = de.trade_rule_id WHERE 1 = 1 AND ru.market_id ='a29c81ed-2baf-4c42-881a-f1e64a41e1b0' AND to_char(ru.trade_date, 'YYYY-MM-DD') ='2018-10-17' AND ru.rule_type ='2' GROUP BY dd ,trade_date ORDER BY dd,trade_date
將10條主表數據對應的960條明細數據合並成如下24條數據:
補充:Postgresql中執行計劃的合並連接
Merge Join
通常情況下,散列連接的效果比合並連接好,但如果源數據上有索引,或者結果已經被排過序,在執行排序合並連接時,就不需要排序瞭,這時合並連接的性能會優於散列連接。
下面示例中,people的id字段和dept01的depto字段都有索引,且從索引掃描的數據已經排好序,可以直接走Merge Join:
highgo=# explain select people.id from people,dept01 where people.id=dept01.deptno; QUERY PLAN ------------------------------------------------------------------------------------------------- Merge Join (cost=0.86..64873.59 rows=1048576 width=4) Merge Cond: (people.id = dept01.deptno) -> Index Only Scan using people_pkey on people (cost=0.44..303935.44 rows=10000000 width=4) -> Index Only Scan using idx_deptno on dept01 (cost=0.42..51764.54 rows=1048576 width=2) (4 行記錄)
刪除dept01上的索引,會發現執行計劃中先對dept01排序後在走Merge Join,示例如下:
highgo=# explain select people.id from people,dept01 where people.id=dept01.deptno; QUERY PLAN ------------------------------------------------------------------------------------------------- Merge Join (cost=136112.80..154464.29 rows=1048576 width=4) Merge Cond: (people.id = dept01.deptno) -> Index Only Scan using people_pkey on people (cost=0.44..303935.44 rows=10000000 width=4) -> Materialize (cost=136112.36..141355.24 rows=1048576 width=2) -> Sort (cost=136112.36..138733.80 rows=1048576 width=2) Sort Key: dept01.deptno -> Seq Scan on dept01 (cost=0.00..16918.76 rows=1048576 width=2) (7 行記錄)
上面執行計劃中,可看到“Sort Key: dept01.deptno”,這就是對表dept01的id字段進行排序。
以上為個人經驗,希望能給大傢一個參考,也希望大傢多多支持WalkonNet。如有錯誤或未考慮完全的地方,望不吝賜教。
推薦閱讀:
- 淺談pg_hint_plan定制執行計劃
- PostgreSQL 對IN,EXISTS,ANY/ALL,JOIN的sql優化方案
- postgresql insert into select無法使用並行查詢的解決
- postgresql 刪除重復數據的幾種方法小結
- postgresql如何找到表中重復數據的行並刪除