time-series - 如何结合不同时期的Clickhouse数据取决于数据的年龄？

Question

我有大量的数据，收集速度太快，我开始感到资源不足。

我正在寻找像 AggregatingMergeTree 这样的东西，但我想使用不同的时间段进行聚合以降低旧记录的数据密度

例如，我每分钟都有一些数据，我想要：

1. 上周每分钟存储数据
2. 上个月按小时汇总的存储数据
3. 过去 2 个月按半天汇总的存储数据
4. 去年按天汇总的存储数据

标签： time-seriesclickhouse

Answer 1

石墨合并树https://clickhouse.tech/docs/en/engines/table-engines/mergetree-family/graphitemergetree/

ttl group by -- https://github.com/ClickHouse/ClickHouse/issues/14345

summingMT + 清除列 -- https://youtu.be/efRryvtKlq0?t=1756