TimescaleDB

刷新层级结构 SQL

select ('call refresh_continuous_aggregate(''' || user_view_name || ''', floor(extract(epoch from ''2023-01-01 00:00:00.000''::timestamp) * 1000)::int8, floor(extract(epoch from ''2023-09-08 23:59:59.999''::timestamp) * 1000)::int8);')::varchar
from _timescaledb_catalog.continuous_agg
order by split_part(user_view_name, '_', 2), bucket_width;

删除层级结构 SQL

select ('drop materialized view ' || user_view_name || ';')::varchar
from _timescaledb_catalog.continuous_agg
order by split_part(user_view_name, '_', 2), bucket_width desc;

查询最早和最晚数据时间

select to_timestamp(min(range_start_integer) / 1000) as min, to_timestamp(max(range_end_integer) / 1000) as max
from timescaledb_information.chunks;

修改层级结构查询策略

select ('alter materialized view ' || user_view_name || ' set (timescaledb.materialized_only = false);')::varchar
from _timescaledb_catalog.continuous_agg
order by split_part(user_view_name, '_', 2), bucket_width desc;

总行数

select approximate_row_count('data_history');

数据库大小

select datname, pg_size_pretty(pg_database_size(datname)) from pg_database order by pg_database_size(datname) desc;

TimescaleDB 版本

select default_version, installed_version
from pg_available_extensions
where name = 'timescaledb';

历史数据大小

select case when ca.view_name is null then s.hypertable_name else ca.view_name end, pg_size_pretty(s.total_size)
from timescaledb_information.continuous_aggregates ca
         right join (select hypertable_name, sum(total_bytes) as total_size from _timescaledb_internal.hypertable_chunk_local_size group by hypertable_name) s on s.hypertable_name = ca.materialization_hypertable_name
order by s.total_size desc;

后台任务情况

select bj.id as job_id,
       bj.proc_name,
       bj.scheduled,
       bjs.total_runs,
       bjs.total_successes,
       bjs.total_failures,
       bjs.last_run_success,
       bjs.last_finish,
       bjs.next_start,
       bjs.last_start,
       bjs.total_duration,
       bj.schedule_interval,
       ca.view_name
from _timescaledb_internal.bgw_job_stat bjs
         left join _timescaledb_config.bgw_job bj on bj.id = bjs.job_id
         left join timescaledb_information.jobs tj on tj.job_id = bj.id
         left join timescaledb_information.continuous_aggregates ca on ca.materialization_hypertable_name = tj.hypertable_name;

查询某时间段历史数据大小

select to_timestamp(min(c.range_start_integer) / 1000) as start, to_timestamp(max(c.range_end_integer) / 1000) as "end", pg_size_pretty(sum(hcls.total_bytes)) total_size
from _timescaledb_internal.hypertable_chunk_local_size hcls
         left join timescaledb_information.chunks c on c.chunk_name = hcls.chunk_name and c.chunk_schema = hcls.chunk_schema
where hcls.hypertable_name = 'data_history'
  and floor(extract(epoch from '2023-01-01 00:00:00.000 +08:00'::timestamptz) * 1000) <= c.range_start_integer
  and c.range_end_integer <= floor(extract(epoch from '2023-01-01 00:00:00.000 +08:00'::timestamptz) * 1000);

删除指定时间之前的历史数据

select ('select drop_chunks(''' || user_view_name || ''', newer_than => floor(extract(epoch from ''2024-04-11 00:00:00.000 +08:00''::timestamptz) * 1000)::bigint);')::varchar
from (select 'data_history' as user_view_name, 0 as bucket_width
      union
      (select user_view_name, bucket_width
       from _timescaledb_catalog.continuous_agg
       order by split_part(user_view_name, '_', 2), bucket_width desc)) t
order by bucket_width desc;

历史数据分块大小

select hcs.chunk_name, pg_size_pretty(hcs.total_bytes), to_timestamp(c.range_start_integer/1000) 
from _timescaledb_internal.hypertable_chunk_local_size hcs
left join timescaledb_information.chunks c on c.hypertable_schema  = hcs.hypertable_schema and c.chunk_name = hcs.chunk_name 
where hcs.hypertable_name = 'data_history'
order by hcs.total_bytes desc, c.range_start_integer desc;

  • 数据库

    据说 99% 的性能瓶颈都在数据库。

    342 引用 • 708 回帖

相关帖子

回帖

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...

推荐标签 标签

  • 又拍云

    又拍云是国内领先的 CDN 服务提供商,国家工信部认证通过的“可信云”,乌云众测平台认证的“安全云”,为移动时代的创业者提供新一代的 CDN 加速服务。

    21 引用 • 37 回帖 • 545 关注
  • Pipe

    Pipe 是一款小而美的开源博客平台。Pipe 有着非常活跃的社区,可将文章作为帖子推送到社区,来自社区的回帖将作为博客评论进行联动(具体细节请浏览 B3log 构思 - 分布式社区网络)。

    这是一种全新的网络社区体验,让热爱记录和分享的你不再感到孤单!

    132 引用 • 1114 回帖 • 124 关注
  • Electron

    Electron 基于 Chromium 和 Node.js,让你可以使用 HTML、CSS 和 JavaScript 构建应用。它是一个由 GitHub 及众多贡献者组成的活跃社区共同维护的开源项目,兼容 Mac、Windows 和 Linux,它构建的应用可在这三个操作系统上面运行。

    15 引用 • 136 回帖
  • WordPress

    WordPress 是一个使用 PHP 语言开发的博客平台,用户可以在支持 PHP 和 MySQL 数据库的服务器上架设自己的博客。也可以把 WordPress 当作一个内容管理系统(CMS)来使用。WordPress 是一个免费的开源项目,在 GNU 通用公共许可证(GPLv2)下授权发布。

    66 引用 • 114 回帖 • 228 关注
  • Node.js

    Node.js 是一个基于 Chrome JavaScript 运行时建立的平台, 用于方便地搭建响应速度快、易于扩展的网络应用。Node.js 使用事件驱动, 非阻塞 I/O 模型而得以轻量和高效。

    139 引用 • 269 回帖 • 43 关注
  • Bootstrap

    Bootstrap 是 Twitter 推出的一个用于前端开发的开源工具包。它由 Twitter 的设计师 Mark Otto 和 Jacob Thornton 合作开发,是一个 CSS / HTML 框架。

    18 引用 • 33 回帖 • 660 关注
  • Vim

    Vim 是类 UNIX 系统文本编辑器 Vi 的加强版本,加入了更多特性来帮助编辑源代码。Vim 的部分增强功能包括文件比较(vimdiff)、语法高亮、全面的帮助系统、本地脚本(Vimscript)和便于选择的可视化模式。

    29 引用 • 66 回帖
  • Gitea

    Gitea 是一个开源社区驱动的轻量级代码托管解决方案,后端采用 Go 编写,采用 MIT 许可证。

    4 引用 • 16 回帖 • 6 关注
  • Mobi.css

    Mobi.css is a lightweight, flexible CSS framework that focus on mobile.

    1 引用 • 6 回帖 • 733 关注
  • ReactiveX

    ReactiveX 是一个专注于异步编程与控制可观察数据(或者事件)流的 API。它组合了观察者模式,迭代器模式和函数式编程的优秀思想。

    1 引用 • 2 回帖 • 155 关注
  • 安全

    安全永远都不是一个小问题。

    199 引用 • 816 回帖 • 2 关注
  • 机器学习

    机器学习(Machine Learning)是一门多领域交叉学科,涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能。

    83 引用 • 37 回帖
  • Kafka

    Kafka 是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据。 这种动作(网页浏览,搜索和其他用户的行动)是现代系统中许多功能的基础。 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。

    36 引用 • 35 回帖
  • API

    应用程序编程接口(Application Programming Interface)是一些预先定义的函数,目的是提供应用程序与开发人员基于某软件或硬件得以访问一组例程的能力,而又无需访问源码,或理解内部工作机制的细节。

    77 引用 • 430 回帖
  • 生活

    生活是指人类生存过程中的各项活动的总和,范畴较广,一般指为幸福的意义而存在。生活实际上是对人生的一种诠释。生活包括人类在社会中与自己息息相关的日常活动和心理影射。

    230 引用 • 1454 回帖
  • SMTP

    SMTP(Simple Mail Transfer Protocol)即简单邮件传输协议,它是一组用于由源地址到目的地址传送邮件的规则,由它来控制信件的中转方式。SMTP 协议属于 TCP/IP 协议簇,它帮助每台计算机在发送或中转信件时找到下一个目的地。

    4 引用 • 18 回帖 • 614 关注
  • Kotlin

    Kotlin 是一种在 Java 虚拟机上运行的静态类型编程语言,由 JetBrains 设计开发并开源。Kotlin 可以编译成 Java 字节码,也可以编译成 JavaScript,方便在没有 JVM 的设备上运行。在 Google I/O 2017 中,Google 宣布 Kotlin 成为 Android 官方开发语言。

    19 引用 • 33 回帖 • 63 关注
  • 域名

    域名(Domain Name),简称域名、网域,是由一串用点分隔的名字组成的 Internet 上某一台计算机或计算机组的名称,用于在数据传输时标识计算机的电子方位(有时也指地理位置)。

    43 引用 • 208 回帖
  • 京东

    京东是中国最大的自营式电商企业,2015 年第一季度在中国自营式 B2C 电商市场的占有率为 56.3%。2014 年 5 月,京东在美国纳斯达克证券交易所正式挂牌上市(股票代码:JD),是中国第一个成功赴美上市的大型综合型电商平台,与腾讯、百度等中国互联网巨头共同跻身全球前十大互联网公司排行榜。

    14 引用 • 102 回帖 • 374 关注
  • 反馈

    Communication channel for makers and users.

    123 引用 • 911 回帖 • 245 关注
  • Hibernate

    Hibernate 是一个开放源代码的对象关系映射框架,它对 JDBC 进行了非常轻量级的对象封装,使得 Java 程序员可以随心所欲的使用对象编程思维来操纵数据库。

    39 引用 • 103 回帖 • 710 关注
  • 思源笔记

    思源笔记是一款隐私优先的个人知识管理系统,支持完全离线使用,同时也支持端到端加密同步。

    融合块、大纲和双向链接,重构你的思维。

    22352 引用 • 89437 回帖
  • JetBrains

    JetBrains 是一家捷克的软件开发公司,该公司位于捷克的布拉格,并在俄国的圣彼得堡及美国麻州波士顿都设有办公室,该公司最为人所熟知的产品是 Java 编程语言开发撰写时所用的集成开发环境:IntelliJ IDEA

    18 引用 • 54 回帖
  • Elasticsearch

    Elasticsearch 是一个基于 Lucene 的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于 RESTful 接口。Elasticsearch 是用 Java 开发的,并作为 Apache 许可条款下的开放源码发布,是当前流行的企业级搜索引擎。设计用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。

    117 引用 • 99 回帖 • 212 关注
  • Log4j

    Log4j 是 Apache 开源的一款使用广泛的 Java 日志组件。

    20 引用 • 18 回帖 • 30 关注
  • GitBook

    GitBook 使您的团队可以轻松编写和维护高质量的文档。 分享知识,提高团队的工作效率,让用户满意。

    3 引用 • 8 回帖 • 4 关注
  • 链滴

    链滴是一个记录生活的地方。

    记录生活,连接点滴

    153 引用 • 3783 回帖 • 1 关注