技术解析

求教,统计报表如何计算并写入宽表
0
2021-06-02 14:20:06
idczone
现在自己想的解决办法有以下几个:

1: 使用 Maxwell 或 Canal,然后由另一个程序计算出之后写入 clickhouse
2: 在程序中埋点,然后再写入 rmq 或者 kafaka,再由另一个程序计算写入 clickhouse

但是现在用的数据库是 pgsql,所以 1 用不了,
如果用 pgsql 自带的 Listen/Notify 性能怎么样? 或者有其他什么好的解决方案?

在程序中埋点太累了,基本不考虑;�大带宽服务器�
https://medium.com/hepsiburadatech/postgresql-db-change-data-capture-cdc-using-debezium-f1a933174fd8 PostgreSql Db Change Data Capture (CDC) Using Debezium

分时段逐级汇总数据

数据地带为您的网站提供全球顶级IDC资源
在线咨询
专属客服