首页
个人开发
工作相关
搜索
登录
搜索
colo
欲买桂花同载酒
累计撰写
1824
篇文章
累计收到
0
条评论
首页
栏目
首页
个人开发
工作相关
ClickHouse
2025-12-12
设计高吞吐ClickHouse实时数据管道并处理迟到事件
实现高吞吐实时处理需综合以下要点:摄入层:使用Kafka引擎表+物化视图组合,批处理提升吞吐分布式架构:采用分片键+分布式表实现写入负载均衡聚合优化:AggregatingMergeTree+物化视图预聚合迟到事件:FINAL修饰符或版本号追踪处理延迟数据资源控制:调整max_insert_block_size和后台合并策略
2025年-12月-12日
5 阅读
0 评论
ClickHouse
2025-12-12
设计高效的时间序列数据存储方案并处理重复数据
设计要点:使用ReplacingMergeTree引擎处理重复数据按时间分区(如按月)优化查询性能设置ORDER BY包含时间戳和设备ID添加TTL自动清理过期数据使用FINAL关键字或后期去重保证查询一致性
2025年-12月-12日
5 阅读
0 评论
ClickHouse