团队架构师黄磊在 DTCC 多云数据专场的分享整理出来了,讲的是 OB Cloud 七朵公有云上的日志系统怎么设计。对于跨云业务场景的可观测性数据系统设计有一定借鉴意义。
几个我觉得值得一看的点:
1. 每朵云一套完整的 GreptimeDB 集群,数据在本云写、本云查。跨云查询由网关先按租户、时间和数据驻留规则裁掉不相关的云,各云只回传命中结果,原始数据不拉回中心。
2. 对象存储便宜,但延迟高、按请求计费。写入先进本地回写缓存再批量上传,读取把相邻的小范围读合并成连续读,这部分是对象存储能直接当数据库存储层用的关键。
结果:80 多个生产集群,300TB 日志,相比 Loki 存储成本降了六成以上,以前超时的查询现在亚秒到秒级。
全文:网页链接


