1作者: experimentctrlz9 个月前原帖
最近我遇到了一个瓶颈,我们需要设计一个数据存储,既能(1)大规模地接收无模式的更新,又能(2)支持大型分析查询。<p>GCP 原生服务并没有现成的解决方案可以同时满足这两个需求,因此我们通过将更新从 Bigtable 复制到 BigQuery 的 Type 2 SCD 表中,自己动手实现了一个解决方案。<p>在我构建这个方案时,网上找不到很多相关的资源,所以我写了这篇博客,详细介绍了这个过程。<p>希望这对大家有所帮助,也很想知道是否有人使用过或构建过类似的东西。我会留在这里,欢迎大家留言,乐意回答任何问题或反馈。