趣头条基于FlinkClickHouse构建实时数据平台

趣头条查询的页面分为离线查询页面和实时查询页面。趣头条今年所实现的改造是在实时查询中接入了 ClickHouse 计算引擎。根据不同的业务场景,实时数据报表中会展现数据指标曲线图和详细的数据指标表。目前数据指标的采集和计算为每五分钟一个时间窗口,当然也存在三分钟或一分钟的特殊情况。数据指标数据全部从 Kafka 实时数据中导出,并导入 ClickHouse 进行计算。

  • 2021-03-26
  • 收藏0
  • 阅读251
  • 下载0
  • 28页
  • pdf
  • 3.56M

评价

评分 :
   *