中信证券基于SelectDB的实时数仓平台构建-余子安中信证券

基于 SelectDB 的实时数仓平台构建Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024目录基于 CDP 的旧实时数仓01面临的困难与挑战02基于 SelectDB 的解决方案03未来展望04Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 202401基于 CDP 的旧实时数仓Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024 实时计算面对的数据是实时且流式的，数据按照时间发生顺序被实时计算程序订阅和消费实时数据 触发源为无界流式数据，一旦有新的流数据进入实时计算系统，它就立刻发起并进行一次计算任务，因此整个过程是持续进行的持续计算 流处理的计算结果可以同流式数据一样，持续的写入目的数据存储实时数据集成实时计算：持续、低时延、事件触发的计算作业Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 202