大数据领域Doris与Spark的协同工作模式

能力维度DorisSpark实时查询速度毫秒级(强)秒级(弱)离线ETL复杂度简单处理(弱)复杂处理(强)高并发支持支持(强)不支持(弱)生态对接能力有限(主要对接存储)丰富(对接所有大数据组件)结论...
2个月前
240

Flink异步IO:大数据处理的外部系统集成

本文聚焦解决实时数据处理中外部系统集成的性能瓶颈问题。传统同步IO的痛点与异步IO的优势Flink异步IO的核心机制与实现原理有序/无序结果处理的应用场景选择从代码开发到生产调优的全流程实践本文采用...
2个月前
240

借助 Kafka 提升大数据平台的实时响应能力

Kafka是一个分布式流处理平台发布/订阅:像消息队列一样,生产者发消息,消费者收消息;持久化存储:消息会被持久化到磁盘,不会丢(除非手动删除);流处理:支持实时处理消息(比如用Kafka Strea...
2个月前
280