Kafka – 基于Flink的实时数据处理实战

本文介绍如何利用Kafka和Flink构建实时数据处理系统。Kafka作为高吞吐分布式消息队列,负责收集用户行为数据;Flink作为流处理引擎,实现实时消费、清洗和聚合数据。文章详细演示了从环境搭建...
6天前
80

RabbitMQ HAProxy 负载均衡

前面我们学习了 rabbitmq 搭建集群,并且为了解决集群中队列的高可用问题,使用仲裁队列替代普通的队列,但是其实这里还有一个问题,就是我们在使用 Java 连接 rabbitmq 的时候,需要指定...
6天前
40

Kafka 消息队列在大数据数据采集方面的应用

本文旨在全面解析Kafka作为消息队列在大数据数据采集中的应用场景和技术实现。我们将涵盖从基础概念到高级应用的完整知识体系,包括架构设计、性能优化和实际案例。介绍Kafka核心概念及其在大数据采集中的...
6天前
50

特征缓存:文本模型连续预测响应速度提升

特征缓存是提升文本模型连续预测响应速度的关键工程手段。通过合理的缓存策略(标准化、多级缓存、失效机制)与代码实现,可以在几乎不降低精度的前提下,将延迟降低数倍、吞吐提升数倍,并节约大量计算资源。本文提...
6天前
50