Kafka vs RabbitMQ vs RocketMQ:三大消息队列深度对比 优点:吞吐量极高、生态完善、适合日志与大数据场景。缺点:事务不支持、易丢数据、Topic 多时性能下降。 国内服务器 7个月前690
Flink 实时计算 x SLS 存储下推:阿里云 OpenAPI 网关监控平台实践 本文由潘伟龙(阿里云可观测)、阮孝振(阿里云开放平台)撰写,介绍阿里云OpenAPI网关实时监控体系的构建实践。面对TB级日志、多维分析、秒级告警等挑战,采用Flink+SLS云原生方案,创新分层聚合... 国内服务器 7个月前690
Java 大视界 — Java 大数据在智能交通智能公交系统优化与乘客出行服务提升中的应用(409) 摘要 本文探讨了Java大数据技术在智能公交系统优化中的应用。针对传统公交系统存在的发班不合理、实时定位缺失、调度滞后及数据孤岛等问题,作者团队采用Flink+HBase+Spring Boot技术栈... 国内服务器 7个月前690
【大数据】Spark Executor内存分配原理与调优 我们都知道 Spark 能够有效的利用内存并进行分布式计算,其内存管理模块在整个系统中扮演着非常重要的角色。为了更好地利用 Spark,深入地理解其内存管理模型具有非常重要的意义,这有助于我们对 Sp... 国内服务器 7个月前690
大数据新视界 — Hive 数据湖集成与数据治理(下)(26 / 30) 本文深入探讨 Hive 在数据湖中的集成与数据治理,解析集成方式、治理流程与实践案例,提供数据湖管理的全面指南,助力企业构建高效数据湖体系。 国内服务器 7个月前690
Java-204 RabbitMQ Connection/Channel 工作流程:AMQP 发布消费、抓包帧结构与常见坑 AMQP Channel,实现多路复用、资源隔离与更低的连接开销。围绕 Java 客户端常用 API(channel.exchangeDeclare、queueDeclare、basicPublish... 国内服务器 7个月前690
零基础小白也能懂的Kafka下载安装图解教程 别被“Scala版本”吓到——直接选最新稳定版(比如3.6.1)右侧的“binary downloads”链接,就像下载普通软件那样点击tgz压缩包。最近在学习消息队列技术,Kafka作为分布式流处理... 国内服务器 8个月前690
IEEE ISPA大数据并行算法 本文深入探讨IEEE ISPA研讨会中的大数据并行算法核心技术,涵盖PRAM、MapReduce、BSP和Dataflow四种并行模型,分析其适用场景与优劣。同时介绍任务调度机制、数据与模型并行策略... 国内服务器 8个月前690
《从 0 到 1:我如何用 Redis + Lua + Kafka + Sentinel实现高并发秒杀防超卖》 本文介绍了一个基于SpringBoot3.2+Redis+Lua+Kafka+Sentinel的秒杀系统设计方案。针对高并发场景下的超卖、性能瓶颈和重复下单问题,采用Redis+Lua脚本实现原子性库... 国内服务器 8个月前690
RabbitMQ高级超详细笔记(2w字) 生产者重连机制与生产者确认机制,是互补而非替代的关系:生产者重连,是前置的、针对连接临时异常的被动重试保障,解决网络抖动等场景的连接问题;生产者确认,是核心的、针对投递全链路的主动结果感知,解决消息是... 国内服务器 4个月前680