大数据

RabbitMQ 客户端 连接、发送、接收处理消息

RabbitMQ 客户端 连接、发送、接收处理消息 一. RabbitMQ 的机制跟 Tcp、Udp、Http 这种还不太一样RabbitMQ 服务,不是像其他服务器一样,负责逻辑处理,然后转发给客户端 而是所有客户端想要向 RabbitMQ服务发送消息, 第一步:创建一个链接 RabbitMQ 服务的连接需要传入 Rabbi

VMware平台的Ubuntu部署完全分布式Hadoop环境

前言:此文章是本人初次部署Hadoop的过程记录以及所遇到的问题解决,这篇文章只有实际操作部分,没有理论部分。因本人水平有限,本文难免存在不足的地方,如果您有建议,欢迎留言或私信告知于我,非常感谢。 部分参考网络资料,如有侵权,联系删除。 文章目录 前言&#xf

Flink底层原理解析:案例解析(第37天)

系列文章目录一、flink架构 二、Flink底层原理解析 三、Flink应用场景解析 四、fink入门案例解析 文章目录 系列文章目录 前言 一、flink架构 1. 作业管理器(JobManager) 2. 资源管理器(ResourceManager) 3. 任务管理器(TaskManager) 4

Kafka 和 Flink的讲解

一、Kafka:分布式消息队列1. 核心概念 ​​角色​​:Kafka 是一个分布式、高吞吐量的​​消息队列​​(Pub-Sub 模型),用于实时传输数据流。 ​​关键术语​​: ​​Producer​​(生产者):发送数据的客户端(如传感器、应用日志)。 ​​Consumer​​(消费者):接收和处理数据的客户端(如 Flink、Spark)。 ​​Broker​​

学习秒杀系统-异步下单(包含RabbitMQ基础知识)

文章目录 前言 预备知识:RabbitMQ定义及常用组件概念 基础概念 常用组件 工作模式 2.1 简单模式 (Simple Mode) 2.2 工作队列模式 (Work Queues Mode) 2.1,2.2的代码实现: 2.3 发布/订阅模式 (Publish/Subscribe Mode) 2.3代码实现 2.4 路由模式 (Rou

Hadoop作业调度器完全指南:类型解析与场景化选型

Hadoop作业调度器完全指南:类型解析与场景化选型 引言:调度器——YARN资源管理的核心 一、三大调度器全景对比 1.1 调度器类型总览 1.2 核心特性对比表 二、调度器详解 2.1 FIFO调度器:最简单的选择 2.2 Capacity调度器:生产环境的首选 **2.2.1 核心机制** **2.2.2

Java 大视界 -- 基于 Java 的大数据分布式文件系统在科研数据存储与共享中的应用优化(187)

       💖亲爱的朋友们,热烈欢迎来到 青云交的博客!能与诸位在此相逢,我倍感荣幸。在这飞速更迭的时代,我们都渴望一方心灵净土,而 我的博客 正是这样温暖的所在。这里为你呈上趣味与实用兼具的知识,也期待你毫无保留地分享独特见解,愿我们于此携手成长,共赴新程&#xff