大数据
  1. 首页
  2. IT互联网
  3. 大数据

列表

大数据：Hadoop中JobTracker与TaskTracker的深度解析

大数据：Hadoop中JobTracker与TaskTracker的深度解析

Hadoop中JobTracker与TaskTracker的深度解析在Hadoop MapReduce v1架构中，JobTracker与TaskTracker是集群资源管理和任务调度的核心组件。尽管YARN已经取代了这种架构，但理解它们的设计思想对掌握分布式计算框架的演进至关重要。本文将深入剖析两者的核心作用、交互机制及在实际项目中的应用经验。 核心架构与作用 系统
大数据 2025年09月26日
详解RabbitMQ高级特性之延迟插件的安装和使用

详解RabbitMQ高级特性之延迟插件的安装和使用

目录延迟队列插件延迟队列插件的下载延迟队列插件的安装 延迟队列插件的启用​编辑 添加配置常量类声明队列和交换机并绑定二者关系编写生产消息代码编写消费消息代码观察效果面试题延迟队列插件RabbitMQ官⽅也提供了⼀个延迟的插件来实现延迟的功能。延迟队列插件的下载插件下载链接---》链接根据⾃⼰的RabbitMQ版本选择相应版本的延迟插件, 下载后上传到服务器。查看RabbitMQ版本的命令 ra
大数据 2025年10月17日
Kafka单机版安装部署

Kafka单机版安装部署

目录 1.1、概述 1.2、系统环境 1.3、ZooKeeper的作用 1.4、部署流程 1.4.1、下载安装包 1.4.2、解压文件 1.4.3、创建日志目录 1.4.4、配置Kafka 1.4.5、启动Kafka服务 1.4.6、启动成功验证 1.5、创建Topic测试 1.6、消息生产与消费测试 1.6.1、启动生产者 1.6.2、启动消费者 1.1、概述 
大数据 2025年09月02日
Flink 2.1 SQL：解锁实时数据与AI集成，实现可扩展流处理

Flink 2.1 SQL：解锁实时数据与AI集成，实现可扩展流处理

摘要：本文整理自阿里云的高级技术专家、Apache Flink PMC 成员李麟老师在 Flink Forward Asia 2025 新加坡[1]站 —— 实时 AI 专场中的分享。将带来关于 Flink 2.1 版本中 SQL 在实时数据处理和 AI 方面进展的话题。 Tips：点击「阅读原文」跳转阿里云实时计算 Flink～ Flink
大数据 2025年08月16日
Kafka可视化工具 客户端工具Offset Explorer web端工具EFAK

Kafka可视化工具 客户端工具Offset Explorer web端工具EFAK

0.网页控制台1.自动创建：Kafka 也支持在消息生产者第一次发送消息到一个不存在的主题时，自动创建该主题。这种方式默认启用，但它依赖于 Kafka 的 auto.create.topics.enable 配置项，默认值是 true。这种方式并不推荐用于生产环境，因为自动创建的主题配置通常不够灵活，可能会带来一些
大数据 2025年09月02日
基于Hadoop的网络舆情数据分析系统[python]-计算机毕业设计源码+LW文档

基于Hadoop的网络舆情数据分析系统[python]-计算机毕业设计源码+LW文档

摘要：随着互联网的迅速发展，网络舆情数据呈现出爆炸式增长。基于Hadoop的网络舆情数据分析系统能够高效处理海量舆情数据，挖掘其中有价值的信息。本文详细阐述了该系统的设计与实现，包括系统架构、数据处理流程、功能模块等。通过实验验证，该系统在数据存储、处理速度和分析准确性方面表现出色，为网络舆情监测和分析提供了有效的
大数据 2026年05月30日
Java 大视界 -- Java 大数据机器学习模型在自然语言生成中的可控性研究与应用（229）

Java 大视界 -- Java 大数据机器学习模型在自然语言生成中的可控性研究与应用（229）

       💖亲爱的朋友们，热烈欢迎来到 青云交的博客！能与诸位在此相逢，我倍感荣幸。在这飞速更迭的时代，我们都渴望一方心灵净土，而 我的博客 正是这样温暖的所在。这里为你呈上趣味与实用兼具的知识，也期待你毫无保留地分享独特见解，愿我们于此携手成长，共赴新程&#xff
大数据 2025年06月01日
详解RabbitMQ工作模式之工作队列模式

详解RabbitMQ工作模式之工作队列模式

目录工作队列模式概念特点应用场景工作原理注意事项代码案例引入依赖常量类编写生产者代码编写消费者1代码编写消费者2代码先运行生产者，后运行消费者先运行消费者，后运行生产者工作队列模式概念 在工作队列模式中，一个生产者（producer）将任务发布到队列中，多个消费者（consumer）
大数据 2025年05月03日
学习记录：第二章hadoop集群配置、安装hive、sqoop

学习记录：第二章hadoop集群配置、安装hive、sqoop

hadoop集群配置 hadoop集群主要配置文件 配置文件 功能描述 hadoop-env.sh 配置Hadoop运行所需的环境变量 yarn-env.sh 配置Yarn运行所需的环境变量 core- site.xml Hadoop核心全局配置文件，可在其他配置文件中引用 hdfs-site.xml HDFS配置文件，继承core-site.xm
大数据 2025年05月23日
3分钟精通Flink SQL数据操作：INSERT/UPDATE/DELETE实战指南

3分钟精通Flink SQL数据操作：INSERT/UPDATE/DELETE实战指南

3分钟精通Flink SQL数据操作：INSERT/UPDATE/DELETE实战指南 【免费下载链接】flink 项目地址: 你是否还在为流数据处理中的实时更新操作头疼？是否想快速掌握Flink SQL的核心数据操作能力？本文将通过实战案例，带
大数据 2025年11月23日