大数据

1. 首页
2. IT互联网
3. 大数据

Kafka 自动发送消息 Demo 实战：从配置到发送的完整流程(java)

一、背景与目标很多业务场景需要定时或批量把数据推送到 Kafka，比如报警系统、日志采集、数据同步等。为了让测试更简单、更可控，我们搭了一个“自动发送 Kafka 消息”的小型 Demo。它的目标非常明确：1) 通过配置文件指定 Kafka 地址、Topic、消息文件路径 2) 支持一个文件里写多条 JSON，每条 JSON 都能按“段”发送

大数据 2026年02月08日 98 点赞 0 评论 15462 浏览

时序数据库选型权威指南：从大数据视角解读IoTDB的核心优势

时序数据库选型权威指南：从大数据视角解读IoTDB的核心优势 引言：时序数据时代的挑战与机遇在万物互联的数字化时代，工业物联网、智慧能源、智能交通等领域正以前所未有的速度发展。据IDC预测，到2025年全球物联网设备数量将达到416亿，产生的数据量将超过79.4ZB。这些设备每分每秒都在产生海量的时序数据——从风力发电机的转速

大数据 2026年01月31日 53 点赞 0 评论 15460 浏览

克服Flink SQL限制的混合API方法

克服Flink SQL限制的混合API方法 作者：Gal Krispel 翻译：黄鹏程 阿里云实时计算 Flink 版产品负责人 阅读时间：11分钟 · 2025年10月19日 译者注： 本博客文章探讨了 Apache Flink 中的混合 API 方法如何帮助克服 Flink SQL 的一些固有限制，特别是在与 Apache

大数据 2026年01月15日 63 点赞 0 评论 15401 浏览

2026年时序数据库选型指南：Apache IoTDB从大数据与物联网视角深度剖析

文章目录 第一章：时代脉搏——为何需要专用的时序数据库？ 1.1 时序数据的四大核心特征 1.2 通用数据库的“水土不服” 第二章：选型罗盘——评估时序数据库的五大关键维度 2.1 数据模型与架构（Data Model & Architecture） 2.2 数据压缩率（Co

大数据 2026年05月08日 63 点赞 0 评论 15386 浏览

任务四：Hadoop下载，配置/启动以及操作（CentOS 9）

一、下载前的准备在下载 Hadoop 前，需确保系统满足以下要求：（一）Java 环境Hadoop 依赖 Java 运行，需安装 JDK 8 或更高版本。检查 Java 是否已安装，在终端输入以下命令：java -version若未安装，可以看我前面的文章。 （二&#xff

大数据 2025年12月10日 40 点赞 0 评论 15365 浏览

FlinkSql入门与实践

一、为什么需要 Flink SQL？ 传统 SQL 是面向静态数据的查询语言，而现代实时业务要求对动态数据流进行即时分析。Flink SQL 应运而生，它让开发者无需编写复杂的状态管理代码，就能实现实时ETL、复杂事件处理（CEP）、实时报表等场景。其核心优势在于： 统一流批接口：同

大数据 2025年05月26日 186 点赞 0 评论 15321 浏览

@KafkaListener 消费注解解读

在 Spring Kafka 中，消费 Kafka 消息有多种方式，包括单条消费、批量消费、监听特定分区、以及手动控制消息确认（Ack机制）。我们可以通过 @KafkaListener 注解和配置 KafkaListenerContainerFactory 来实现这些功能。下面我会详细解释每种方式的实现。 1. 单条消费 (Consu

大数据 2025年04月26日 176 点赞 0 评论 15290 浏览

【大数据毕设推荐】Hadoop+Spark旅游景点数据分析系统Python完整实现 毕业设计 选题推荐 毕设选题 数据分析 机器学习 数据挖掘

✍✍计算机编程指导师 ⭐⭐个人介绍：自己非常喜欢研究技术问题！专业做Java、Python、小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。 ⛽⛽实战项目：有源码或者技术上的问题欢迎在评论区一起讨论交流！ ⚡⚡如果你遇到具体的技术问题或计算机毕设方面需求可以在主页上详细资料里↑↑联系我~~ Java实战 | SpringBoo

大数据 2026年04月11日 88 点赞 0 评论 15241 浏览

RabbitMQ: 全面安装与运维指南之从基础部署到高级配置

RabbitMQ 安装指南（Windows/macOS/Linux）1 ) 核心注意事项： 跨平台支持： RabbitMQ 基于 Erlang/OTP 开发，支持 Windows、Linux、macOS 系统，无需为开发环境额外配置 Linux 虚拟机或服务器。 生产环境规范： 生产环境推荐使用 L

大数据 2026年04月14日 96 点赞 0 评论 15201 浏览

仿 RabbitMQ 消息队列项目实战（一）：入门必懂的 RabbitMQ 核心知识

前言：一、消息队列的背景 技术基础：由阻塞队列（BlockingQueue）封装而来，核心用于实现生产者消费者模型。 模型价值： 解耦合：降低系统模块间的依赖 削峰填谷：缓冲流量波动，保障系统稳定性 分布式场景适配：跨主机通信的常见需求&#xf

大数据 2026年01月15日 165 点赞 0 评论 15122 浏览