大数据

时序数据库选型指南:从大数据视角看 Apache IoTDB 的优势

👨‍🎓博主简介   🏅CSDN博客专家   🏅云计算领域优质创作者   🏅华为云开发者社区专家博主   🏅阿里云开发者社区专家博主 💊交流社区:运维交流社区 欢迎大家的加入! 🐋 希望大家多多支持,我们一起进步&#xff

Pyspark学习二:快速入门基本数据结构

写在前面:实际工作中其实不需要自己安装和配置,更重要的是会用。所以就不研究怎么安装配置了。 前面介绍过:简单来说,Spark是一款分布式的计算框架,用于调度成百上千的服务器集群,计算TB、PB乃至EB级别的海量数据。Spark作为全球顶级的分布式计算框架,支持众多的编程语言进行开发。Python语言&

F043 vue+flask天气预测可视化系统大数据(浅色版)+机器学习+管理端+爬虫+超酷界面+顶级可视化水平

文章结尾部分有CSDN官方提供的学长 联系方式名片 博主开发经验15年,全栈工程师,专业搞定大模型、知识图谱、算法和可视化项目和比赛 编号:F043 白色版本 1 讲解视频 vue+flask天气预测可视化系统大数据+机器学习+管理端+爬虫+超酷界面+顶级可视化水平 ✅ 顶级可视化水平: 看了视频就懂 ✅ s

物联网平台的消息处理架构:从Kafka到Flink的实时流计算工程复盘

物联网平台的消息处理架构:从Kafka到Flink的实时流计算工程复盘 物联网消息处理的本质是"分级"——不是所有消息都需要毫秒级处理,但最贵的那几条,晚一秒都不行。 一、消息的分级处理模型2023年我们重构了一个日处理80亿条设备消息的物联网平台。消息类型非常多样: 消息类型 延迟要求 丢失容忍 日均量 优先级 设备

从零搭建 ELK + Kafka 日志收集系统(Spring Boot + Logback 直连 Kafka)

前言在生产环境中,微服务日志分散在各个服务器上,排查问题需要登录多台机器,效率极低。本文将带你从零开始,搭建一套完整的应用日志 → Kafka → ELK 日志收集管道,实现日志的集中存储、实时搜索与可视化。你将学会: 安装配置 Elasticsearch、Kibana、Logstash、Kafka Spri

spark、mapreduce、flink核心区别及浅意理解

Spark、MapReduce 和 Flink 是当前主流的三大分布式数据处理框架,它们分别代表了**批处理时代(MapReduce)→ 内存计算时代(Spark)→ 流批一体时代(Flink)**的技术演进。下面从 核心设计思想、执行模型、延迟能力、容错机制、适用场景 等维度进行系统对比&#xff0

【课程设计/毕业设计】基于Java的高校教材管理系统的设计与实现基于hadoop+springboot的教材管理系统的设计与实现【附源码、数据库、万字文档】

博主介绍:✌️码农一枚 ,专注于大学生项目实战开发、讲解和毕业🚢文撰写修改等。全栈领域优质创作者,博客之星、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java、小程序技术领域和毕业项目实战 ✌️技术范围::小程序、SpringBoot、SSM、JSP、Vue、PHP、Java、python、爬虫

RabbitMQ 实战指南:如何声明队列?队列声明必要参数与完整用法详解

RabbitMQ 实战指南:如何声明队列?队列声明必要参数与完整用法详解 前言 一、队列声明认知:什么是队列声明?为什么要声明? 1.1 定义 1.2 核心作用 1.3 队列声明流程图 二、队列声明基础语法:如何声明一个队列? 2.1 通用声明规则(所有语言一

RabbitMQ Linux 安装教程详解

RabbitMQ Linux 安装教程详解在 Linux 系统上安装 RabbitMQ 并确保其稳定运行,对于构建可靠的分布式消息系统至关重要。本文将详细介绍如何在 Linux 系统上安装 RabbitMQ,并提供关键的注意事项,帮助您避免常见的坑点,确保安装过程顺利。 一、环境准备 确认系统版本 :确保您的 Linux 系