Windows平台Parquet文件查看利器:三步搞定大数据文件解析 Windows平台Parquet文件查看利器:三步搞定大数据文件解析 【免费下载链接】ParquetViewer Simple windows desktop application for viewing & querying Apache Parquet files 项目地址: 大数据 2026年02月02日 123 点赞 0 评论 8720 浏览
k8s部署ELK系列二:集成Kafka实现数据缓冲 k8s部署ELK系列二:集成Kafka实现数据缓冲 文章目录 k8s部署ELK系列二:集成Kafka实现数据缓冲 一、Kafka简介 二、Kafka实战部署 1. 创建Namespace(elk-namespace.yaml) 2. 创建ConfigMap(kafka-config.yaml) 3. 大数据 2025年05月21日 65 点赞 0 评论 8713 浏览
hive starrocks spark 之间的关系 这三者是大数据生态中不同层次的组件,既有分工又有协作。作为测试工程师,理解它们的关系对设计数据一致性测试方案至关重要。一、核心定位对比表格复制 组件 类型 核心能力 典型延迟 适用场景 Hive 数据仓库/批处理引擎 海量数据存储、离线计算 分钟~小时级 历史数据分析、ETL、数据湖 Spark 通用计算引擎(批+流) 内 大数据 2026年02月24日 71 点赞 0 评论 8664 浏览
计算机毕业设计hadoop+spark+hive空气质量预测系统 空气质量大数据分析可视化 大数据毕业设计(源码+LW文档+PPT+讲解) 温馨提示:文末有 CSDN 平台官方提供的学长联系方式的名片! 温馨提示:文末有 CSDN 平台官方提供的学长联系方式的名片! 温馨提示:文末有 CSDN 平台官方提供的学长联系方式的名片! 技术范围:SpringBoot、Vue、爬虫、数据可视化、小程序、安卓APP、大数 大数据 2026年05月08日 110 点赞 0 评论 8656 浏览
计算机专业的痛只有自己懂:基于Hadoop+Spark的大学生就业数据分析系统成救星 💖💖作者:计算机毕业设计小途 💙💙个人简介:曾长期从事计算机专业培训教学,本人也热爱上课教学,语言擅长Java、微信小程序、Python、Golang、安卓Android等,开发项目包括大数据、深度学习、网站、小程序、安卓、算法。平常会做一些项目定制化开发、代 大数据 2025年09月26日 72 点赞 0 评论 8642 浏览
springboot+zookeeper+(2025最新)Dubbo-admin实现分布式 springboot+zookeeper+(2025最新)Dubbo-admin实现分布式一、简介Dubbo + Zookeeper + Spring Boot 搭起来的就是一种 分布式服务框架。 1.什么叫分布式? 一个大系统拆成多个小服务(微服务 / 子系统)。 各个服务可以部署在不同的机器上,通过网络互相调用。 这样就能做到 解耦、扩展性强、容错性好。 & 大数据 2025年11月03日 78 点赞 0 评论 8639 浏览
【大数据】MapReduce的“内存增强版”——Spark 【大数据】MapReduce的“内存增强版”——Spark 文章脉络 Spark架构 Spark-core SparkConf 和 SparkContext RDD Spark集群 Spark-sql 在大数据时代,数据处理和分析成为企业竞争的重要手段。Hadoop作为大数据处理的基石,其核心组件MapReduce在 大数据 2025年08月11日 150 点赞 0 评论 8638 浏览
Java-201 RabbitMQ 消息落盘与队列索引详解:.idx/.rdq、msg_store、GC 与 queue_index_embed_msgs_below TL;DR 场景:想搞清 RabbitMQ 消息到底落在哪、为什么磁盘涨、为什么内存爆、参数怎么调。 结论:核心在 queue index(.idx)+ msg_store(.rdq)+ ETS 映射 + 垃圾回收/合并策略的协同。 产出:一套可复用的存储心智模型 + 大数据 2026年04月19日 32 点赞 0 评论 8594 浏览
RabbitMQ第三章(企业级MQ应用方案) 文章目录 一、发送者的可靠性 1.1、生产者重试机制 1.2、生产者确认机制 1.3、实现生产者确认 1.3.1、开启生产者确认 1.3.2、定义ReturnCallback 1.3.3、定义ConfirmCallback 二、MQ的可靠性 2.1.数据持久化 2.1.1.交换机持久化 2.1.2.队列持久化 2.1.3.消息持久化 2.2.La 大数据 2025年07月27日 75 点赞 0 评论 8524 浏览
大数据OLAP与图数据库的联合分析 大数据OLAP与图数据库的联合分析:用“统计力+关联力”破解复杂问题 一、引言:为什么单一工具解决不了你的分析痛点? 1.1 一个真实的反欺诈故事:OLAP和图数据库的“各自为战”去年,我在某银行的风控团队做技术支持时,遇到过一个典型问题: 风控系统用**OLAP引擎(ClickHouse)**统计到,最近3天内有1200笔交易来自同一IP地址,且交易金额集中在“1000元整数倍”——这明显 大数据 2026年03月04日 118 点赞 0 评论 8511 浏览