大数据
  1. 首页
  2. IT互联网
  3. 大数据

列表

Java 大视界 -- Java 大数据机器学习模型在金融市场情绪分析与投资策略制定中的应用（278）

Java 大视界 -- Java 大数据机器学习模型在金融市场情绪分析与投资策略制定中的应用（278）

       💖亲爱的朋友们，热烈欢迎来到 青云交的博客！能与诸位在此相逢，我倍感荣幸。在这飞速更迭的时代，我们都渴望一方心灵净土，而 我的博客 正是这样温暖的所在。这里为你呈上趣味与实用兼具的知识，也期待你毫无保留地分享独特见解，愿我们于此携手成长，共赴新程&#xff0
大数据 2025年06月21日
Spring Boot、Redis、RabbitMQ 在项目中的核心作用详解

Spring Boot、Redis、RabbitMQ 在项目中的核心作用详解

文章目录 一、Spring Boot：快速开发的利器 1.1 Spring Boot 的核心作用 1.2 Spring Boot 项目结构 1.3 Spring Boot 自动配置原理 1.4 Spring Boot 在项目中的架构位置 二、Redis：高性能缓存与数据存储 2.1 Redis 的核心作用 2.2 Redis 在 Spring
大数据 2025年12月02日
RabbitMQ简介

RabbitMQ简介

什么是 RabbitMQ？RabbitMQ 是一个开源的消息代理软件，实现了 AMQP（高级消息队列协议）标准。简单说，它就像一个邮局系统，负责在不同应用程序之间可靠地传递消息。核心概念1. 消息（Message） 要传输的数据，包含有效载荷（实际内容&#
大数据 2026年02月09日
Spark RDD 宽窄依赖：从 DAG 到 Shuffle 的性能之道

Spark RDD 宽窄依赖：从 DAG 到 Shuffle 的性能之道

Spark RDD 宽窄依赖：从 DAG 到 Shuffle 的性能之道 🌟 你好，我是 励志成为糕手 ！ 🌌 在代码的宇宙中，我是那个追逐优雅与性能的星际旅人。 ✨ 每一行代码都是我种下的星光，在逻辑的土壤里生长成璀璨的银河； 🛠️ 每一个算法都是我绘制的星图
大数据 2025年11月04日
大数据计算资源基础知识，以及5个核心技术讲解（hadoop、mapreduce、hive、spark、flink）

大数据计算资源基础知识，以及5个核心技术讲解（hadoop、mapreduce、hive、spark、flink）

大数据计算资源基础知识 大数据处理基本背景大数据处理面临的主要挑战是数据量太大，无法在单台机器上高效处理。因此，需要分布式系统将数据和计算任务分散到多台机器上协同完成。根据处理方式和应用场景的不同，发展出了不同类型的计算资源。 批处理计算资源背景：最早的大数据处理方式，主要处理已经存储好的大量历史数据。 MapReduce&
大数据 2025年05月26日
Hive的分区分桶和数据抽样

Hive的分区分桶和数据抽样

文章目录 分区 概念 分区表的操作 创建分区表 新建分区 导入数据到指定分区 写入数据到指定分区 删除分区 删除多个分区 查看分区 查看分区表结构 动态分区 1. 开启动态分区参数设置 2. 设置为非严格模式 3. 设置所有节点可创建的最大分区数 4. 设置单个节点可创建的最大分区数 5.设置整个MRJob可创建的最大文件数 6. 设置当有空分区产生时是否报错&#x
大数据 2025年05月23日
大数据新视界 -- Hive 数据仓库：架构深度剖析与核心组件详解（上）（1 / 30）

大数据新视界 -- Hive 数据仓库：架构深度剖析与核心组件详解（上）（1 / 30）

       💖💖💖亲爱的朋友们，热烈欢迎你们来到 青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而 我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有
大数据 2026年02月08日
Spark的shuffle史上最详细解析 ， 应用场景等多维度

Spark的shuffle史上最详细解析 ， 应用场景等多维度

以下内容将对 Spark 中 Shuffle 的原理、流程、配置项、实际应用场景、常见问题及解决方案等进行全面、详细、细致的分析和阐述，并在必要处辅以示例和配置展示。最后会进行总结，同时给出项目中可能出现的场景、问题、优化方式，力求内容完善、翔实且具有可操作性。 一、Shuffle 的背景与概念 什么是 Shuffle？ 在分布式计算框架&
大数据 2025年04月27日