大数据
  1. 首页
  2. IT互联网
  3. 大数据

列表

Kafka KRaft + SSL + SASL/PLAIN 部署文档

Kafka KRaft + SSL + SASL/PLAIN 部署文档

本文档介绍如何在 Windows 环境下部署 Kafka 4.x，使用 KRaft 模式、SSL 加密和 SASL/PLAIN 认证。stevensu1/test-kafka1. 环境准备 JDK 17 或更高版本 Kafka 4.x 版本（本文档基于 kafka_2.13-4.0.0） 2. 目录结构D:\kafka_2.13-4.0.0\ ├── bi
大数据 2025年08月06日
Java 大视界 -- Java 大数据机器学习模型在金融信用评级模型优化与信用风险动态管理中的应用（371）

Java 大视界 -- Java 大数据机器学习模型在金融信用评级模型优化与信用风险动态管理中的应用（371）

Java 大视界 -- Java 大数据机器学习模型在金融信用评级模型优化与信用风险动态管理中的应用（371） 引言： 正文： 一、Java 信用评级模型：分层适配全场景 1.1 银行版：全量特征融合（32+18 维） 1.2 跨境版&#
大数据 2025年08月06日
详解RabbitMQ单机多节点搭建集群

详解RabbitMQ单机多节点搭建集群

目录单机多节点搭建集群Ubuntu安装RabbitMQ查看RabbitMQ的状态再启动两个节点搭建集群Centos安装RabbitMQ查看集群状态再启动两个节点搭建集群单机多节点搭建集群Ubuntu安装RabbitMQ安装RabbitMQ的步骤在之前的博客中已经写过了。查看RabbitMQ的状态 rabbitmqctl status # 查看 RabbitMQ 状态 会
大数据 2025年08月06日
二、Spark 开发环境搭建 IDEA + Maven 及 WordCount 案例实战

二、Spark 开发环境搭建 IDEA + Maven 及 WordCount 案例实战

作者：IvanCodes 日期：2025年7月20日 专栏：Spark教程 本教程将从零开始，一步步指导您如何在 IntelliJ IDEA 中搭建一个基于 Maven 和 Scala 的 Spark 开发环境，并最终完成经典的 WordCount 案例。 一、创建 Maven 项目并配置 Scala 环境 1.1 新
大数据 2025年08月06日
SpringBoot消息队列集成：RabbitMQ、Kafka使用源码级分析(17)

SpringBoot消息队列集成：RabbitMQ、Kafka使用源码级分析(17)

SpringBoot消息队列集成：RabbitMQ、Kafka使用源码级分析 一、消息队列基础概念 1.1 消息队列的定义与作用消息队列（Message Queue）是一种在不同组件或应用之间传递消息的中间件技术。它基于"生产者-消费者"模式，允许应用程序通过发送和接收消息来进行异步通信。消息队列的主要作用包括&#xff1a
大数据 2025年07月28日
The History of Big Data

The History of Big Data

数据洪流悄然重塑世界的进程中，大数据的历史是技术迭代与需求驱动的交响。从 2003 年分布式系统雏形初现，到 Hadoop 掀起开源浪潮，再到 Spark、容器化技术与深度学习的接力革新，以及 Hadoop 生态的兴衰起落，大数据发展史如同一部技术进化史诗。本文将循着 2003 至 2023 年的时间脉络，解码这场
大数据 2025年07月28日
学习秒杀系统-异步下单（包含RabbitMQ基础知识）

学习秒杀系统-异步下单（包含RabbitMQ基础知识）

文章目录 前言 预备知识：RabbitMQ定义及常用组件概念 基础概念 常用组件 工作模式 2.1 简单模式 (Simple Mode) 2.2 工作队列模式 (Work Queues Mode) 2.1，2.2的代码实现： 2.3 发布/订阅模式 (Publish/Subscribe Mode) 2.3代码实现 2.4 路由模式 (Rou
大数据 2025年07月28日
大数据（7.4）Kafka存算分离架构深度实践：解锁对象存储的无限潜能

大数据（7.4）Kafka存算分离架构深度实践：解锁对象存储的无限潜能

目录 一、传统架构的存储困境与破局 1.1 数据爆炸时代的存储挑战 1.2 存算分离的核心价值矩阵 二、对象存储集成架构设计 2.1 分层存储核心组件 2.2 关键配置参数优化 三、深度集成实践方案 3.1 冷热数据分层策略 3.1.1 存储策略性能对比 3.2 跨云数据湖方案 四、企业级应用案例 4.1 金融交易审计系
大数据 2025年07月28日
Hive SQL 快速入门指南

Hive SQL 快速入门指南

在大数据蓬勃发展的当下，处理海量数据成为企业面临的关键挑战。Hive SQL 作为一款强大的工具，为我们打开了高效处理大数据的大门。接下来，让我们一起踏上 Hive SQL 的入门之旅。​一、Hive SQL 是什么​Hive 是基于 Hadoop 的数据仓库工具，它允许我们使用类似 SQL 的语法来查询和分析存储在 Hadoop 分布式文件
大数据 2025年07月28日
详解RabbitMQ高级特性之死信队列

详解RabbitMQ高级特性之死信队列

目录死信队列添加配置常量类声明队列和交换机并绑定二者关系死信--消息过期给队列设置TTL编写生产消息代码编写消费消息代码观察现象死信--消息超过队列最大长度设置队列的最大长度编写生产消息代码编写消费消息代码观察现象死信--消息被拒绝编写生产消息代码编写消费消息代码观察现象面试题死信队列死信(dead message) 简单理解就是因为种种原因, ⽆法被消费的信息, 就是死信. 有死信, ⾃然就有死
大数据 2025年07月28日