大数据

RabbitMQ---集群搭建(HAProxy负载均衡高可用)

提示:本次搭建只是rabbitmq服务的高可用负载均衡而不是rabbitmq消息的高可用负载均衡 文章目录 前言 RabbitMQ 集群 + HAProxy 高可用架构介绍 1️⃣ RabbitMQ 集群概念 🔹 节点类型 🔹 集群特点 2️⃣ HAProxy 在 RabbitMQ 集群中的作用 &#x1f

【docker】Docker Image(镜像)

系列文章目录 文章目录 系列文章目录 一、Docker镜像是什么? 镜像生活案例 镜像分层生活案例 为什么需要镜像 二、镜像命令详解 1.镜像命令清单 2.具体命令使用 (1)docker images (2)docker tag (3)docker rmi &#xff08

精心整理的 22道 Kafka 高频面试题(含答案),你都会了吗?

目录一、基础知识与概念1.1 简要介绍Apache Kafka是什么,它的主要用途是什么?1.2 解释一下Kafka中的Producer、Broker、Consumer以及Topic的概念?1.3 Kafka的消息是如何保证顺序性的?1.4 Kafka中的消息是如何存储的?1.5 解释Kafka的高可用性和分区(Partitions)机制?二、架构与设计2.1  Kafka集群是如何工作

RabbitMQ直接查看队列中消息的内容

1. 使用 RabbitMQ 管理控制台查看队列中有多少消息(非内容)打开 RabbitMQ 的 Web 管理界面(默认地址): 登录后,点击左侧菜单栏 "Queues" 点击你要查看的队列,比如 my_queu

计算机毕业设计hadoop+spark+hive视频推荐系统 视频可视化 大数据毕业设计(源码+文档+PPT+讲解)

温馨提示:文末有 CSDN 平台官方提供的学长联系方式的名片! 温馨提示:文末有 CSDN 平台官方提供的学长联系方式的名片! 温馨提示:文末有 CSDN 平台官方提供的学长联系方式的名片! 信息安全/网络安全 大模型、大数据、深度学习领域中科院硕士在读,所有源码均一手开发&#x

SpringBoot消息队列集成:RabbitMQ、Kafka使用源码级分析(17)

SpringBoot消息队列集成:RabbitMQ、Kafka使用源码级分析 一、消息队列基础概念 1.1 消息队列的定义与作用消息队列(Message Queue)是一种在不同组件或应用之间传递消息的中间件技术。它基于"生产者-消费者"模式,允许应用程序通过发送和接收消息来进行异步通信。消息队列的主要作用包括&#xff1a

【详解】安装单节点并配置启动Kafka

目录安装单节点并配置启动Kafka环境准备系统要求安装 Java下载并解压 Kafka配置 Kafka修改 ​​server.properties​​启动 ZooKeeper启动 Kafka测试 Kafka创建主题发送消息接收消息停止 Kafka 和 ZooKeeper停止 Kafka停止 ZooKeeper前提条件步骤 1: 安装 Java步骤 2: 下载 Kafka步骤 3: 配置 Kafka

史上最全Flink面试题(完整版)

1、简单介绍一下 FlinkFlink 是一个框架和分布式处理引擎,用于对无界和有界数据流进行有状态计算。并且 Flink 提供了数据分布、容错机制以及资源管理等核心功能。Flink提供了诸多高抽象层的API以便用户编写分布式任务: DataSet API, 对静态数据进行批处理操作,将静态数据抽象成分布式的数据集,用户可以

RabbitMQ 进阶

文章目录 一、发送者的可靠性 1.1 生产者重试机制: 1.2 生产者确认机制: 1.2.1 开启生产者确认: 1.2.2 定义 ReturnCallback: 1.2.3 定义 ConfirmCallback: 二、MQ 的可靠性 2.1 数据

Hive的窗口函数

Hive的窗口函数(Window Functions)是其SQL功能的核心亮点之一,用于在分组数据上执行计算,同时保留原始表的行数(不压缩分组)。窗口函数特别适用于排名分析、趋势计算、移动统计等复杂场景,是处理时间序列数据和多维分析的利器。 一、窗口函数的核心概念窗口函数的语法结构:fu