大数据
  1. 首页
  2. IT互联网
  3. 大数据

列表

在 Kafka 中，如何实现消息的过滤？常见的消息过滤策略有哪些？

在 Kafka 中，如何实现消息的过滤？常见的消息过滤策略有哪些？

在 Kafka 中，消息过滤主要通过 客户端逻辑 或 架构设计 实现（因 Kafka 原生不提供服务端消息过滤功能）。以下是常见策略及实现方式： 一、核心过滤策略 策略类型 实现方式 适用场景 优缺点 1. 消费者端过滤 - 消费者拉取消息后，通过业务逻辑（如检查消息体/Header）丢弃不符合条件的消息
大数据 2025年07月27日
RabbitMQ架构原理及消息分发机制

RabbitMQ架构原理及消息分发机制

RabbitMQ架构原理及消息分发机制在现代分布式系统中，消息队列是不可或缺的组件之一。它不仅能够解耦系统模块，还能实现异步通信和削峰填谷。在众多消息队列中，RabbitMQ 因其高并发、高可靠性和丰富的功能而备受青睐。本文将从 RabbitMQ 的基础概念、架构原理、消息分发机制、持久化与内存管理、插件管理、Java API 编程以及 Spring 集
大数据 2025年04月28日
【大数据技术实战】流式计算 Flink~生产错误实战解析

【大数据技术实战】流式计算 Flink~生产错误实战解析

前言：流处理时代 Flink与生产痛点        实时数据处理已成为企业构建竞争优势的核心能力。从电商平台的实时库存同步、金融系统的实时风控预警，到物联网设备的实时状态监控，流处理技术支撑着越来越多的关键业务场景。Apache Flink 作为当前流处理领域的 “事实标准”，凭借其低延迟（毫秒级）、高吞吐&#x
大数据 2025年09月26日
kafka支持内外网访问

kafka支持内外网访问

一、需求描述本次搭建单机版Kafka与Kafka集群，每台机器中有内网+外网 单机版 Kafka服务地址：192.168.1.52:9093，外网地址：2.186.2.86:9092 zookeeper服务地址：192.168.1.52:2181，外网地址：2.186.2.86:2181 集
大数据 2025年05月26日
PySpark 安装教程及 WordCount 实战与任务提交

PySpark 安装教程及 WordCount 实战与任务提交

学习 PySpark 安装教程是掌握大数据处理的第一步。无论你是在 Windows 还是 Linux 系统上进行 PySpark 安装与部署，都需要正确配置环境才能顺利运行。PySpark 作为 Apache Spark 的官方 Python API，结合了 Python 的简洁和 Spark 的分布式计算能力，被广泛应用于 大数据分析、机器学习和数据科学
大数据 2025年10月07日
基于Spring Kafka实现火山云Kafka SASL_PLAINTEXT认证的完整指南

基于Spring Kafka实现火山云Kafka SASL_PLAINTEXT认证的完整指南

个人名片 🎓作者简介：java领域优质创作者 🌐个人主页：码农阿豪 📞工作室：新空间代码工作室（提供各种软件服务) 💌个人邮箱：[2435024119@qq.com] 📱个人微信：15279484656 &#x1f310
大数据 2025年05月20日
深入学习RabbitMQ的Direct Exchange（直连交换机）

深入学习RabbitMQ的Direct Exchange（直连交换机）

        RabbitMQ作为一种高性能的消息中间件，在分布式系统中扮演着重要角色。它提供了多种消息传递模式，其中Direct Exchange（直连交换机）是最基础且常用的一种。本文将深入介绍Direct Exchange的原理、应用场景、配置方法以及实践案例，帮助读者更好地理解和使用这一消息传递模式。 一、Direct
大数据 2025年04月26日
Hadoop权威指南第四版高清书签版实战解析

Hadoop权威指南第四版高清书签版实战解析

本文还有配套的精品资源，点击获取 简介：《Hadoop权威指南》第四版是一本全面讲解Hadoop生态系统与大数据处理技术的核心书籍，提供高清文字版与完整目录书签，便于查阅与学习。本书涵盖Hadoop基础架构HDFS与MapReduce的工作原理、YARN资源调度、HBase实时数据库、Pig/Hive分析工具、Spark快速处理引擎
大数据 2025年10月17日