大数据

1. 首页
2. IT互联网
3. 大数据

Kafka 自动发送消息 Demo 实战：从配置到发送的完整流程(java)

一、背景与目标很多业务场景需要定时或批量把数据推送到 Kafka，比如报警系统、日志采集、数据同步等。为了让测试更简单、更可控，我们搭了一个“自动发送 Kafka 消息”的小型 Demo。它的目标非常明确：1) 通过配置文件指定 Kafka 地址、Topic、消息文件路径 2) 支持一个文件里写多条 JSON，每条 JSON 都能按“段”发送

大数据 2026年02月08日 98 点赞 0 评论 15197 浏览

大数据深度学习毕设答辩|毕业设计项目|毕设设计Django-基于机器学习的中风预测系统设计与实现-神经网络

标题：Django-基于机器学习的中风预测系统设计与实现-神经网络文档介绍： 1.引言 1.1 课题背景与意义 中风是全球范围内致残和死亡的主要病因之一。根据世界卫生组织统计，全球每年约有1500万人发生中风，其中三分之一的患者会失去生命，另有三分之一的患者遗留永久性残疾。在我国，中风发病率呈现年轻化趋势&#x

大数据 2026年04月11日 128 点赞 0 评论 15176 浏览

Flink内存模型--flink1.19.1

Flink 的 JobManager 和 TaskManager 在内存分配上有不同的职责和结构。以下是两者的内存分类及详细说明： 一、JobManager 内存分类 JobManager 主要负责作业调度、协调（如 Checkpoint 协调）、资源管理等，其内存需求相对较低，主要分为以下几个部分： 1. JV

大数据 2025年04月17日 166 点赞 0 评论 15150 浏览

克服Flink SQL限制的混合API方法

克服Flink SQL限制的混合API方法 作者：Gal Krispel 翻译：黄鹏程 阿里云实时计算 Flink 版产品负责人 阅读时间：11分钟 · 2025年10月19日 译者注： 本博客文章探讨了 Apache Flink 中的混合 API 方法如何帮助克服 Flink SQL 的一些固有限制，特别是在与 Apache

大数据 2026年01月15日 63 点赞 0 评论 15142 浏览

Kafka Exporter —— 桥接Kafka与Prometheus的数据监控利器

Kafka Exporter —— 桥接Kafka与Prometheus的数据监控利器 【免费下载链接】kafka_exporter Kafka exporter for Prometheus 项目地址: 在大数据处理和实时流数据的世界里，Apache Kafka 已经成为

大数据 2025年12月02日 194 点赞 0 评论 15138 浏览

任务四：Hadoop下载，配置/启动以及操作（CentOS 9）

一、下载前的准备在下载 Hadoop 前，需确保系统满足以下要求：（一）Java 环境Hadoop 依赖 Java 运行，需安装 JDK 8 或更高版本。检查 Java 是否已安装，在终端输入以下命令：java -version若未安装，可以看我前面的文章。 （二&#xff

大数据 2025年12月10日 40 点赞 0 评论 15119 浏览

FlinkSql入门与实践

一、为什么需要 Flink SQL？ 传统 SQL 是面向静态数据的查询语言，而现代实时业务要求对动态数据流进行即时分析。Flink SQL 应运而生，它让开发者无需编写复杂的状态管理代码，就能实现实时ETL、复杂事件处理（CEP）、实时报表等场景。其核心优势在于： 统一流批接口：同

大数据 2025年05月26日 186 点赞 0 评论 15057 浏览

@KafkaListener 消费注解解读

在 Spring Kafka 中，消费 Kafka 消息有多种方式，包括单条消费、批量消费、监听特定分区、以及手动控制消息确认（Ack机制）。我们可以通过 @KafkaListener 注解和配置 KafkaListenerContainerFactory 来实现这些功能。下面我会详细解释每种方式的实现。 1. 单条消费 (Consu

大数据 2025年04月26日 176 点赞 0 评论 15001 浏览

【大数据毕设推荐】Hadoop+Spark旅游景点数据分析系统Python完整实现 毕业设计 选题推荐 毕设选题 数据分析 机器学习 数据挖掘

✍✍计算机编程指导师 ⭐⭐个人介绍：自己非常喜欢研究技术问题！专业做Java、Python、小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。 ⛽⛽实战项目：有源码或者技术上的问题欢迎在评论区一起讨论交流！ ⚡⚡如果你遇到具体的技术问题或计算机毕设方面需求可以在主页上详细资料里↑↑联系我~~ Java实战 | SpringBoo

大数据 2026年04月11日 88 点赞 0 评论 14930 浏览

Hive SQL 快速入门指南

在大数据蓬勃发展的当下，处理海量数据成为企业面临的关键挑战。Hive SQL 作为一款强大的工具，为我们打开了高效处理大数据的大门。接下来，让我们一起踏上 Hive SQL 的入门之旅。​一、Hive SQL 是什么​Hive 是基于 Hadoop 的数据仓库工具，它允许我们使用类似 SQL 的语法来查询和分析存储在 Hadoop 分布式文件

大数据 2025年07月28日 129 点赞 0 评论 14882 浏览