大数据

Hadoop完全分布式集群搭建

一、修改主机名在Centos7中直接使用root用户执行hostnamectl命令修改,重启(reboot)后永久生效。之后重启mobaXterm二、修改连接会话的名称选中对应的连接——单击鼠标右键——rename session——输入会话的新名称即可三、关闭防火墙1.查看防火墙状态2.停止防火墙但是注意,这个命令只是暂时关闭防火墙&#xf

什么是SparkONYarn模式

1. 什么是 Spark on YARN?Spark on YARN 是 Apache Spark 的一种部署模式,允许 Spark 应用程序在 Hadoop YARN 集群上运行,充分利用 YARN 的资源管理和调度能力。这种模式将 Spark 与 Hadoop 生态深度集成,使企业能够在同一集群上统一管理批处理、流处理、交互式查询等多种工

hadoop+Spark+django基于大数据技术的旅游数据分析与推荐系统(源码+文档+调试+可视化大屏)

前言   Python旅游数据分析与推荐系统是一个结合了Python编程 语言、数据分析技术、推荐算法以及Web开发框架的综合性系统。以下是对该系统的详细介绍: 一、系统概述 Python旅游数据分析与推荐系统旨在通过收集、分析和利用旅游相关的数据,为用户提供个性化的旅游推荐服务。该系统利用Python编程语言进行数据处理和分析,通过推荐算法生成推荐结果&

时序数据库选型指南:从大数据视角看IoTDB的核心优势

声明:文章为本人真实测评,非广告,无推广,为用户体验文章引言:在工业4.0与物联网技术深度融合的今天,时序数据已成为企业数字化转型的核心资产。据IDC预测,到2025年全球物联网设备产生的数据量将突破79.4ZB,其中时序数据占比超过60%。面对海量设备产生的高频、多维、有序数据&#xf

消息队列Kafka/RocketMQ选型与高可用架构:从单体到100万TPS的演进

消息队列Kafka/RocketMQ选型与高可用架构:从单体到100万TPS的演进大家好,我是迪哥。从 2019 年到 2026 年,我们的消息队列架构换了三波——从 ActiveMQ 到 RocketMQ,再到 Kafka 与 RocketMQ 并存。今天就聊聊,什么时候用 Kafka,什么时候用 RocketM

详解RabbitMQ高级特性之延迟队列

目录延迟队列应用场景TTL+死信队列 实现延迟队列添加配置常量类声明队列和交换机并绑定二者关系编写生产消息代码编写消费消息代码观察效果修改生产消息代码观察效果延迟队列 延迟队列(Delayed Queue),即消息被发送以后, 并不想让消费者⽴刻拿到消息, ⽽是等待特定时间后,消费者才能拿到这个消息进⾏消费. 应用场景延迟队列的使⽤场景有很多, ⽐如&#x

【SpringCloud】注册中心 && 服务注册 && 服务发现 && Eureka

文章目录 Ⅰ. 背景 一、问题描述 二、注册中心 三、CAP理论 四、常见的注册中心 ① Zookeeper ② Eureka ③ Nacos CAP对比 Ⅱ. Eureka介绍 Ⅲ. 搭建EurekaServer 一、创建Eureka-server子模块 二、引入eureka-server依赖 三、添加maven项目构建插件 四、完善启动类 五、编写配置文件

详解RabbitMQ多机多节点搭建集群

目录RabbitMQ多机多节点搭建集群安装RabbitMQ配置hosts文件配置Erlang Cookie构建集群查看集群状态常见问题RabbitMQ多机多节点搭建集群安装RabbitMQ安装RabbitMQ的步骤可参考之前的博客文章。安装好RabbitMQ之后,使用如下命令确定节点状态: rabbitmqctl status    #确认节点状态 可以查看到节点