学习记录:第二章hadoop集群配置、安装hive、sqoop hadoop集群配置 hadoop集群主要配置文件 配置文件 功能描述 hadoop-env.sh 配置Hadoop运行所需的环境变量 yarn-env.sh 配置Yarn运行所需的环境变量 core- site.xml Hadoop核心全局配置文件,可在其他配置文件中引用 hdfs-site.xml HDFS配置文件,继承core-site.xm 大数据 2025年05月23日 40 点赞 0 评论 9986 浏览
Zookeeper的监听机制及原理解析 系列文章目录手把手教你安装Zookeeper 及可视化插件ZooInspector、ZKUI Zookeeper入门篇,了解ZK存储特点 使用Zookeeper的监听及原理解析 系列文章目录 前言 一、监听机制的基本概念 二、Zookeeper监听原理 1. 事件类型 2. 监听模式与监听器类型 (1)监听模式 (2&#x 大数据 2025年05月23日 123 点赞 0 评论 17927 浏览
毕业设计项目 python大数据旅游数据分析可视化系统(源码分享) 文章目录 0 前言 1 课题背景 2 数据处理 3 数据可视化工具 3.1 django框架介绍 3.2 ECharts 4 Django使用echarts进行可视化展示(mysql数据库) 4.1 修改setting.py连接mysql数据库 4.2 导入数据 4.3 使用echarts可视化展示 5 实现效果 5.1前端展 大数据 2025年05月23日 73 点赞 0 评论 4948 浏览
Kafka、RabbitMQ、RocketMQ的区别 Kafka、RabbitMQ、和RocketMQ 都是广泛使用的消息中间件,它们各自有不同的特点、架构设计和应用场景。下面是它们之间的主要区别: 1. 架构设计 Kafka: Kafka 是一个分布式流处理平台,最初由 LinkedIn 开发,主要用于处理大规模数据流。 Kafka 的架构包括 Producer(生 大数据 2025年05月23日 195 点赞 0 评论 7922 浏览
【数据分析】Power BI的使用教程 目录 1 Power BI架构 1.1 Power BI Desktop 1.2 Power BI服务 1.3 Power BI移动版 2 Power Query 2.1 Power Query编辑器 2.2 Power Query的优点 2.3 获取数据 2.4 数据清洗的常用操作 2.4.1 提升标题 2.4.2 更改数据类型 2.4.3 删除错误/空值 2. 大数据 2025年05月23日 192 点赞 0 评论 7612 浏览
详解RabbitMQ工作模式之简单模式 目录简单模式定义工作流程应用场景优点缺点小结使用案例引入依赖编写生产者代码创建连接 创建Channel声明一个队列发送消息释放资源整体代码管理界面观察队列消息编写消费者代码创建连接+创建Channel+声明队列消费消息释放资源整体代码运行程序原因分析及解决办法 简单模式定义 简单模式(Queue模式)是RabbitMQ中最基础的消息传递模式。在这种模 大数据 2025年05月23日 44 点赞 0 评论 13744 浏览
中小型企业大数据平台全栈搭建:Hive+HDFS+YARN+Hue+ZooKeeper+MySQL+Sqoop+Azkaban 保姆级配置指南 目录 背景 一、环境规划与依赖准备 1. 服务器规划(3节点集群) 2. 系统与依赖 3. Hadoop生态组件版本与下载路径 4. 架构图 二、Hadoop(HDFS+YARN)安装与配置 1. 下载与解压(所有节点) 2. HDFS高可用配置 3. YARN资源配置 大数据 2025年05月23日 108 点赞 0 评论 7215 浏览
【PostgreSQL使用】最新功能逻辑复制槽的failover,大数据下高可用再添利器 逻辑复制的failover 专栏内容: postgresql入门到进阶 手写数据库toadb 并发编程 个人主页:我的主页 管理社区:开源数据库 座右铭:天行健,君子以自强不息;地势坤,君子以厚德载物. ✅ 🔥🔥🔥重大消息&#x 大数据 2025年05月23日 95 点赞 0 评论 7318 浏览
一、Hadoop历史发展与优劣势 引言:大数据浪潮中的“大象”——Hadoop 的足迹与权衡当数据以前所未有的速度和规模涌现,大数据时代悄然来临,传统的数据处理方式显得力不从心。在这样的背景下,Hadoop 应运而生,如同一头强健而可靠的大象,为处理海量数据开辟了新的道路。它不仅仅是一个技术框架,更是大数据领域发展的一个重要里程碑。回 大数据 2025年05月23日 173 点赞 0 评论 1810 浏览
k8s部署ELK系列二:集成Kafka实现数据缓冲 k8s部署ELK系列二:集成Kafka实现数据缓冲 文章目录 k8s部署ELK系列二:集成Kafka实现数据缓冲 一、Kafka简介 二、Kafka实战部署 1. 创建Namespace(elk-namespace.yaml) 2. 创建ConfigMap(kafka-config.yaml) 3. 大数据 2025年05月21日 65 点赞 0 评论 8248 浏览