大数据

Zookeeper 概述

Zookeeper 概述 Zookeeper 概述与使用指南 什么是Zookeeper? Zookeeper的主要作用 使用Zookeeper的框架 典型使用场景 1. 配置管理 2. 分布式锁 3. 服务注册与发现 Zookeeper的缺陷 与其他协调服务的比较 实际案例:Kafka使用Zookeeper 最佳实践 Zoo

宽依赖的代价:Spark 与 MapReduce Shuffle 的数据重分布对比

MapReduce与Spark Shuffle过程对比:大数据处理中的洗牌机制分析 🌟 你好,我是 励志成为糕手 ! 🌌 在代码的宇宙中,我是那个追逐优雅与性能的星际旅人。 ✨ 每一行代码都是我种下的星光,在逻辑的土壤里生长成璀璨的银河; 🛠️ 每一个算法都是我

flink写doris时的优化

1.概念doris并不擅长高频、小量数据的导入;因为doris每一次数据导入都会在be节点上生成数据文件;如果高频导入小量数据,就会在存储层产生大量的小文件(必然会影响到后续的查询效率,也会对系统产生更多的compaction操作压力)而flink是实时不断地往doris中插入数据,所以很容易出现上述

Java 大视界 -- Java 大数据机器学习模型在金融衍生品创新设计与风险评估中的应用(335)

Java 大视界 -- Java 大数据机器学习模型在金融衍生品创新设计与风险评估中的应用(335) 引言: 正文: 一、Java 构建的金融大数据融合平台 1.1 多源异构数据接入引擎 1.2 数据质量管控体系 二、Java 驱动的机器学习模型构建 2.1 衍生品定价模型&#xff0

Java 大视界 -- Java 大数据在智能金融反洗钱监测与交易异常分析中的应用(224)

       💖亲爱的朋友们,热烈欢迎来到 青云交的博客!能与诸位在此相逢,我倍感荣幸。在这飞速更迭的时代,我们都渴望一方心灵净土,而 我的博客 正是这样温暖的所在。这里为你呈上趣味与实用兼具的知识,也期待你毫无保留地分享独特见解,愿我们于此携手成长,共赴新程&#xff

详解RabbitMQ单机多节点搭建集群

目录单机多节点搭建集群Ubuntu安装RabbitMQ查看RabbitMQ的状态再启动两个节点搭建集群Centos安装RabbitMQ查看集群状态再启动两个节点搭建集群单机多节点搭建集群Ubuntu安装RabbitMQ安装RabbitMQ的步骤在之前的博客中已经写过了。查看RabbitMQ的状态 rabbitmqctl status # 查看 RabbitMQ 状态 会

Java 大视界 -- Java 大数据机器学习模型在金融市场风险评估与投资组合优化中的应用(407)

Java 大视界 -- Java 大数据机器学习模型在金融市场风险评估与投资组合优化中的应用(407) 引言: 正文: 一、金融市场的两大核心痛点(数据来自银保监会 + 实战案例) 1.1 银行风险评估:10 人 2 天算 1 个 PD,还