数据结构与算法

MySql分片规则·枚举分片

一、枚举分片规则(sharding-by-intfile) : 表里必须有名字叫sharding_id的表头 且表头的值必须在分片规则配置文件定义的值里选择。 配置规则文件:/usr/local/mycat/conf/partition-hash-int.txt # 设置sharding_id表头的值 Mycat60~ ]# vim /usr/local/mycat/conf/partiti

R语言-data.table包用来加速大型数据集的加载和运算

R语言具有较强的数据分析能力,但是对于数据处理,尤其是面对较大数据量时,就有很多的不足之处,为了解决处理较大数据集的问题,R中涌现了一系列数据处理的包,data.table包就是其中之一。 R语言data.table包是自带包data.frame的升级版,用于数据框格式数据的处理,最大的特点是快。它内部处理的步骤进行了程序上的优化,使用多线程,还有很多C编写的函数,大大加快数据

Clickhouse(流量分析(二).留存分析案例)

1. 留存分析定义 神策用户分析模型——留存分析的使用方法 2. 留存分析 ClickHouse留存分析工具十亿数据秒级查询方案 高效压缩位图RoaringBitmap的原理与应用 留存函数(retention) 方案一. Roaringbitmap 一般来说,求留存率的做法就是两天的用户求交集,join的速度会比较慢。假若每一个用户都可以表示成一个32位的无符号整型,用bitmap的形式去存储,

【MySQL】MySQL 复制

MySQL复制介绍 MySQL复制允许将主实例(master)上的数据同步到一个或多个从实例(slave)上,默认情况下复制是异步进行的,从库也不需要一直连接到主库来同步数据。 MySQL复制的数据粒度可以是主实例上所有的数据库,也可以是指定的一个或多个数据库,也可以是一个数据库里的指定的表。 MySQL复制所带来的优势在于: 拓展能力: 通过复制功能可以将M

InnoDB事务隔离级别实现原理

数据库一般都会并发执行多个事务,多个事务可能会并发的对相同的一批数据进行增删改查操作,可能就会导致我们说的脏写、脏读、不可重复读、幻读这些问题。 这些问题的本质都是数据库的多事务并发问题,为了解决多事务并发问题,数据库设计了事务隔离机制、锁机制、MVCC多版本并发控制隔离机制,用一整套机制来解决多事务并发问题。 1.并发事务带来的问题以及事务隔离级别 并发事务处理带来的问题: 更新丢失(Lost

炸裂!二叉树遍历的递归魔法与层序奥秘全解析,这波操作让你卷死算法岗面试官

炸裂!二叉树遍历的递归魔法与层序奥秘全解析,这波操作让你卷死算法岗面试官 二 叉 树 定 义 前 序 遍 历 定 义 递 归 实 现 中 序 遍 历 定 义 递 归 实 现 后 序 遍 历 定 义 递 归 实 现 层 序 遍 历 定 义 代 码 实 现 第 k 层 结 点 的 个 数 计 算 树 的 高 度

分库分表神器 Sharding-JDBC

一、Sharding-JDBC 简介 最早是当当网内部使用的一款分库分表框架,到2017年的时候才开始对外开源,这几年在大量社区贡献者的不断迭代下,功能也逐渐完善,现已更名为 ShardingSphere,2020年416正式成为 Apache 软件基会的顶级项。 随着版本的不断更迭 的核心功能也变得多元化起来。从最开始 Sharding-JDBC 1.0 版本只有数据分片,到 Sharding-

JavaScript语法基础

一、关于变量 (1) 什么是变量 变量 Variable ,描述了程序中临时存储数据的容器 image.png (2) 变量的声明 原生JavaScript中,有两种方式可以创建变量: 可以直接通过一个自定义名称创建一个变量; 使用var关键字创建变量(推荐) <!DOCTYPE html> <html lang="zh"> <head>

0921.1321天:MySQL的两种启动方式

#每日三件事,第1321天# MySQL安装 MySQL官方网站www.mysql.com提供了安装包的下载。下载到rpm安装包后,可以使用yum进行安装: yum localinstall mysql-community-server-5.7.39xxxxxxx.rpm 默认安装后,在/etc目录中会有一个配置文件my.cnf: [mysqld] datadir=/var/lib/

ShardingJDBC 分库分表详解

一、ShardingSphere概述 1.1、ShardingSphere概述 Apache ShardingSphere 是一套开源的分布式数据库解决方案组成的生态圈,它由 JDBC、Proxy 和 Sidecar(规划中)这 3 款既能够独立部署,又支持混合部署配合使用的产品组成。 它们均提供标准化的数据水平扩展、分布式事务和分布式治理等功能,可适用于如 Java 同构、异构语言、云原生等各种