数据结构与算法

linux命令

1.从尾部模糊查询 tail -f 查询的文件 |grep 查询的内容 2.查询文件 进入目录后,ll | grep 部分文件名称。就会匹配到在该目录下所有包含这个部分文件名称的所有文件。 3.vim打开一个文件后,如果想要查询某个内容:shift左边的/ 内容。按n或者shift+n 跳转下一个。 syslog日志查询流程: 1.找到日志所在路径。../log这个路径下的xxx_all.log文

python办公自动化,看完这一篇就够了!

最近参加了一个训练营,作为副教练,承担起训练营的运营工作。事不大,活不少,打卡记录、活动积分、奖励制度、评优方案、趋势对比,应有尽有…… 开始认为 Excel 就足够应付,没想到第一项工作 —— 人员汇总,就把我难倒了,于是果断拎起 Python 这把大刀,披荆斩棘,利用业余时间,不到一周竟然打造出了一套运营管理系统,到底是如何做的呢?一起来看。 基础整理 数据是运营的基础,人员数据是基础数据,首

Canal了解使用

1. canal 是什么 阿里巴巴 MySQL binlog 增量订阅&消费组件 canal [kə'næl],译意为水道/管道/沟渠,主要用途是基于 MySQL 数据库增量日志解析,提供增量数据订阅和消费 1.1 基于日志增量订阅和消费的业务包括 数据库镜像 数据库实时备份 索引构建和实时维护(拆分异构索引、倒排索引等) 业务 cache 刷新 带业务逻辑的增量数据处理 当前的 can

CentOS7下安装指定版本MySQL

一、安装之前检查系统是否存在自带的mysql rpm源 [root@localhost ~]# rpm -qa |grep mysql # 查看是否存在mysql rpm源 [root@localhost ~]# [root@localhost ~]# rpm -qa |grep mariadb # 查看是否存在mariadb rpm源 mariadb-libs-5.

R语言编程-Tidyverse 书籍-第二章(1)

本章节主要讲数据操作 三个关键点 向量化编程思维和函数式编程思维, 应用在数据框或更高级的数据结构中 将复杂数据操作分解为若干基本数据操作的能力 :数据连接、数据重塑(长宽变换/拆分合并列)、筛选行、排序行、选择列、修改列、分组汇总 接受数据分解的操作思维 1 管道操作 magrittr 包引入了管道操作,能够通过管道将数据从一个函数传给另一个函数,从而用若干函数 构成的管道依次变换你的数据。

btree 详解1之索引与磁盘操作的关系

先看两张图,了解一下从磁盘读取和存放数据的大致描述。 读取数据 读取数据 上图展示的是,磁盘中数据是如何存放的,即每道扇区的字节数为512B,那么按照上图的情况。 数据存储 数据存储 上图表示,如果用户表中,每一条记录大小为128Byte,而一个block为512Byte,所以读一次最多可以拿到4条记录,而假设需要读取100条记录的话 ,需要读取 100/4 = 2

一些Hive知识点记录

Hive Hive是读时模式: 在传统数据库里,表的模式是在数据加载时强制确定的。如果在加载时发现数据不符合模式,则被拒绝加载数据。 因为数据是在写入数据库是对照模式进行检查,因此这一设计有时被称为“写时模式”(schema on write)。 Hive这种类型的数据处理模式对数据的验证并在不加载数据时进行,而在查询时进行。这称为“读时模式”(schema on read) Hive会为每个数据

funkyheatmap |临床+组学+分组数据可视化“神器”,时髦的热图

|本文首发于“生信补给站”公众号, 临床数据一般是使用图表汇总Table1的方式进行展示,例如R|tableone 快速绘制文章“表一”-基线特征三线表 或者 gtsummary|巧合-绘制多种数据汇总表“神器” 。 今天介绍一个可视化展示方式,funkyheatmap-R包 , 可以为基准数据生成热

记一次线上bug:请求入参没有trim()导致查询失败

现象:对外提供的api接口,但是某一天查询接口突然出现了异常。 原因:查询到库里面的数据存在空格,而代码中有将数据转换成Map的处理,存在空格的数据为key,导致无法查询到。 解决方案: 使用sql查询数据库中存在多少存在该字段存在空格的数据。 select x_id from x_table where LENGTH(x_id) <> LENGTH(TRIM(x_id)) 然后

07 数据库练习题(总结)

1.安装好MySQL之后在windows系统中哪些位置能看到MySQL? MySQL DBMS软件的安装位置。 MySQL 数据库文件的存放位置。 MySQL DBMS 的配置文件。 MySQL的服务(要想通过客户端能够访问MySQL的服务器,必须保证服务是开启状态的) MySQL的path环境变量 2.卸载MySQL主要卸载哪几个位置的内容? 使用控制面板的软件卸载,去卸载MySQL DBMS软