人工智能

数据的应用

上学的时候学习的统计学,后来工作又做了财务分析,所以我对数据有特殊的感情。当然我说的数据,不仅仅是数字,它还有各种各样的形式,比如说文字、图像等等。 人类的进步在于对数据的传递和应用,也在于持续的记录和不断的验证。对于数据的应用,我觉得主要有几点可以重点关注: 1、记录数据 数据记录是起点,这个记录可以是对历史过往的追溯,也可以是对当前发生事情的记录,当然也可以是对未来前景的一些展望。(以我目前的

「数据湖篇」一文带你深入理解数据湖

更多精彩好文,尽在微信公众号《大数据阶梯之路》 一、数据湖是什么 数据湖相当于一个汇集着来自各个异构数据源的原生态数据,不经过加工清洗数据,数据的格式也五花八门,结构化和半结构化和非结构化的数据都能够被数据湖管理起来。 那么就引申出数据湖的特点: 数据湖的存储能力极强,能容纳海量数据 数据湖中数据格式多,不止结构化数据,还能存储半结构化和非结构化数据 数据湖提供从异构数据源中提取数据和元数据

猫头虎AI分享:Word MCP,让AI具备Word文档操作能力,文档创建、内容添加、格式编辑等AI能力

猫头虎AI分享:Word MCP,让AI具备Word文档操作能力,文档创建、内容添加、格式编辑等 大家好,我是猫头虎 🦉🐯。今天要给大家带来一款超级实用的 AI 助手增强工具 —— Office-Word-MCP-Server。 有了它,AI 不再只是“聊聊天”,而是能真正动手帮你

maftools包分析突变数据,绘制瀑布图

前面给大家介绍了MAF文件格式 ☞ MAF格式(mutation annotation format) 以及如何从TCGA数据库下载MAF格式的突变数据。 ☞ 如何从TCGA数据库下载体细胞突变数据(somatic mutation) 今天我们来讲讲,怎么用R的maftools包来分析MAF格式的突变数据,并用瀑布图来展示结果。maftools这个包的主要分为两部分功能,分析和可视化。下图列出了,

Trae IDE评测体验:通过 MCP Server - Figma AI Bridge 一键将 Figma 转为前端代码

Trae IDE评测体验:通过 MCP Server - Figma AI Bridge 一键将 Figma 转为前端代码在现代前端开发中,从设计稿到可用页面的交付往往需要大量重复劳动:切图、手写样式、布局调整……而借助 MCP Server - Figma AI Bridge,我们可以将 Figma 设计稿自动转换成整洁的 HTML/CS

时间平方根法、时间对数法笔记

规范求取固结系数的方法有时间平方根法和时间对数法,基本原理都是利用理论曲线和试验曲线的形状相似性,配合经验,找某一固结度下(时间平方根法选的是90%固结度,时间对数法选的是50%固结度)理论曲线上时间因数相当于试验曲线上的某一时间值。时间平方根法步骤如下:先根据试验数据绘制变形与时间平方根的关系曲线,然后找到曲线上初始阶段的直线段,延长交与纵轴,交点叫做理论零点,再过理论零点做一条直线,新直线是老

亿万级海量数据去重软方法,spark/hive/flink/mr通用

一、场景描述: 小强作为一名数据工程师,给予hadoop生态,经常会接到类似uv的去重统计。对于这种需求,一般的数据工程师撸起袖子直接干!一般情况下不会有问题。某一天,你公司突然业务发展发展起来,数据量慢慢暴涨,你会突然发现之前的count distinct去重经常oom或是龟速出数据。上来一股脑加内存!加!果断加!某一天你老板要你在原来按天的uv加一个月uv、年uv,这时你慌了。只会说“老板!加

因子分析怎么计算权重?

一、案例说明 案例背景与研究目的   研究短视频平台不同维度所占权重情况,调查搜集了200份数据其中20项可分为品牌活动,品牌代言人,社会责任感,品牌赞助和购买意愿品牌五个维度。案例数据中还包括基本个体特征比如性别、年龄,学历,月收入等。以及短视频平台观看情况和消费情况。数据样本为200个。   想要根据短视频平台调查的数据进行因子分析,判断因子与测量项之间的关系得到相应维度,对于二