651.【系统架构】边缘计算——边云协同(一) 边缘计算与云计算各有所长,云计算擅长全局性、非实时、长周期的大数据处理分析,能够在长周期维护、业务决策等领域发挥优势; 边缘计算更适用局部性、实时、短周期数据的处理与分析,能更好地支撑本地业务的实时智能化决策与执行。 因此边缘计算与云计算之间不是替代关系,而是互补协同关系,边云协同将放大边缘计算与云计算的应用价值: 边缘计算既靠近执行单元,更是云端所需高价值数据的采集和初步处理单元,可以更好地支 人工智能 2025年06月14日 146 点赞 0 评论 1546 浏览
【知识】ETL大数据集成工具Sqoop、dataX、Kettle、Canal、StreamSets大比拼 1. 摘要 对于数据仓库,大数据集成类应用,通常会采用ETL工具辅助完成。ETL,是英文 Extract-Transform-Load 的缩写,用来描述将数据从来源端经过抽取(extract)、交互转换(transform)、加载(load)至目的端的过程。当前的很多应用也存在大量的ELT应用模式。常见的ETL工具或类ETL的数据集成同步工具很多,以下对开源的Sqoop、dataX、 人工智能 2025年07月05日 64 点赞 0 评论 1553 浏览
跟着Nature Communications学作图--复杂散点图 复杂散点图 从这个系列开始,师兄就带着大家从各大顶级期刊中的Figuer入手,从仿照别人的作图风格到最后实现自己游刃有余的套用在自己的分析数据上!这一系列绝对是高质量!还不赶紧点赞+在看,学起来! 参考文献 本期分享的是Nature Communications上一篇关于机器学习的文章中的散点图。 这个散点图的亮点在于充分利用了散点的填充和描边属性,将两者与图形要表达 人工智能 2025年05月19日 122 点赞 0 评论 1563 浏览
【kafka】kafka 在线增加分区副本数 创建 increase-replication-factor.json 文件 $ cat increase-replication-factor.json {"version":1, "partitions":[ {"topic":"testTopic","partition":0,"replicas":[0,1,2]}, {"topic":"testTopic","partition":1 人工智能 2025年08月09日 172 点赞 0 评论 1565 浏览
GpuGeek全栈AI开发实战:从零构建企业级大模型生产管线(附完整案例) 目录 背景 一、算力困境:AI开发者的「三重诅咒」 1.1 硬件成本黑洞 1.2 资源调度失衡 1.3 环境部署陷阱 二、三大核心技术突破 GpuGeek的破局方案 2.1 分时切片调度引擎(Time-Slicing Scheduler) 2.2 异构计算融合架构 2.3 AI资产自动化管理 三、六大核心 人工智能 2025年08月18日 62 点赞 0 评论 1565 浏览
细胞类型重复性验证----MetaNeighbor(2) 继续上面MetaNeighbor 1的学习,我们做第二个测试数据,第二组场景的测试。 ========测试数据2============ 第二个数据集,基于已经训练好或者注释好的参考数据集,来衡量新数据集细胞类型注释的准确性。这个测试数据是采用的BICCN,一个小鼠初级运动皮层的细胞。可以去作者的paper链接中下载。 library(MetaNeighbor) library(SingleCel 人工智能 2025年04月21日 125 点赞 0 评论 1566 浏览
大数据:HDFS知识体系(知其然,知其所以然) 前言 HDFS是Hadoop体系的基础,不知道各位怎么对待HDFS。反正我更多的关注一些应用层的东西,对于HDFS多有忽视。 但是每次面试的时候都要重新去背面经,我觉得这样的情况不太正常,因此耗时两天半整理了HDFS的知识体系,力求知其然也要知其所以然。 文章中有不少个人思考,希望能让各位更好的理解HDFS. 一、HDFS特性 高容错性:HDFS认为硬件总是不可靠的。 高吞吐量:HDFS为大量 人工智能 2025年05月01日 97 点赞 0 评论 1570 浏览
市场洞察所需要的“数据”,是如何搜集的呢? 市场洞察所需要的“数据”,是如何搜集的呢? 一、传统的数据收集方法 1.1一手数据 一手数据,也称之为原始数据,是指通过人员访谈、询问、问卷、测定等方式,直接获得的新数据。 收集方法:定性调查与定量调查。 定性调查:主要通过一对一“深度访谈”,例如焦点座谈会。 定量调查:主要通过向消费者发送一个结构化的调查问卷获取数据。 两者可以结合使用,先定性调查挖掘未知、深度,然后定量调查实现数 人工智能 2025年05月10日 121 点赞 0 评论 1598 浏览
GeNets:发表在nature上的基因组分析网站平台工具 2018年6月Nature Methods上发表了一篇关于机器学习分析特定基因集内部关系工具的文章,简单来说就是,通常我们做了差异基因分析得到一个基因集合,然后会用GO/KEGG富集进行进一步分析,但是该工具给我们提供了另一种可能,通过对差异基因集进行机器学习训练最终得到部分关键的基因以及基因间相互作用。该工具以网站的形式方便大家使用,目前只支持人的基因集输入,笔者输入数据后的运行结果如下图所示, 人工智能 2025年08月14日 92 点赞 0 评论 1660 浏览