从零开始强化学习(四)——策略梯度 四. 策略梯度(Policy Gradient) 4.1 期望奖励(Expected Reward) 在强化学习中有3个组成部分:演员(actor),环境(environment)和奖励函数(reward function) 演员就是一个网络,输入状态,输出动作 环境就是一个函数,输入状态和动作,输出状态。环境是基于规则的规则,是确定不变的 奖励是在某一个状态下采取某个动作能够获得的分数。环境是 人工智能 2025年05月01日 106 点赞 0 评论 3687 浏览
Java并发编程——CompletableFuture源码解析 前言 JDK8 为我们带来了 CompletableFuture 这个有意思的新类,它提供比 Future 更灵活更强大的回调功能,借助 CompletableFuture 我们可以更方便的编排异步任务。 由于 CompletableFuture 默认的线程池是 ForkJoinPool,在讲 CompletableFuture 之前觉得有必要先简单介绍一下 ForkJoinPool。 一、For 人工智能 2025年05月01日 144 点赞 0 评论 8032 浏览
Apache Doris——简介 1.概述 Apache Doris 是一个基于MPP架构的高性能实时分析 OLAP 引擎,以其极快的速度和易用性而闻名。 它只需要亚秒的响应时间即可在海量数据下返回查询结果,并且不仅可以支持高并发点查询场景,还可以支持高吞吐量复杂分析场景。 Apache Doris是一个现代化的MPP分析型数据库产品。仅需亚秒级响应时间即可获得查询结果,有效地支持实时数据分析。Apache Dori 人工智能 2025年05月01日 167 点赞 0 评论 18387 浏览
大数据:HDFS知识体系(知其然,知其所以然) 前言 HDFS是Hadoop体系的基础,不知道各位怎么对待HDFS。反正我更多的关注一些应用层的东西,对于HDFS多有忽视。 但是每次面试的时候都要重新去背面经,我觉得这样的情况不太正常,因此耗时两天半整理了HDFS的知识体系,力求知其然也要知其所以然。 文章中有不少个人思考,希望能让各位更好的理解HDFS. 一、HDFS特性 高容错性:HDFS认为硬件总是不可靠的。 高吞吐量:HDFS为大量 人工智能 2025年05月01日 97 点赞 0 评论 2000 浏览
先为不可胜——中小企业生存之道38 第五章 第4节 胜任特征模型 企业选人和用人需要科学的标准,也就是常说的职务说明书或者叫岗位描述。岗位胜任特征模型就是主要解决企业中不同岗位需要明确的岗位关键胜任力素质标准量化的问题,解决实践中我们遇到的什么素质类型的人能够在这个岗位上产生高绩效的问题。 胜任特征指能将某一工作(或组织、文化)中有卓越成就者与表现平平者区分开来的个人的潜在特征,它可以是动机、特质、自 人工智能 2025年05月01日 79 点赞 0 评论 2727 浏览
Kafka笔记 一、背景知识 Kafka定义 传统定义:Kafka 是一个分布式的基于发布/订阅模式的消息队列,主要应用于大数据实时处理领域。 最新定义:Kafka 是一个开源的分布式事件流平台,被数千家公司用于高性能数据管道、流分析、数据集成和关键任务应用。 消息队列 传统的消息队列的主要应用场景包括: 缓存/消峰、 解耦和异步通信。目前企业中比较常见的消息队列产品主要有 ActiveMQ、RabbitMQ、R 人工智能 2025年04月30日 174 点赞 0 评论 14386 浏览
2022-06-15 斯坦福大学计算机公开课资源 ① CS 103 计算的数学基础 计算能力的理论极限是什么?计算机能解决哪些问题?哪些不能?我们如何以数学上的确定性来推理这些问题的答案?本课程探讨这些问题的答案,并作为离散数学、可计算性理论和复杂性理论的介绍。课程完成后,学生将能够轻松编写数学证明、推理离散结构、阅读和编写一阶逻辑语句,以及使用计算设备的数学模型。 学习地址: ② CS106a 编程 人工智能 2025年04月30日 80 点赞 0 评论 7426 浏览
R稀疏矩阵转化稠密矩阵|使用as.matrix()报错:Cholmod error 'problem too large' 在进行一些数据分析是经常会需要将一个数据对象转化为矩阵,以及稀疏矩阵(sparse matrix)和稠密矩阵之间的互化。 问题&报错 在R环境中,用的非常普遍的函数就是as.matrix(),但是,当转化的稀疏矩阵对象非常巨大的时候,例如细胞数目非常多的单细胞数据,R就会报如下类似的错误: Error in asMethod(object) : Cholmod error 'probl 人工智能 2025年04月30日 147 点赞 0 评论 2390 浏览
《认识长⽅形和正⽅形》教学反思 《认识长⽅形和正⽅形》这⼀课时是要让学⽣经历探索长⽅形、正⽅形特征的过程,初步掌握长⽅形和正⽅形的基本特征,知道长⽅形长、宽以及正⽅形边长的含义,并能够初步体会长⽅形与正⽅形的联系与区别。通过教学,使学⽣进⼀步积累认识图形的学习经验,增强空间观念,培养观察、操作及思维能⼒;在学习活动中体会图形与现实⽣活的联系,感受平⾯图形的学习价值,增强数学学习的兴趣,培养⾃主学习、合作交流的能⼒。本课的重点在于 人工智能 2025年04月30日 50 点赞 0 评论 4372 浏览
模型 我想学习或是成事,真的是有一套模型的。比如说上班吧,得从老板或者说是领导、管理者的角度考虑,将心比心就会明白拿多少的工资就要付出多少的劳动,自己拿的工资多少,直接和自己的能力、付出,以及创造的价值有关。要相信只有锅里有,碗里才会有。 学习也是如此,学习的成绩直接跟自己的努力、效率等等有关,学习同样也是锅里有,碗里才会有,只有脑子里有东西,考试的时候才会洋洋洒洒,取得高分。 成功肯定有公式,或者说是 人工智能 2025年04月29日 175 点赞 0 评论 10523 浏览