人工智能

真厉害!1 秒写入 10 万条消息,Kafka 写得这么快,都是因为这些优化!

Kafka 作为消息队列中的中坚力量,基本上是每次面试必问的知识点。而说到 Kafka,大家对它的印象就是快!异常地快! 因此,为什么 Kafka 这么快,也是每次面试必问的知识点。对于混迹 Java 技术圈多年的我来说,Kafka 这么快的特性已经了然于胸。今天,就让我带着大家盘一盘! Kafka 写入速度非常快,主要得益于其系统架构设计,包括: PageCache 批量压缩传输 顺序、批量写

Apache Pulsar——Adaptor适配器

一、Pulsar Adaptor on Kafka 适配器 Pulsar 为使用 Apache Kafka Java 客户端 API 编写的应用程序提供了一个简单的解决方案。 在生产者中,如果想不改变原有kafka的代码架构,就切换到Pulsar的平台中,那么Pulsar adaptor on kafka就变的非常的有用了,它可以帮助我们在不改变原有kafka的代码基础上,即可接入pulsar,但

文本摘要方法

所谓摘要,就是对给定的单个或者多个文档进行梗概,即在保证能够反映原文档的重要内容的情况下,尽可能地保持简明扼要。质量良好的文摘能够在信息检索过程中发挥重要的作用,比如利用文摘代替原文档参与索引,可以有效缩短检索的时间,同时也能减少检索结果中的冗余信息,提高用户体验。随着信息爆炸时代的到来,自动文摘逐渐成为自然语言处理领域的一项重要的研究课题 一. 技术路线 1.1 TF-IDF 《Term W

睡眠

睡眠涉及神经元 DNA 损伤修复、昼夜节律、内分泌调节、神经系统剪枝、神经系统垃圾清理,是多种动物维持生命和保持一定的认知能力所必需。(有肠道的动物似乎在睡眠状态或类似睡眠的状态清理肠道中的活性氧。长时间不睡眠或严重睡眠不足,会引起活性氧积累在消化道并影响更多组织、器官,这可能是睡眠剥夺在数天到数十天内可以对多种动物致死的主要原因) 梦是睡眠的特定阶段出现的脑活动和神经噪声。 对有视觉的动物来说

用小饼图代替点图里的点

0.起因 最近在群里看到一个图,棒棒糖图的点用饼图代替了。 然后又看到一个文章里,用饼图代替了富集分析的点图,妙啊~ 这个地球上有什么漂亮的图能躲过我的小胖手呢?画他! 1.搜索 试了几个不同的关键词,最后这样搜到了。 答案指向一个包,名叫scatterpie。一看作者,啊,这不是Y叔嘛~ 2. 跑示例代码 2.1 示例数据 set.seed(123) l

200行代码实现CNN卷积结果的可视化

from PIL import Image import os import numpy as np import torch import torch.nn as nn import copy from torch.autograd import Variable from torchvision import models import matplotlib.cm as mpl_color_m

第1章 弹性计算

1.1 弹性计算是什么 弹性计算是一种为用户提供计算力的服务,并且用户可以根据实际需要灵活、动态地调整要购买的容量,即所谓的“弹性 1.1.1 弹性计算的状态 弹性计算提供的“计算力”是用于完成用户特定的计算任务,弹性计算提供了一种产品形态,“即云服务器”。云服务器的能力与一台传统的物理服务器差不多,并且提供与物理服务器一样的标准接口。 1.1.2 弹性计算的构成 “计算”一词含义可大可小。从广

常见文本分类模型

1. Fasttext 1.1 模型架构 Fasttext模型架构和Word2vec的CBOW模型架构非常相似,下面就是FastText模型的架构图: 从上图可以看出来,Fasttext模型包括输入层、隐含层、输出层共三层。其中输入的是词向量,输出的是label,隐含层是对多个词向量的叠加平均 CBOW的输入是目标单词的上下文,Fasttext的输入是多个单词及其n-gram特

shardindjdbc-complex策略

支持多分片键的复杂分片策略。 配置参数:complex.sharding-columns 分片键(多个); complex.algorithm-class-name 分片算法实现类。 sql和源码 配置 spring: main: allow-bean-definition-overridin