最新 最热

[源码解析] 深度学习流水线并行Gpipe(1)---流水线基本实现

GPipe是一个基于 Lingvo (Lingvo 是 Google 基于 TensorFlow 二次开发的重点针对序列模型的框架)开发的,支持超大规模模型的神经网络训练并行库,本文介绍其基本功能和流水线机制。...

2021-08-24
0

[源码解析] PyTorch 分布式(2) --- 数据加载之DataLoader

为了更好的介绍参数服务器Paracel的数据加载,我们临时插入两篇PyTorch的数据加载,主要是从分布式的角度进行切入。本文只算是开胃甜点,后续会有专门系列分析PyTorch分布式。...

2021-08-23
0

文本匹配开山之作--双塔模型及实战

在前面一篇文章中,总结了Representation-Based文本匹配模型的改进方法,

2021-08-20
0

聊一聊大火的对比学习

在之前的博客里,笔者介绍了在有监督任务(文本匹配)上,增加对比学习来提高模型性能的实验,而当时尝试后却发现,在新增了对比学习的任务后,模型的性能并没有得到对应的提升。...

2021-08-20
0

mybatis-plus使用上需要注意的问题

之前,开发项目使用的是tk-mapper,当使用批量操作时,通常使用insertList就可以了。但是,最近的项目使用的是mybaits-plus,在使用批量操作saveBatch的使用,却遇到了一个问题,这个一开始让我以为我的数据出现了重复,但是仔细看,不...

2021-08-20
0

从头分析flink源码第四篇之channel selector

•void setup(int numberOfChannels):用输出通道的数量来对channel selector进行初始化操作,主要用于数据输出时使用;•selectChannel(T record):返回逻辑channel index,给定记录应写入该索引。broadcast模式的 channel se...

2021-08-18
0

Apache Kafka-消费端消费重试和死信队列

Spring-Kafka 提供消费重试的机制。当消息消费失败的时候,Spring-Kafka 会通过消费重试机制,重新投递该消息给 Consumer ,让 Consumer 重新消费消息 。

2021-08-17
0

Apache Kafka-生产者_批量发送消息的核心参数及功能实现

kafka中有个 micro batch 的概念 ,为了提高Producer 发送的性能。

2021-08-17
0

MyBatis源码-解读Executor的三个实现类之BatchExecutor(批处理执行器)

工程部分见 MyBatis源码- SqlSession门面模式 & selectList 源码解析

2021-08-17
0

MyBatis源码-解读Executor的三个实现类之SimpleExecutor(简单执行器)

工程部分见 MyBatis源码- SqlSession门面模式 & selectList 源码解析

2021-08-17
0