最新 最热

【Code】关于 GCN,我有三种写法

本篇文章主要基于 DGL 框架用三种不同的方式来实现图卷积神经网络。手机看可能不太方便,可以点击阅读原文,移步到知乎上看(但是我忘了加 = =)。...

2020-07-21
0

【GNN】PinSAGE:GCN 在工业级推荐系统中的应用

今天学习的是 Pinterest 和斯坦福大学 2018 年合作的论文《Graph Convolutional Neural Networks for Web-Scale Recommender Systems》,目前有 200 多次引用。

2020-07-21
1

MapReduce之Job提交流程

运行Job.waitForCompletion(),先使用JobSubmitter提交Job,在提交之前,会在Job的作业目录中生成以下文件: job.split:当前Job的切片信息,有几个切片对象 job.splitmetainfo:切片对象的属性信息 job.xml:job所有的属性配置...

2020-07-21
1

MapReduce之片和块的关系

blockSize: 块大小 minSize: minSize从mapreduce.input.fileinputformat.split.minsize和1之间对比,取最大值 maxSize: 读取mapreduce.input.fileinputformat.split.maxsize,如果没有设置,则使用Lo......

2020-07-21
0

MapReduce的常见输入格式之KeyValueTextInputFormat

每行第一个字段为名字,后面的则为该人的一些信息,所以此时的输入格式应该是以每一行的名字为Key,每一行的其他信息为Value。

2020-07-21
0

MapReduce的常见输入格式之NlineInputFormat

RecordReader:LineRecordReader,一次处理一行,将一行内容的偏移量作为key,一行内容作为value 它们的数据类型:

2020-07-21
0

React结合Redux实现Todolist

使用了redux进行状态管理 删除一个用户首先dispatch了一个deleteTodoList的 action  然后在reducer中返回删除后的数据 store更新数据 组件订阅了store的更新后 更新了内部状态 页面更新成功...

2020-07-20
1

分布式计算技术MapReduce 详细解读

上周我们学习了消息中间件的核心原理以及如何搭建一套高并发高可用且支持海量存储的生产架构(今天来设计一套高可用高并发、海量存储以及可伸缩的消息中间件生产架构),我们暂且先放一放,后面再进行RocketMQ 详细讲解,今天...

2020-07-20
0

8,循环结构

下面主要介绍Python中实现循环结构的几种方式:for循环,while循环,生成式,高阶函数,向量化。

2020-07-20
0

分布式计算技术之流计算Stream,打通实时数据处理

在上篇,我们一起学习了分布式计算中的 MapReduce 模式(分布式计算技术MapReduce 详细解读),MapReduce 核心思想是,分治法,即将大任务拆分成多个小任务,然后每个小任务各自计算,最后合并各个小任务结果得到开始的那个大任务...

2020-07-20
0