最新 最热

React-Redux入门

ant design https://ant.design/docs/react/introduce-cn

2021-03-22
1

拥抱 Vite2.0 系列(一)

Vite(法语为 fast,发音为/vit/)是一种构建工具,旨在为现代Web项目提供更快,更精简的开发体验。它包含两个主要部分:

2021-03-16
0

Flink(1.12.1)日志配置Logback实现日志切分和kafka发送

产线环境上的Flink应用是长时运行的应用,日志量较大,需要将flink应用的日志发送到外部系统,方便进行日志检索。

2021-03-16
0

大数据高速计算引擎Spark

从狭义的角度上看:Hadoop是一个分布式框架,由存储、资源调度、计算三部分组 成; Spark是一个分布式计算引擎,由 Scala 语言编写的计算框架,基于内存的快速、通 用、可扩展的大数据分析引擎; 从广义的角度上看,Spark是Hadoop...

2021-03-15
0

Flink SQL on Zeppelin - 打造自己的可视化Flink SQL开发平台

目前开发Flink的方式有很多,一般来说都是开发同学写JAVA/SCALA/PYTHON项目,然后提交到集群上运行。这种做法较为灵活,因为你在代码里面可以写任务东西,什么维表JOIN、参数调优,都能很轻松的搞定。但是对开发同学的要求较高...

2021-03-15
0

0831-5.15.1-ResourceManager卡住导致集群job无法提交异常分析

本文描述了一次因为Zookeeper的异常导致ResourceManager卡住,从而导致集群所有作业无法提交的问题分析和处理。

2021-03-11
1

快手超大规模集群调度优化实践

导读:随着公司业务的快速发展,离线计算集群规模和提交的作业量持续增长,如何支撑超大规模集群,如何满足不同场景的调度需求成为必须要解决的问题。基于以上问题,快手大数据团队基于YARN做了大量的定制和优化,支撑了不同场景...

2021-03-11
0

关于现代包管理器的深度思考——为什么现在我更推荐 pnpm 而不是 npm/yarn?

很长时间没有更新原创文章了,但是还一直在思考和沉淀当中,后面公众号会更频繁地输出一些前端工程相关的干货,希望对大家有一些启发,也希望在实际的工作当中帮助大家提升效率。...

2021-03-10
0

数据分析工具篇——spark on yarn模式

spark on yarn架构有两种模式,分为Yarn-client模式和Yarn-cluster模式,本文与大家一起了解一下这两种模式:

2021-03-09
0

15 个常见的 Node.js 面试问题及答案

临阵磨枪,不快也光。对于成功的编程面试来说,准备和知识面一样重要。准备使你有信心参加面试,而不用担心莫名的紧张情绪。如果第一次参加编程面试,这一点尤其重要。...

2021-03-09
0