最新 最热

数据结构学习路线

TreapSplay树划分树左偏树线段树树链剖分动态树主席树Trie树RMQ二分查找树状数组滚动数组逆序数带权值的并查集Chtholly Tree (珂朵莉树) ODTSBT算法AVL树替罪羊树点分治李超树Splay树划分树左偏树线段树树链剖分动态...

2020-10-28
0

flink源码分析之TaskManager启动篇

客户端不是运行时和程序执行的一部分,但用于准备数据流并将其发送到JobManager。之后,客户端可以断开连接(分离模式 detached mode),或者保持连接以接收进度报告(附加模式 attached mode)。客户机可以作为触发执行的Java...

2020-10-27
0

源码编译搭建Spark3.x环境

首先安装好JDK、Scala和Maven,由于安装都比较简单,本文就不演示了,我这里使用的JDK、Scala和Maven版本如下:

2020-10-27
0

Scala学习三-面向对象

前面我们已经学习了特质类似接口,其可以被继承,同时如果需要继承多个特质的话,则需要使用extends…with…进行继承。其类似java中的接口和抽象方法的结合体,但又比java中的其要强大,因为其可以定义抽象字段和普通字段、抽...

2020-10-26
0

kafka学习三-broker的入口

前面我们通过学习scala知道通常如果想运行scala程序,必然会有一个入口,而这个入口可以通过kafka的启动脚本kafka-server-start.sh可以看到运行的就是kafka.Kafka,也即Kafka.scala。和RocketMQ一样,kafka的broker也是在服...

2020-10-26
0

Scala学习二-面向对象

适用于var变量,对于val不适用,注意如果使用下划线进行初始化,此时必须提供数据类型,这样就可以进行自动推断赋初始值

2020-10-26
0

SpringBoot 国际化实现跨地区的多语言切换

创建文件夹 resources/i18n , 创建文件: messages.properties

2020-10-26
0

new ScalarHandler()-->返回值为long,不能用int接收!!!

qr.query()返回object类型 ,先转成 ScalarHandler的Long类型 然后 在转为 int类型,之前我直接就转成int类型所以就GG了呱~。

2020-10-23
0

机器学习:如何快速从Python栈过渡到Scala栈

我之前的技术栈主要是Java、Python,机器学习方面主要用到是pandas、numpy、sklearn、scipy、matplotlib等等,因为工作需要使用spark,所以理所应当的开始学习pyspark;...

2020-10-20
0

linux环境不使用hadoop安装单机版spark的方法

大数据持续升温, 不熟悉几个大数据组件, 连装逼的口头禅都没有。 最起码, 你要会说个hadoop, hdfs, mapreduce, yarn, kafka, spark, zookeeper, neo4j吧, 这些都是装逼的必备技能。...

2020-10-19
0