Scala的隐式转换，其实最核心的就是定义隐式转换函数，即implicitconversion function。定义的隐式转换函数，只要在编写的程序内引入，就会被Scala自动使用。Scala会根据隐式转换函数的签名，在程序中使用到隐式转换函数接收的...

关注“一猿小讲”公众号的小伙伴都清楚，上次《技术再深入一点又何妨？一脸懵B的聊Actor》，我们在“懵 B”的状态下，聊了聊 Actor 模型的理论知识。稍微再补充两句，如上图所示在 Actor 模型系统中，主要有互不依赖的 Actor 组...

《Spark Core源码精读计划3 | SparkContext辅助属性及后初始化》

很多人一定和我一样的感受：源码在工作中有用吗？用处大吗？很长一段时间，我也有这样的疑问，认为那些有事没事扯源码的人，就是在装，只是为了提高他们的逼格而已。...

在JVM生态下流行的语言有好几种，最出名的应该就是Scala和Kotlin了。最近准备除了Java本身之外在学习一种JVM生态下的语言，Scala和Kotlin都是候选语言。

完成了一套标准的rest风格数据库CRUD操作httpserver后发现有许多不足。主要是为了追求“通用”两个字，想把所有服务接口做的更“范generic”些，结果反而限制了目标数据库的特点，最终产生了一套功能弱小的玩具。比如说吧：...

Scala映射(Map)是一组键/值对的对象。键在映射中是唯一的，但值不一定是唯一的。映射也称为哈希表。映射有两种，不可变的和可变的。默认情况下，Scala使用不可变映射(Map)。如果要使用可变集合(Map)，则需要明确导入scala.co...

在这里我们解释如何配置 Spark Streaming 以接收来自 Kafka 的数据。有两种方法，一种为使用 Receivers 和 Kafka 高级API的旧方法，以及不使用 Receivers 的新方法（在 Spark 1.3 中引入）。它们具有不同的编程模型，性能特征...

从本文开始，讨论Spark基础支撑子系统的具体实现。首先来看WordCount中最先出现的SparkConf。

SparkSQL context 在执行sql语句时，现在使用spark.sql()替换sqlContext.sal()