最新 最热

IDEA创建spark maven项目并连接远程spark集群

2、不同版本scala编译参数可能略有不同,笔者使用的scala版本是2.12.10,scala-archetype-simple插件生成的pom文件

2022-03-28
0

WebRTC系列分享 | WebRTC视频QoS全局技术栈

导语 | WebRTC真是一套让人既爱又恨的开源代码。一方面,WebRTC里面有一套很完善很系统的QoS策略。但另一方面,WebRTC代码庞大且版本更新迭代特别快,代码的阅读和学习难度很大。为了方便大家学习了解,我们在这里对WebRTC...

2022-03-15
0

下周开怼——Spark sql源码分享

有同学不会scala,从网上找了免费的scala视频,链接已经放在了知识星球的置顶帖,下周要跟的同学,得提前看看

2022-03-15
0

14. 精读《架构设计之 DCI》

随着前端ES6 ES7 的一路前行, 我们大前端借鉴和引进了各种其他编程语言中的概念、特性、模式; 我们可以使用函数式Functional编程设计,可以使用面向对象OOP的设计,可以使用面向接口的思想,也可以使用AOP, 可以使用注解,代...

2022-03-14
0

客快物流大数据项目(六十二):主题及指标开发

每个主题都需要拉宽操作将拉宽后的数据存储到kudu表中,同时指标计算的数据最终也需要落地到kudu表,因此提前将各个主题相关表名定义出来

2022-03-12
0

数据分析小结:使用流计算 Oceanus(Flink) SQL 作业进行数据类型转换

作者:吴云涛,腾讯 CSIG 高级工程师  在这个数据爆炸的时代,企业做数据分析也面临着新的挑战, 如何能够更高效地做数据准备,从而缩短整个数据分析的周期,让数据更有时效性,增加数据的价值,就变得尤为重要。将数据从来源端经...

2022-03-04
0

卧槽!Kafka 宣布弃用 Java 8。。

点击关注公众号,Java干货及时送达 国庆了,国庆微信头像必须安排上,舒服~ 生成方式: 超火的微信渐变国旗头像,一键生成!! Kafka 3.0.0 发布了: 主要更新如下: The deprecation of support for Java 8 and Scala 2.12 Kafka ...

2022-03-03
0

客快物流大数据项目(五十三):实时ETL模块开发准备

目录实时ETL模块开发准备一、编写配置文件二、创建包结构三、编写工具类加载配置文件实时ETL模块开发准备一、编写配置文件在公共模块的resources目录创建配置文件:config.properties# CDH-6.2.1bigdata.host=node2# H...

2022-03-02
1

CA2100:检查 SQL 查询是否存在安全漏洞

一种方法使用按该方法的字符串参数生成的字符串设置 System.Data.IDbCommand.CommandText 属性。

2022-02-20
0