大数据和云计算技术周报(第133期)

2019-12-18 11:12:59 浏览数 (1)

导语

“大数据” 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算、存储、网络都涉及,知识点广、学习难度高。 本期会给大家奉献上精彩的:flink、Hbase、MongoDB、推荐系统、实时平台、谷歌分析、Spark、。全是干货,希望大家喜欢!!!

1IOT

如今pc和手机的操作系统已被垄断,但是这个垄断却未必能在物联网时代延续,一个新兴的物联网操作系统浪潮正在袭来。本文介绍了全球各大厂家的物联网操作系统。

https://mp.weixin.qq.com/s/gravlSrQwzsPUTGfOpGmQg

2Lindorm

Lindorm是阿里巴巴HBase&Lindorm团队9年以来技术积累的结晶,Lindorm在面向海量数据场景提供世界领先的高性能、可跨域、多一致、多模型的混合存储处理能力。对焦于同时解决大数据(无限扩展、高吞吐)、在线服务(低延时、高可用)、多功能查询的诉求,为用户提供无缝扩展、高吞吐、持续可用、毫秒级稳定响应、强弱一致可调、低存储成本、丰富索引的数据实时混合存取能力。

https://mp.weixin.qq.com/s/I3FnP1JtY5QZCY2D3QioyQ

3HBase

本文首先讲述了HBase的offheap现状,进而引出Netty内存管理进行概述,通过借鉴Netty的内存管理,对HBase的Offheap化设计进行总结。

http://openinx.github.io/2019/02/23/netty-memory-management/

4日志系统

Logan是美团点评集团移动端基础日志组件,这个名称是Log和An的组合,代表个体日志服务。同时Logan也是“金刚狼”大叔的名号,当然我们更希望这个产品能像金刚狼大叔一样犀利。

Logan已经稳定迭代了一年多的时间。目前美团点评绝大多数App已经接入并使用Logan进行日志收集、上传、分析。近日,我们决定开源Logan生态体系中的存储SDK部分(Android/iOS),希望能够帮助更多开发者合理的解决移动端日志存储收集的相关痛点,也欢迎更多社区的开发者和我们一起共建Logan生态。Github的项目地址参见:https://github.com/Meituan-Dianping/Logan

https://tech.meituan.com/2018/10/11/logan-open-source.html

5DevOps

当下,互联网行业已经普遍采用 DevOps 的体系流程。靠人力去一台设备一台设备的更改配置,已经不再是正确的思维方式。原因不仅仅是浪费时间 —— 要知道,人如果要长时间保持注意力集中,大脑需要耗费大量的能量,很难保证不出现遗漏或者错误。

https://mp.weixin.qq.com/s/hcC_TJxuoXUcenMrwG8Vlg

6CNN

我们都知道卷积的重要性,但你知道深度学习领域的卷积究竟是什么,又有多少种类吗?研究学者 Kunlun Bai 近日发布一篇介绍深度学习的卷积文章,用浅显易懂的方式介绍了深度学习领域的各种卷积及其优势。

https://mp.weixin.qq.com/s/9GlqJ5sSH_CRTS9F_MzOmQ

7MongoDB

本文讲述了使用node.js通过mongoose来连接MongoDB进行CRUD操作。

https://www.jianshu.com/p/2e64ae1e096b

8边缘计算

边缘计算了解一下

https://mp.weixin.qq.com/s/5mG8dI1oHo0ucGK5ceWydQ

9AI

本文分四个部分回顾阿里HBase在高可用方面的发展:大集群、MTTF&MTTR、容灾、极致体验。

https://mp.weixin.qq.com/s/J0gMQ6L-RUhmt11HCv3FCQ

10js

我将回顾doc2vec的方法,在2014年由Mikilov和Le提出,我们要通过这篇文章提到很多次。值得一提的是,Mikilov也是word2vec的作者之一。

https://mp.weixin.qq.com/s/mhahB9zt6vEMWn7SFqXzeQ

11开心一刻

我是一个程序猿,一天我坐在路边一边喝水一边苦苦检查bug,这时一个乞丐在我边上坐下了,开始要饭,我觉得他可怜,就给了他一块钱,然后接着调试程序。他可能生意不好,就无聊的看看我在干什么,然后过了一会,他幽幽说,这里少了一个分号……一个分号……一个分号……

致谢:

周蓬勃、王在道、孙亚飞、冯艺帆、陈少军、邓开表、张少华、薛述强、刘彬、刘超、廖程鹏、董言、吕西金、朱洁、蓝随、黄文辉、郭飞猜你喜欢

0 人点赞