大数据和云计算技术周报(第103期)

2019-05-23 21:55:58 浏览数 (1)

导语

“大数据” 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算、存储、网络都涉及,知识点广、学习难度高。 本期会给大家奉献上精彩的:华为数据库、AI、Hbase、DL、MongoDB、Kafka、推荐系统、ES、Phoenix、edis、Cassandra、。全是干货,希望大家喜欢!!! #大数据和云计算技术社区#希望通过坚持定期分享能帮助同学在大数据学习道路上尽一份微博之力。相信长期坚持认真阅读周报的同学,在技术的道路上一定会日益精进!感谢编辑们的长期坚持!也请同学们继续打赏,支持社区,支持编辑们持续奉献高质量知识! #大数据和云计算技术社区#长期招募有兴趣参与社区编辑和运营的同学,欢迎扫描文末二维码联系(参与社区工作,收获知识和进步,还有红包哦)。 特别提醒,文末有惊喜! 以下是正文,限于众编辑水平有限,不保证大家都喜欢。(如果链接不能点开 请用二维码 谢谢)

1HBase

本文主要介绍MySQL HBase 分别解决应用的在线事务问题和大数据场景的海量存储问题。

https://mp.weixin.qq.com/s/XNeOceRbpPAUz5_IWLRsyw

2华为

华为开始直接卖数据库了

https://mp.weixin.qq.com/s/AMCZe7L57q8PmUMc9qeG2w

3kafka

Kafka参数调优实战,看这篇文章就够了,主要从以下8个方面讲述 1、背景引入:很多同学看不懂Kafka参数,2、一段Kafka生产端的示例代码,3、内存缓冲的大小,4、多少数据打包为一个Batch合适,5、要是一个Batch迟迟无法凑满咋办,6、最大请求大小,7、重试机制8、持久化机制

Kafka 系统在快手有着很广泛的应用,随着其业务的高速发展, Kafka 集群的规模也成指数增长,目前快手 Kafka 集群日消息处理总量达数万亿级别,峰值超过 1 亿 /s。本文整理自快手高级架构师、大数据架构团队负责人赵健博在 QCon 全球软件大会(北京)2019 上的演讲,他介绍了 Kafka 系统在快手的应用实践、遇到的问题以及相应的技术的演进过程。

https://mp.weixin.qq.com/s/X-Nn6fJX4Kgqh9H8_1TQhQ

4MongoDB

本文讲述了如何分析和查看影响MongoDB性能的问题,并结合现实中服务接口出现超时的例子,解释分析MongoDB性能问题步骤。

5Cassandra

在 Instagram (Instagram 是 Facebook 公司旗下一款免费提供在线图片及视频分享的社交应用软件,于2010年10月发布。)上,我们拥有世界上最大的 ApacheCassandra 数据库部署。我们在 2012 年开始使用 Cassandra 取代 Redis ,在生产环境中支撑欺诈检测,Feed 和 Direct inbox 等产品。起初我们在 AWS 环境中运行了 Cassandra 集群,但是当 Instagram 架构发生变化时,我们将 Cassandra 集群迁移到Facebook 的基础架构中。我们对 Cassandra 的可靠性和可用性有了非常好的体验,但是在读取数据延迟方面;本文介绍了Apache Cassandra 在 Facebook 的应用

6ElasticSearch

ElasticSearch 是基于 Lucene 实现的分布式搜索引擎,提供了海量数据实时检索和分析能力,随着业务体量的发展,滴滴构建了基于 ElasticSearch 的一站式搜索平台

7DL

在今年的谷歌 IO 2019 大会上有个环节,邀请了「深度学习教父」、也是 2018 年图灵奖获奖者之一的 Geoffery Hinton 聊一聊学术、非学术的各类话题。整个过程很轻松,就是聊聊各种话题,不过 Hinton 老爷子一如既往地学术风气十足。雷锋网 AI 科技评论根据视频回放把访谈内容听译整理。

https://mp.weixin.qq.com/s/bqbtmlGH3DeAqqcup6nyxw

8Phoenix

在数据库的使用中了解其查询计划的构成,是进行查询性能调优的必要条件。本文将详细介绍Phoenix的查询计划语法、组成结构,以及一些注意事项。

https://mp.weixin.qq.com/s/kDhx8dhZcMjTpQAevkc11Q

9AI

本文对AdaBoost算法进行讲解,重点在于理解该算法的原理,并用python对其进行实现。

这里的代码其实就是机器学习实战这本书里的代码。前几天我也把这块代码备注了一下。

https://mp.weixin.qq.com/s/lfa9jYNPkaPHp5vCY4hqPQ

10Redis

Redis常用操作和内存模型

https://mp.weixin.qq.com/s/bv1-0xiLi_4wBNjP2QQVWQ

11开心一刻

法国小哥最近在跟着我学中文,有天我和他聊天时发了句呵呵,23333,他问我什么意思。我说就是夸你超好笑的意思。今天晚上和他一起见中国朋友,只见朋友说完话后,他口齿清晰又标准发出了一句“呵呵,两万三千三百三十三。”全场死一般沉寂。

致谢:

周蓬勃、王在道、孙亚飞、冯艺帆、陈少军、邓开表、张少华、薛述强、刘彬、刘超、廖程鹏、董言、吕西金、朱洁、蓝随、黄文辉、郭飞

猜你喜欢

#大数据和云计算机技术社区#博客精选(2017)

NoSQL 还是 SQL ?这一篇讲清楚

阿里的OceanBase解密

#大数据和云计算技术#: "四有"社区介绍

大数据和云计算技术周报(第56期)

新数仓系列:Hbase周边生态梳理(1)

《大数据架构详解》第2次修订说明

简单梳理跨数据中心数据库

云观察系列:漫谈运营商公有云发展史

云观察系列:百度云的一波三折

云观察系列:阿里云战略观察

超融合方案分析系列(7)思科超融合方案分析

加入技术讨论群

《大数据和云计算技术》社区群人数已经6000 ,欢迎大家加下面助手微信,拉大家进群,自由交流。

0 人点赞