最新 最热

Flink1.3 指南四 命令行接口 转

Flink提供了一个命令行接口(CLI)用来运行打成JAR包的程序,并且可以控制程序的运行。命令行接口在Flink安装完之后即可拥有,本地单节点或是分布式的部署安装都会有命令行接口。命令行接口启动脚本是 $FLINK_HOME/bin目录下...

2019-03-05
0

优秀的数据工程师,怎么用 Spark 在 TiDB 上做 OLAP 分析

原文链接:优秀的数据工程师,怎么用 Spark 在 TiDB 上做 OLAP 分析

2019-02-28
0

Yarn篇--搭建yarn集群

<property>        <name>yarn.nodemanager.aux-services</name>        <value>mapreduce_shuffle</value>//定义yarn的机制    </property><property>   <name>yarn.reso......

2019-02-25
0

基于腾讯云对象存储跑hadoop任务实战二

在前一篇文章中《基于腾讯云对象存储跑hadoop任务实战一》介绍了如何部署和配置hadoop集群直接分析存储在腾讯云对象存储上的数据。这篇文章介绍一些性能优化的参数调优。...

2019-02-22
0

自2013到2019年大数据领域发生了什么变化

在网上看到这篇文章之后发现还挺有意思,文章也算比较简短,就试着联系了一下作者说我想把他翻译成中文,不做商业用途只是练习和技术布道。作者的回应也非常快,当晚就给我回复,所以就有了这篇翻译,如果翻译有不准确的地方还请...

2019-02-21
0

yarn初识

YARN是一个资源管理和作业框架,MR是计算框架 但。MR1中,JobTracker作为核心,管理集群中的每一台机器以及所有的job分配,需要很大的资源消耗,并存在单点故障。MR2以YARN作为资源和作业管理系统,把JobTracker所做的工作拆成...

2019-02-13
1

React Native简介和环境配置

Facebook于2015年9月15日发布React Native,广大开发者可以使用JavaScript和React开发跨平台移动应用,React Native提倡组件化开发,即提供一个个封装好的组件,然后组件相互嵌套形成新的组件。...

2019-01-15
1

国庆假期份额干货,往期文章在这里都能看到

互联网技术将我们带入了信息爆炸的时代,面对海量的信息,一方面用户难以迅速发现自己感兴趣的信息,另一方面长尾信息得不到曝光。为了解决这些问题,个性化推荐系统应运而生。美图拥有海量用户的同时积累了海量图片与视频,本...

2018-12-27
0

Hadoop基础环境配置

这里如果自己配置了hostname,可以使用自己配置的hostname替换localhost,默认使用localhost,端口信息也可以自己指定为未使用的端口。

2018-12-27
0