Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统(也可以当做MQ系统)。Kafka主要被用于两大类应用：1.在应用间构建实时的数据流通道；2.构建传输或处理数据流...
当我抓取大量的岗位需求之后，进行分词汇总，查阅企业最需要的员工技能，然后神奇的事情发生了
Apache Flink是一个框架和分布式处理引擎，用于对无界和有界数据流进行状态计算。 Flink设计为在所有常见的集群环境中运行，以内存速度和任何规模执行计算。...
FLUME-2071 - Flume环境变量不支持float或double的配置值.
本文主要从大数据起源谈起，介绍了几种主要的大数据处理框架，包括其中的容错机制，实现细节及原理等。再主要介绍了使用storm进行大数据开发的具体过程，以及开发过程中遇到的坑和一些优化。以下内容基于本人上次部门内分享...
大数据技术的应用正在潜移默化改变着我们的日常生活习惯和工作方式，很多看起来有点“不可思议”的事情也渐渐被我们“习以为常”。大数据可能在国内的起步较晚，但我们可能却是对大数据应用最好的了代表了。前些时候有分...
大数据技术的发展与应用已经在深刻地改变和影响我们的日常生活与工作，可以预见的是在大数据提升为国家战略层面后，未来的几年里大数据技术将会被更多的行业应用。...
从事大数据行业的朋友应该都知道大数据已经上升到了国家战略高度，2015年8月31日，国务院印发了《促进大数据发展行动纲要》。旨在通过建立“用数据说话、用数据决策、用数据管理、用数据创新”的管理机制，实现基于数据的...
如若要问当下的互联网行业什么最火，莫过于大数据、区块链。2017年12月8日，习大大的主持召开的政治局第二次集体学习会议时强调推动实施国家大数据战略，加快完善数字基础设施、推进数据资源整合和开放共享，保障数据安全，加...
