由于Hadoop 2.5.x 已经出来有好几个月了，网上配置类似架构的文章也有很多，所以在这里重点描述一下namenode 和 secondary namenode不再同一台机器上的配置方法，以及namenode 宕机后 meta数据的恢复方法，并且描述一下几个...
mapper调优主要就一个目标：减少输出量 我们可以通过增加combine阶段以及对输出进行压缩设置进行mapper优化 1>combine合并： 实现自定义combine要求继承reduce类。比较适合map的输出是数值型的，方便进行统计。 2>压缩...
机器环境Distributor ID: CentOSDescription: CentOS release 5.8 (Final)Release: 5.8Codename: Finaljdk 版本java version "1.6.0_45"
本文讲解了Storm故障容忍性(Fault-Tolerance)的设计细节：当Worker、节点、Nimbus或者Supervisor出现故障时是如何实现故障容忍性，以及Nimbus是否存在单点故障问题。...
Hadoop自带了一个历史服务器，可以通过历史服务器查看已经运行完的Mapreduce作业记录，比如用了多少个Map、用了多少个Reduce、作业提交时间、作业启动时间、作业完成时间等信息。默认情况下，Hadoop历史服务器是没有启动的...
//将本地文件复制到复制到Hadoop文件系统//目前，其他Hadoop文件系统写入文件时均不调用progress()方法。package com;
//显示Hadoop文件系统中一组路径的文件信息//我们可以用这个程序来显示一组路径集目录列表的并集package com;
Hadoop已被公认为大数据分析领域无可争辩的王者，它专注与批处理。这种模型对许多情形（比如：为网页建立索引）已经足够，但还存在其他一些使用模型，它们需要来自高度动态的来源的实时信息。为了解决这个问题，就得借助Twitter推...
作者 | 曾响铃文 | 响铃说（xiangling0815）日益复杂的市场环境下，如何更好地生存与发展成为摆在每一个互联网企业面前的重要课题。而长期以来，无论是To C还是To B，厮杀于惨烈市场中的互联网企业追寻“快准狠的好生意”已经...
例如淘宝的交易历史记录。数据量巨大无容置疑，面向普通用户的请求必然要即时响应。
