在多机集群环境中,经常面临修改配置文件后拷贝到多台服务器的情况,传统的执行scp比较麻烦,所以写了以下shell脚本,可以将指定文件拷贝到多台机器。...
Win7环境下通过Eclipse连接Hadoop1.2.1集群时,会遇到如下报错: Exception in thread "main" java.io.IOException: Failed to set permissions of path: tmphadoop-Administratormapreds......
http://d3kbcqa49mib13.cloudfront.net/spark-1.1.0-bin-hadoop1.tgz
之前写了一篇分析MapReduce实现矩阵乘法算法的文章:Mapreduce实现矩阵乘法的算法思路 http://www.linuxidc.com/Linux/2014-09/106646.htm
Hadoop是运行在Linux系统下的,但我们在Windows下Eclipse远程访问Hadoop HDFS时,如果两个机子地址不在同一网段便无法相互访问。
Hadoop版本: cdh5.0.1(manmual安装,未安装cloudera-manager相关)
http://mirrors.cnnic.cn/apache/hive/stable/apache-hive-0.13.1-bin.tar.gz
接前一篇文章《Mahout0.9 打patch使其支持 Hadoop2.2.0》http://www.linuxidc.com/Linux/2014-09/106286.htm,
Mahout0.9之前的版本默认不支持Hadoop2.2.0以上版本,但很多情况下,由于集群环境的Hadoop已经是2.2.0以上版本,又必须使用Mahout,此时就需要编译源码,使得Mahout支持Hadoop2了。...
先参考:《Hadoop-2.3.0-cdh5.1.0伪分布安装(基于CentOS)》 http://www.linuxidc.com/Linux/2014-09/106372.htm