centos6.4安装hadoop-2.5.1（完全分布式）

环境介绍： 在两台装有centos6.4（32位）的服务器上安装Hadoop-2.5.1分布式集群（2台机器，主要试验用，哈哈）。 1．修改主机名和/etc/hosts文件 1）修改主机名（非必要） vi /etc/sysconfig/networkHOSTNAME=XXX 重启后生效。 2）/etc/hosts是ip地址和其对...

Hadoop-2.5.1 编译安装步骤

环境：系统CentOS6.364位*2Master10.10.55.112Slave110.10.55.133软件：Hadoop-2.5.1-src.tar.gz 一、准备环境 1.1分别设置节点ip地址（固定）此步骤所有节点都要操作 vi/etc/sysconfig/network-scripts/ifcfgeth0 1.2修改节点主机名此步骤所有节点都要操作...

Centos6.5源码编译安装Hadoop2.5.1

一、编译环境 [plain]view plaincopy Centos6.5(64bit) jdk7 ant1.9.4 maven3.1.1 findbugs3.0.0 protobuf2.5.0 hadoop2.5.1源代码文件 二、安装以上所需的所有软件 1.yum可安装的软件 [html]view plaincopy yuminstallsvnncurses-develgcc*lzo-develzlib-de...

Centos6.5编译Hadoop2.4源码

今天来说说编译hadoop源码的事情吧~ 1、首先下载源码 地址： http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.4.0/ 2、加压tar包到指定文件夹 ：/home/hadoop/soft/hadoop view sourceprint? 1. tar zxvf hadoop- 2.4 . 0 -src.tar.gz 3、Linux编译...

Centos6.5下部署Hadoop2.2的完全分布式集群

我们来看下，如何在Centos6.5下，部署完全分布式集群。 下面先来看下具体的系统环境 序号 名称 描述 1 系统环境Centos6.5 最好在linux上部署 2 Hadoop版本Hadoop2.2.0 Hadoop2.x中的第一个稳定版本 3 JAVA环境JDK1.7 64位(build 1.7.0_25-b15) 部署情况 序号...

使用ganglia监控hadoop的配置方法

介绍：Hadoop本身提供了很多监控工具的接口，如JMX、Nagios、Ganglia等。使用Ganglia监控hadoop，配置起来非常简单，只需要修改$HADOOP_HOME/conf/hadoop-metrics.properties文件，把相关的配置段修改为下面的示例： 复制代码 代码如下: # Configuration of...

创建hadoop账号的方法

之前安装hadoop集群时，使用了root账号，后来发现有一些安全隐患，于是就把线上的集群统一配置到了hadoop账号下。 以下是具体操作步骤： １：创建hadoop账号 复制代码 代码如下: useradd hadoop ２：ssh无密码登陆 复制代码 代码如下: su hadoop ssh-keygen...

Hadoop 报错：＂Name node is in safe mode＂ 的解决方法

运行hadoop程序时，有时会报如下的错误： org.apache.hadoop.dfs.SafeModeException: Cannot delete /user/hadoop/input. Name node is in safe mode 这个错误应该很常见的吧。 错误分析，从字面上来理解： Name node is in safe mode 说明Hadoop的NameNode...

linux下搭建hadoop环境步骤分享

1、下载hadoop包 wget http://apache.freelamp.com/hadoop/core/stable/hadoop-0.20.2.tar.gz 2、tar xvzf hadoop-0.20.2.tar.gz 3、安装JDK，从oracle网站上直接下载JDK，地址：http://www.oracle.com/technetwork/java/javase/downloads/index.html 4、chm...

学习hadoop过程中用到的一些命令

学习hadoop过程中用到的一些命令，这里作个记录，以备后阅。 1、ubuntu12 下如何打开终端：CTRL+ALT+t 2、ubuntu12 下查看JAVA_HOME环境变量:echo $JAVA_HOME 3、解压压缩文件：tar -xzvf hadoop-1.0.1.tar.gz 4、文件编辑命令：sudo gedit hadoop_env.sh 5...