• hadoop启动停止命令分析

    日期：

    1批量启动与停止 1.1Start-all.sh # Start all hadoop daemons. Run this on master node. bin=`dirname $0` bin=`cd $bin; pwd` #变量配置命令 . $bin/hadoop-config.sh #Dfs服务器启动 # start dfs daemons $bin/start-dfs.sh --config $HADOOP_CONF_DIR M...

  • hadoop三个配置文件的参数含义说明

    日期：

    1获取默认配置 配置hadoop，主要是配置core-site.xml,hdfs-site.xml,mapred-site.xml三个配置文件，默认下来，这些配置文件都是空的，所以很难知道这些配置文件有哪些配置可以生效，上网找的配置可能因为各个hadoop版本不同，导致无法生效。浏览更多的配置，...

  • Centos 6.3 Hadoop集群配置详解

    日期：

    环境:4台服务器 1 Master 3 Slave, 系统Centos 6.3，预先安装好JDK 1.7 和openssh(对相关安装配置过程有疑问或者困难的请google或者查阅笔者之前的blog)，且 关闭防火墙 ( 避免配置好后运行过程引起不必要的意外) 服务器清单如下 1 2 3 4 5 6 7 8 9 HostName...

  • centos6.5配置hadoop+hive

    日期：

    1，下载hive #cd/usr/local/ #wget-chttp://mirror.esocc.com/apache/hive/hive-0.12.0/hive-0.12.0.tar.gz #tarzxvfhive-0.12.0.tar.gz #cd /usr/local/#wget -c http://mirror.esocc.com/apache/hive/hive-0.12.0/hive-0.12.0.tar.gz#tar zxvf hive-0.12.0...

  • centos 6.5搭建hadoop2.2.0

    日期：

    由于测试学习用，所以安装三个虚拟机： s1=192.198.56.101 s1=192.198.56.102 s1=192.198.56.103 s1=192.198.56.101s1=192.198.56.102s1=192.198.56.103 修改hosts文件： #vim /etc/hosts //加入最下面 192.168.56.101hadoop1 192.168.56.102hadoop2 192.168...

  • CentOS 6.5下Hadoop1.1.2环境搭建（单机版）

    日期：

    （1）我的电脑环境 CentOS6.5,32位，在虚拟机下实现。 注意：下面的操作我都是使用root权限进行！ （2）jdk1.6的安装 这里，我使用的jdk安装包如下，大家可以上网自行下载，这里推荐jdk为1.6为好，最好不要哦用1.7. 将jdk安装包移动到/usr/local这个目录下，...

  • hadoop2.6和hbase1.0单机版安装配置

    日期：

    环境 系统：Ubuntu 14.04 hadoop版本：2.6.0 hbase版本：1.0 jdk版本：1.8 下载地址：Apache上慢慢找吧~~ jdk的环境配置这里就不列出来了，首先讲一下hadoop配置吧。 hadoop安装 1.安装位置：/opt 2.创建hadoop用户组 sudo addgroup hadoop 3.创建hadoop用户...

  • Hadoop中的SSH设置

    日期：

    首先hadoop使用SSH来实现cluster中各个node间的登录认证。作为一个开源框架，hadoop当然也使用开源的OpenSSH啦~ SSH utilizes standard public key cryptography to create a pair of keys for user verificationone public, one private. The public key is...

  • ubuntu 安装 hadoop（单机版）

    日期：

    网上虽然有很多类似的文章，但大部分都有部分细节讲清楚，导致本小哥装了好久才装上。 为此，遂起心想整理下一份尽可能清晰的安装步骤来，遂成此文。 ----------------------------------------------------------------------------------------------------...

  • Ubuntu上搭建Hadoop环境（单机模式+伪分布模式）

    日期：

    最近一直在自学Hadoop，今天花点时间搭建一个开发环境，并整理成文。 首先要了解一下Hadoop的运行模式： 单机模式（standalone） 单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时，Hadoop无法了解硬件安装环境，便保守地选择了最小配置。在这种默认...

最近关注
热点内容