超详细单机版搭建hadoop环境图文解析

年前，在老大的号召下，我们纠集了一帮人搞起了hadoop，并为其取了个响亮的口号云在手，跟我走。大家几乎从零开始，中途不知遇到多少问题，但终 于在回家之前搭起了一个拥有12台服务器的集群，并用命令行在该集群上运行了一些简单的mapreduce程序。想借此总...

linux服务器之LVS、Nginx和HAProxy负载均衡器对比总结

LVS特点： 1.抗负载能力强，使用IP负载均衡技术，只做分发，所以LVS本身并没有多少流量产生； 2.稳定性、可靠性好，自身有完美的热备方案；（如：LVS+Keepalived） 3.应用范围比较广，可以对所有应用做负载均衡； 4.不支持正则处理，不能做动静分离。 常用四...

CentOS7.0上部署kubernetes集群

一.部署环境及架构 OpenStack：恒天云3.4 操作系统:centos 7.0 flannel: 0.5.5 Kubernetes: 1.2.0 Etcd版本: 2.2.2 Docker版本: 1.18.0 集群信息： Role Hostname IP Address Master master 10.0.222.2 Node node1 10.0.222.3 Node node2 10.0.222.4 Node no...

HAProxy高并发问题解决

1问题描述 RMI上线后，现网的接口总是报告异常。 2问题分析 通过对RMI源码的理解，这个是在RMI客户端那边没有可用的连接时，需要创建一个新的连接，但是连接失败。 网络问题一般抓包可以定位，于是通过抓包发现失败的连接有个共同的现象，就是在5秒钟被HAPro...

Redis+Keepalived高可用方案详细分析

上一篇简单的了解了一下redis官方自带的HA方案sentinel，试用发现还是不错的，但是由于还没有合并进稳定分支中，所以在生产环境也不敢使用，还有一个就是需求还暂时不能完全满足，所以就尝试一下redis+keepalived方案，毕竟keepalived现在还是很稳定的，而且...

Hadoop 硬件规划

Hadoop近几年一直很热门，市面上有各种各样的书籍以及培训机构，当你熟悉完这些准备在生产上运行自己的第一个生产Hadoop集群的时候，就需要考虑购买什么样的硬件了，专业人士肯定会说：这要看你的业务类型和负载了，当然这是很有道理的，但是我接触的很多企业...

CentOS 6.3下部署LVS(NAT)+keepalived实现高性能高可用负载均衡

一、简介 VS/NAT原理图： 二、 系统环境 实验拓扑： 系统平台：CentOS 6.3 Kernel：2.6.32-279.el6.i686 LVS版本：ipvsadm-1.26 keepalived版本：keepalived-1.2.4 三、安装 0、安装LVS前系统需要安装popt-static，kernel-devel，make，gcc，openssl-devel，...

Centos配置Keepalived 做双机热备切换

Keepalived 系统环境： ************************************************************ 两台服务器都装了CentOS-5.2-x86_64系统 Virtual IP： 192.168.30.20 Squid1+Real Server 1：网卡地址(eth0):192.168.30.12 Squid2+Real Server 2：网卡地址(eth0):192....

CentOS5.9下安装配置keepalived

keepalived是由C语言编写的路由软件，是lvs的扩展项目，主要用作RealServer的健康状态检查以及LoadBalance主机和BackUP主机之间failover的实现。keepalived是一个类似于layer3, 4 7交换机制的软件，也就是我们平时说的第3层、第4层和第7层交换。本文主要介绍...

hadoop启动namenode失败

启动hadoop的namenode时，报错： ERRORorg apache. Hadoop. HDFS. Server. The namenode. The namenode: Java. Lang. IllegalArgumentException: Does not contain a valid host: port authority: HDFS: / / hadoop_forged: 9000 原因分析： 一般都是配置文...