Ubuntu 12.10 +Hadoop 1.2.1版本集群配置

一、引言 Hadoop是一种分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序，充分利用集群的威力高速运算和存储。Hadoop 1.2.1版本下载地址： http://apache.dataguru.cn/hadoop/common/hadoop-1.2.1/ 二、准...

CentOS 6.4下CDH4集群安装

官网地址：http://www.cloudera.com/content/cloudera-content/cloudera-docs/CDH4/latest/CDH4-Installation-Guide/CDH4-Installation-Guide.html 一、系统准备工作 1.确定操作系统是否为CDH4所支持 我们安装的操作系统为CentOS6.4，符合CDH4的要求 2.安装J...

百万级PHP网站架构工具箱

在了解过世界最大的PHP站点，Facebook的后台技术后，今天我们来了解一个百万级PHP站点的网站架构：Poppen.de。 Poppen.de是德国的一个社交网站，相对Facebook、Flickr来说是一个很小的网站，但它有一个很好的架构，融合了很多技术，如 Nigix、MySql、CouchDB...

如何整合Hadoop为 移动所用

为了满足移动应用开发的需求，现有的Hadoop应用程序应该得到充分利用。 根据CIMI公司最新的一项研究调查显示，企业考虑支持把加强移动办公人员移动性和生产效率的新型应用程序作为最高优先级来开发。这意味着大多数公司已经采用或者正在采用， Hadoop框架很...

如何使用phpIPAM来管理IP地址和子网

通常，网络或系统管理员有责任来管理其所管理的网络下的一个或多个子网。例如，当一个网段分配了/24子网，那么该子网就有254个IP地址可以用于不同用途。要跟踪某个IP被分配到了哪个主机，就需要通过某种方式记录下来。最简单的方法，就是使用一个电子表格，...

Hadoop分布式环境搭建总结(非生产：Rat Hat Linux 6.4 + Hadoop_

一．环境准备 1.VMware workstation 9 2. Red Hat linux 6.4版本32bit 3.JDK版本jdk-7u45-linux-i586 4. Hadoop jar包1.2.1版本32位 5.远程登录及ftp工具(自选) 备注： hadoop安装包下载下载地址：hadoop.apache.org 目前最新版本已经更新到2.2.0发布版本 二...

用kangle部署多节点CDN

满意的用户体验是网站吸引和留住用户的必备条件。据统计，如果等待网页打开的时间超过8秒，将会有超过30%的用户放弃等待，造成严重的用户流失，降低了用户的体验度和忠诚度。特别是大型网站内容涉及面多，涵盖文字、图片、视频、音频等，更新的实时性要求高，...

CentOS 6.2及最新操作系统部署Hadoop的注意事项

最近新采购的一批机器，由于intel cpu体系架构的改变，新机器的系统需要升级，选择了CentOS6.2系统。 1 在新机器上将MR业务开启后，导致整个集群都反应很慢，运行的job几乎都被卡住；通过ganglia监控发现，机器的system cpu超过30%，机器几乎是满负载的情况...

在 Linux/UNIX 终端下使用 nload 实时监控网络流量和带宽使用

如果你想在命令行界面监控网络吞吐量，nload 应用程序是个不错的选择。它是一个实时监控网络流量和带宽使用的控制台应用程序，使用两个图表可视化地展示接收和发送的流量，并提供诸如数据交换总量、最小/最大网络带宽使用量等附加信息。 安装 在 CentOS/RHEL...

mysql主从备份

一、系统环境： Centos5.5 主机（MASTER）：192.168.0.10 从机（SLAVE）： 192.168.0.20 在slave上yum安装Mysql #yum install -y mysql mysql-server 不要开启mysql服务，将master上的/etc/my.cnf文件内容复制slave上的/etc目录下 #rm -rf /var/lib/mysql -R...