和 OpenStack, OpenNebula 类似,CloudStack是另一款开源云计算平台。CloudStack 的前身是 Cloud.com 家的一款商业云计算产品(也有开源版本),2011年 Cloud.com 被 Citrix 收购,2012年的时候 Citrix 将收购的云平台 CloudStack 全部捐给了 Apache 基金会...
通常解决服务器负载问题,都会通过多服务器分载来解决。常见的解决方案有: 网站入口通过分站链接负载(天空软件站,华军软件园等) DNS轮询 F5物理设备 Nginx等轻量级架构 那我们看看Nginx是如何实现负载均衡的,Nginx的upstream目前支持以下几种方式的分配...
目前市场对于Linux人才的紧缺 如何利用Linux来完善自己的职业生涯?这个问题十分有趣,因为有两个截然不同的答案。第一个是你通过研究发现Linux无处不在,第二个你会发现你学习Linxu会变得更加含蓄。 越来越多的企业开始聘请Linux专家,并且这些Linux专家的待...
做为论坛站点:有两种类型的数据要处理: 1、结构化的数据:如:用户名、用户发表的评论等,这些可以存储在关系型数据库中: 2、非结构化的数据:如:用户上传的附件。则存储到文件系统中。 论坛的架构: 使用两台httpd服务器来服务用户的访问请求。使用DNS...
PS:近来有几个刚使用nginx的新童鞋老问我,nginx+fastcgi不够稳定,偶尔出现502错误,怎么解决?本人使用nginx也有3年多了,也认为php-fpm模块不够稳定,在访问量不大的时候没事,访问量增大时易出现502,当然这个还跟nginx的一些缓存设置和超时设置有关,...
PS:Nginx/LVS/HAProxy是目前使用最广泛的三种负载均衡软件,本人都在多个项目中实施过,参考了一些资料,结合自己的一些使用经验,总结一下。 一般对负载均衡的使用是随着网站规模的提升根据不同的阶段来使用不同的技术。具体的应用需求还得具体分析,如果...
在内外网隔离的环境下实现内外部邮件 服务器 的互通互发方案有多种,如两台 服务器 之间通过UUCP点对点通讯、通过服务器串口PPP通讯、通过双网卡堡垒主机软开关方式等。其最根本的要求在于系统运行 安全 、可靠、实用性强,另外还要自动化程度高,减少人工干...
作者 :许广斌 本文是《基于LINUX的集群系统》系列文章的第一篇。作者就集群系统这一概念进行了概述,介绍了集群系统的发展以及国内外主要的集群系统解决方案。 第一台计算机问世已经半个世纪了,在这期间计算机技术经历了五次更新换代。更新换代的标志主要有...
1.Lsf 如何管理各种各样的计算资源(如:CPU时间、内存空间、网络带宽、应用程序等)是许多企业当前都很头疼的问题。尤其是对于那些员工遍布全球的公司而言,如何充分利用有限的计算资源是非常关键的问题。由platform公司开发的lsf 多集群系统使多个异构的计算...
作者:许广斌 典型集群系统介绍之二 文是《基于Linux的集群系统》系列《典型集群系统分析》的第二篇,作者将继续向我们介绍几个最典型的集群系统。 3. Linux Virtual Server Linux虚拟 服务器 (Linux Virtual Server, LVS)建筑于实际的 服务器 集群之上,用...
作者:许广斌 典型系统小结及评测标准 在本系列的前面几篇文章中,作者为我们介绍了几个最典型的集群系统。在本篇中,作者将就典型的集群系统做一个小节,并提出对集群系统的评测标准。 1. 典型集群系统小结 典型的集群共有的特点是: 集群都是将普通PC 工作...
作者:许广斌 关键技术分析之 进程的放置和迁移 通过对本系列前面四篇文章的学习,您对于集群系统应该已经有了一个整体的认识。从本篇开始作者将对集群系统进行更深入的探讨。本篇作为《关键技术分析》的第一篇将向我们讲述进程放置和迁移的一些关键技术。 1....
作者:许广斌 关键技术分析之 高可用性 本篇是《关键技术分析》的第二篇,将为您讲述集群系统高可用性,主要包括集群管理器和节点的高可用性。 计算机系统的可靠性用平均无故障时间(MTTF)来度量,即计算机系统平均能够正常运行多长时间,才发生一次故障。系...
集群计算的发展需要发展并升级文件系统,此文件系统不仅能够对多个文件提供并行的访问,而且能在对同一文件进行访问的进程间提供cache一致性。大多数传统的网络文件系统如NFS、AFS、Coda对于并行处理而言是远远不够的,因为它们都依赖中心文件服务器。但是,...
作者:许广斌 实现过程之理论先导篇(1) 从本篇开始,作者将就集群系统中某些重要部分的具体实现进行讨论。本篇作为实现过程的理论先导篇,将向我们讲述TCP/IP的基本原理及其在LINUX上的实现。 1 OSI参考模型及TCP/IP参考模型 OSI模型(open system interconne...
在计算机硬件价格下降、计算机网络拓扑发展的情况下,分布式计算机系统给用户提供了一个丰富的资源集合。人们在研究分布式系统时,就注意到了这样一个问题:在一个由网络连接起来的多计算机环境中,在某一时刻,一些计算机的负载比较重,而另外一些计算机的...
近年来,Internet的发展步入黄金时期,网上信息交换的数量正在呈指数形式的增长。特别是,由于电子商务的蓬勃发展,人们已经预计在下一世纪,网上消费将成为日常生活的重要形式。 随着网络硬件设备的飞速进步,网络带宽的瓶颈效应日趋减弱,WEB服务器的性能...
Linux集群系统的实现(上) 篇是《基于 linux 的集群系统》的最后一篇。作者将向我们讲述一个Linux集群系统的具体实现过程。限于篇幅分为上、下两部分。 1. 设计目标 设计一个基于Linux的集群系统,它能够提供负载平衡的功能。系统能够不断监视集群中各台实...
Linux集群系统的实现(下) 本篇是《基于 linux 的集群系统》实现篇的下部分。将向我们讲述各个模块的具体设计和实现。 6 ip伪装模块的分析 6.1 设计思想 ip伪装模块的主要工作是: 1.接收内部网发向外部网的所有请求。 2.内部网中的连接请求通过平衡器转...
VRRP(如果有学习过TCP\IP,这一块很好理解): 虚拟路由器冗余协议(VRRP)是一种选择协议,它可以把一个虚拟路由器的责任动态分配到局域网上的 VRRP 路由器中的一台。控制虚拟路由器 IP 地址的 VRRP 路由器称为主路由器,它负责转发数据包到这些虚拟 IP 地...
一.软件介绍 (apache lighttpd nginx) 1. lighttpd Lighttpd 是一个具有非常低的内存开销, cpu 占用率低,效能好,以及丰富的模块等特点。 lighttpd 是众多 OpenSource 轻量级的 web server 中较为优秀的一个。支持 FastCGI, CGI, Auth, 输出压缩 (output...
意料之中,也是意料之外,Stack Overflow仍然重度使用着微软的产品。他们认为既然微软的基础设施可以满足需求,又足够便宜,那么没有什么理由去做根本上的改变。而在需要的地方,他们同样使用了Linux。究其根本,一切都是为了性能。 另一个值得关注的地方是...
负载均衡 (Load Balancing) 建立在现有网络结构之上,它提供了一种廉价有效透明的方法扩展网络设备和服务器的带宽、增加吞吐量、加强网络数据处理能力,同时能够提高网络的灵活性和可用性。目前使用最为广泛的负载均衡软件是Nginx、LVS、HAProxy,本文作者...
一安装LVS准备: 1、准备4台Centos 6.2 x86_64 注:本实验关闭 SELinux和IPtables防火墙。 管理IP地址 角色 备注 192.168.1.101 LVS主调度器(Master Director) 对外提供服务的VIP为192.168.1.180 192.168.1.114 LVS从调度器(Backup Director) 平时可以作...
问答社区网络StackExchange由100多个网站构成,其中包括了Alexa排名第54的StackOverflow。StackExchang有400万用户,每月5.6亿PV, 但只用25台服务器 ,并且CPU负荷并不高。它没有使用云计算,因为云计算可能会拖慢速度,更难优化和更难排除系统故障。StackO...
前段时间领导总是要看系统,但是系统总是频繁更新,为了避免更新系统的时候领导看不到东西,打算用ngix做代理,后台部署两个tomcat做负载均衡,避免更新一台就无法使用系统的问题,这两天看了写资料,把几个关键点记录在这里以便备忘。 环境:jdk,1.7,tomcat...
[plain] view plaincopyprint? (一)配置环境 1.1.硬件: 三台机器:ubuntu12.04-64server 1.2软件: jdk1.6.0_4564位 hadoop-1.0.3 1.3分工如下: node00:NameNode/JobTracker/SecondaryNameNode(这里最好用一台机来单独做SecondaryNameNode) node01:DataN...
原创博客,转载请注明: http://my.oschina.net/BreathL/blog/75112 最近做了一个项目,要求找出二度人脉的一些关系,就好似新浪微博的你可能感兴趣的人 中,间接关注推荐;简单描述:即你关注的人中有N个人同时都关注了 XXX 。 在程序的实现上,其实我们要...
Hadoop原本来自于谷歌一款名为MapReduce的编程模型包。谷歌的MapReduce框架可以把一个...
一、 Apache、Tomcat集群和负载均衡所需资源软件(附下载地址): a) apache_2.0.55-win...
不对的地方,欢迎大家拍砖。 现在有如下三台服务器: 10.57.22.201(做负载均衡配制)(...
一、试验拓扑 二、环境描述 负载均衡器: eth0 192.168.152.139 VIP : 192.168.152.2...