Hadoop伪分布安装过程：Hadoop单机环境搭建指南（ubuntu）

下载hadoop hadoop下载地址： http://www.apache.org/dyn/closer.cgi/hadoop/core/ 这里下载的版本是1.0.3 $ mkdir hadoop $ wgethttp://www.fayea.com/apache-mirr ... hadoop-1.0.3.tar.gz. 安装java 首先用java -version查看是否已安装，如果显示类似于ja...

hadoop2.2完全分布式最新高可靠安装文档

问题导读： 1.如何配置各个节点之间无密码互通？ 2.启动hadoop，看不到进程的原因是什么？ 3.配置hadoop的步骤是什么？ 4.有哪些配置文件需要修改？ 5.如果没有配置文件，该如何找到该配置文件？ 6.环境变量配置了，但是不生效的原因是什么？ 7.如何查看hado...

Nikita Ivanov谈GridGain的Hadoop内存片内加速技术

GridGain最近在2014年的Spark峰会上发布了Hadoop内存片内加速技术，可以为Hadoop应用带来内存片内计算的相关收益。 该技术包括两个单元：和Hadoop HDFS兼容的内存片内文件系统，以及为内存片内处理而优化的MapReduce实现。这两个单元对基于磁盘的HDFS和传统...

这12件事让我很讨厌Hadoop

文章作者Andrew C. Oliver是一位专业的软件顾问，同时还是北卡罗来纳州达勒姆大数据咨询公司Open Software Integrators的总裁和创始人。长时间的使用Hadoop，他发现了这12件事情真的影响了Hadoop的易用性。 Hadoop是一个很神奇的创造，但它发展过快而表现出一...

利用Squid反向代理搭建CDN缓存服务器加快Web访问速度

案例： Web服务器：域名www.abc.comIP：192.168.21.129 电信单线路接入 访问用户：电信宽带用户、移动宽带用户 出现问题：电信用户打开www.abc.com正常，移动用户打开www.abc.com很慢，甚至打不开 解决方案：在移动机房放置一台CDN代理服务器，通过智能DNS解...

万台规模下的SDN控制器集群部署实践

本文根据华三通信研发副总裁王飓在2014年QCon上海的主题演讲《SDN控制器集群中的分布式技术实践》整理而成。 目前在网络世界里，云计算、虚拟化、SDN、NFV这些话题都非常热。今天借这个机会我跟大家一起来一场SDN的深度之旅，从概念一直到实践一直到一些具体...

12306：分布式内存数据技术为查询提速75倍

背景和需求 中国铁路客户服务中心网站(www.12306.cn)是世界规模最大的实时交易系统之一，媲美Amazon.com，节假日尤其是春节的访问高峰，网站压力巨大。据统计， 在2012年初的春运高峰期间，每天有2000万人访问该网站，日点击量最高达到14亿。大量同时涌入的...

HAProxy 1.5.6 发布

4,7层负载均衡软件Haproxy 1.5.6发布。 2014-10-19 上个版本是2014-10-09的1.5.5. Very few fixes this time, 1.5.6 fixes the annoying bug reported this week about disabled proxies, an issue in the URI hash (the question mark of a query string wa...

Memcached 1.4.21 发布，集中式缓存系统

内存缓存 Memcached 1.4.21 发布。2014-10-13 上一个版本是2014-05-12的1.4.20 此版本做了makefile文件清理以及修正了可能导致崩溃OOM的错误。 下载： http://www.memcached.org/files/memcached-1.4.21.tar.gz 更多内容请看发行说明。 memcached是一套分布...

超越 Hadoop，Luigi 打通云端大数据管道

Liugi数据管线的可视化管理图 新的大数据开源技术和工具往往来自互联网公司，除了Facebook、Google和Twitter这样的巨头外，一些甚至是你想不到的互联网公司，例如Netflix和Spotify（音乐流媒体服务）也会贡献一些优秀的大数据分析开源工具（Suro和Luigi）。...