欢迎光临IT网Linux学习频道

当前位置: > Linux集群 >
  • [Ceph] Ceph 单/多节点 安装小结 Power by CentOS 6.x 日期:2016-07-14 15:07:45 点击:172 好评:0

    概述 Docs : http://docs.ceph.com/docs Ceph是一个分布式文件系统,在维持POSIX兼容性的同时加入了复制和容错功能。Ceph最大的特点是分布式的元数据服务器,通过CRUSH(Controlled Replication Under Scalable Hashing)这种拟算法来分配文件的location。Ce...

  • [Ceph] Ceph分布式存储系统 日期:2016-07-14 15:05:54 点击:142 好评:0

    Ceph是根据加州大学Santa Cruz分校的Sage Weil的博士论文所设计开发的新一代自由软件分布式文件系统,其设计目标是良好的可扩展性(PB级别以上)、高性能及高可靠性。Ceph其命名和UCSC(Ceph的诞生地)的吉祥物有关,这个吉祥物是Sammy,一个香蕉色的蛞蝓,就...

  • [Ceph] Ceph的安装过程 日期:2016-07-14 15:04:06 点击:83 好评:0

    前面一段时间公司要求找一个分布式软件,于是就看了下开源的ceph,在官网上http://ceph.com/download/下载了ceph-0.52.tar.gz源码包。 这儿记录了下自己安装的过程: 操作系统使用的是: CentOS-6.3-x86_64; 一、先安装一些编译常用工具,也是本次编译所需要...

  • [Ceph] 如何在 CentOS 7.0 上配置 Ceph 存储 日期:2016-07-14 14:59:38 点击:101 好评:0

    Ceph 是一个将数据存储在单一分布式计算机集群上的开源软件平台。当你计划构建一个云时,你首先需要决定如何实现你的存储。开源的 Ceph 是红帽原生技术之一,它基于称为 RADOS 的对象存储系统,用一组网关 API 表示块、文件、和对象模式中的数据。由于它自身...

  • [Ceph] Ceph文件系统安装步骤 日期:2016-07-14 14:49:04 点击:54 好评:0

    创建用户: # sudo useradd -d /home/ ceph -s /bin/bash [-m] ceph # passwd ceph /// 密码设为: ceph # vim/etc/sudoers 添加: ceph ALL=( ALL) ALL Linux实现SSH无密码登录 参见http://blog.csdn.net/whucs_b701/article/details/7422470 1. 环境配置:...

  • [服务器集群] 如何分分钟创建Linux虚拟集群? 日期:2016-06-11 23:19:46 点击:107 好评:0

    设置虚拟集群可能是一个复杂、耗时的过程,因此起步的最佳方式是从细微处着手。 首先需要有两个Red Hat Enterprise linux或CentOS 7节点,并配置正确的转发及反向域名系统,由于Red Hat 6及7之间有些变化,显著降低了集群管理的复杂度。 集群设置主要依靠两...

  • [Hadoop] 使用配置Hadoop中常用的Linux(Ubuntu)命令 日期:2016-06-11 21:41:07 点击:61 好评:0

    使用配置Hadoop中常用的linux(Ubuntu)命令 生成key: $ ssh-keygen -t dsa -P -f ~/.ssh/id_dsa $ cat ~/.ssh/id_dsa.pub ~/.ssh/authorized_keys -t 密钥类型可以用 -t 选项指定。如果没有指定则默认生成用于SSH-2的RSA密钥。 -f filename 指定密钥文件名。...

  • [Hadoop] Hadoop在Map阶段获取当前split的文件名 日期:2016-06-10 01:25:30 点击:141 好评:0

    在mapper处理阶段中有时候我们需要获取当前正在处理的HDFS文件名/HDFS目录名,其实我们可以通过 Context 来获取相关参数,代码类似如下: 1 2 3 4 5 FileSplit fileSplit = (FileSplit) context.getInputSplit(); System.out.println(======== getPath.getNa...

  • [Hadoop] hadoop多硬盘配置注意点 日期:2016-06-10 01:24:26 点击:86 好评:0

    [一]、实验环境 1.1、环境 hadoop 2.6.0 namenode 2个 各增加 2个1T硬盘 datanode 3个 各增加3个1T硬盘 1.2、挂载硬盘 fdisk 分区 (输入mnp1回车回车pw) mkfs 格式化硬盘 ( mkfs.ext4 ) mount 挂载硬盘 (以挂载目录为 /bigdata/data0 /bigdata/data1 . /bigd...

  • [Hadoop] Hadoop修改配置PID文件路径 日期:2016-06-10 01:20:22 点击:154 好评:0

    [一]、 概述 Hadoop启动后的PID文件默认配置是保存在 /tmp 目录下的,而linux下 /tmp 目录会定时清理,所以在集群运行一段时间后如果在停Hadoop相关服务是会出现类似:no datanode to stop 的错误提示,一般生产环境中我们需要重新修改PID的保存路径。 [二]、...

  • 首页
  • 上一页
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 下一页
  • 末页
  • 80795
栏目列表
推荐内容