比较Swift与HDFS话Ceph本质

         Ceph是一个支持大量小文件和随机读写的分布式文件系统,在维护 POSIX 兼容性的同时加入了复制和容错功能。目前Ceph已经被加到了Linux内核之中,虽然可能还不适用于生产环境。它也想实现统一存储的目标,即:

  • 对象系统,类似Swift, 这里是RADOS, Reliable Autonomic Distributed Object Store, 可靠的自主分布式对象存储。在每台host上都要运行OSD(Object Storage Daemon)进程,当然,如果已经用RAID, LVMbtrfxfs(最好别用ext4)将每台host上的硬盘都做成一个池了的话,运行一个OSD就可以了。OSD会默认创建三个池:data, metadaRBD 。同时,在每台host上还要运行MON (Monitor)进程。
  • 文件存储,类似Hadoop中的HDFS,但HDF…

详细内容

VMware与OpenStack之间爱恨交加的感情

【IT168 评论】VMware,在虚拟化基础架构领域处于全球领先地位,主要的业务包括帮助企业实现更灵活、高效的虚拟化服务器基础架构。简而言之,VMware就是是打造企业虚拟化服务器平台的厂商。

  当谈到云时,VMware的优势就没那么明显的地位了,而亚马逊(也许更重要的是OpenStack)才是该产业的巨头。OpenStack是一个旨在为公共及私有云的建设与管理提供软件的开源项目。它的社区拥有超过130家企业及1350位开发者,这些机构与个人都将OpenStack作为基础设施即服务资源的通用前端。OpenStack项目的首要任务是简化云的部署过程并为其带来良好的可扩展性。本文希望通过提供必要的指导信息,帮助大家利用OpenStack前端来设置及管理自己的公共云或私有云。

  过去几年里,为了迎合OpenStack,VMware在某些领域的定位都有了很大转变。但是在某些媒体眼…

详细内容

OpenStack Swift遇到了Erasure Code

摘要:降低成本永远是云计算的核心话题。而OpenStack Swift项目却并不支持广泛应用的Erasure Code算法,不过这一窘境随着SwiftStack的贡献而改变。SwiftStack CEO Joe Arnold分享了在Swift实现Erasure Code的原理。

【CSDN报道】在开始介绍Swift+Erasure Code之前,首先回顾下CSDN此前的 报道。南加州大学和Facebook共同完成的Erasure Code演进——LRC,通过增加本地存储容量,提升了平均无故障时间,并减少恢复数据的开销。

作为云计算的核心系统之一,存储系统直接影响了整个系统的成本。七牛云存储CEO许式伟表示:“我第一个云存储的讲座就已经讲了成本在云存储里面的重要性。实际上我更进一步说到要想在Erasure Code上更进一步只有成本转嫁,用p2p”。金山云CTO杨钢在近期接受CS…

详细内容

OpenStack Neutron FWaaS学习

     OpenStack的网络组件已经从Quantum更名为Neutron了。之前Quantum就有一个安全组的实现,它运行在每一个计算节点上,能够做到:

1)过滤进入到计算节点上虚机的流量

2)过滤从虚机出来的流量(nova-network并不能实现这一点)

3)过滤虚机之间的流量

        安全组的一般用法及实现框图如下:

$nova secgroup-create mygroup description

$nova secgroup-add-rule mygroup tcp 22 22 192.168.1.0/24

$nova boot –flavor 1 –image f16f1d2d-71d6-41b7-98a5-319f142d61f5–security_groups mygroup i1

 

zh1

         上述一个…

详细内容

OpenStack高可用之本地文件系统规划,Raid与LVM

OpenStack使用本地文件系统时的一种规划方案,对每一个计算节点来说:

1,硬盘1与硬盘2做一个Raid1,在上面划boot,root, swap分区。

2,硬盘3与硬盘4再做一个Raid1, 将它做为LVM的一个物理分区PP。

当然,究竟做什么级别的Raid需考虑实际硬盘个数情况和应用需求。

想到一个问题,用PXE的一些裸机工具自动安装操作时能自动创建Raid吗? 经google是可以做的,像dell的比如crowbar,具有:BIOS配置,RAID配置,网络搜寻,状态监控,性能数据收集,和报警. crowbar是开源了但不包括RAID配置功能,见:http://hi.baidu.com/chenshake/item/2343244d6cb66beea5c066f4, 不过,xCAT是支持的,见:http://sourceforge.net/apps/medi…

详细内容

一些开源的监控工具

什么东西可以监控OpenStack呢?OpenStack对监控的需求起码有以下这些:

 

  • 不仅要能监控物理机,也能监控虚机
  • 监控信息也必须是tenant隔离的
  • 监控项的收集应该是自动地
  • 监控工具应该一般化以监控任何设备
  • 监控工具必须提供API

下面是监控工具的一般架构:

 

zhjk

 

网上搜索了一下,现在主流的监控工具有:Nagios, cacti, Zabbix, Muni, Zenoss。我不是做运维的对这些工具都不熟,以前不熟,现在也不熟。下面是一些理解,不一定准。

Nagios,最老牌了,比较通用的监控工具。特大的特点是报警。图形化功能一般般。一般要安装Agent,配置起来看网上的说法是比较复杂的,没用过,没实际发言权。

cacti,图形化功能不错,所以Nagios一般结合它来使用。…

详细内容

华为发布基于OpenStack的FusionCloud虚拟化产品

摘要:FusionSphere是华为推出的云计算操作系统,它并不是简单的OpenStack发行版。华为借鉴了OpenStack的架构,保留了其开放性,倾注了大量的研发力量,提供了连接克隆、存储热迁移等高级功能,并将电信管理系统融入其中。

华为FusionCloud数据中心虚拟化解决方案 提升IT效率和创造客户价值。 数据中心虚拟化在服务器虚拟化的基础上,软件整合和抽象数据中心全部IT资源,构建数据中心虚拟化资源池,集中管理和统一调度,实现资源动态伸缩和业务的“弹”和“飘”。

企业期望的IT信息化建设需要具备的能力包括:弹性资源分配、高效节能、智能化运维、业务快速部署、服务简捷高效,并能够与上下游产业链紧密结合进行高效运营。这些新需求,只有通过全方位的融入云计算的理念、云计算技术和云计算运营模式才能实现。

华为公司依据强大的技术研发、产品与服务优势、深入骨髓的以客户为中心的…

详细内容

OpenStack Swift单节点部署手册

OpenStack Swift单节点部署手册

部署环境

  • VMware Workstation 9 (推荐版本,低版本亦可,只要能安装Ubuntu 12.04)
  • Ubuntu 12.04 Server 32 bit
  • OpenStack Swift v1.8 (Grizzly)

说明

  • 此文档为基于官方修改的只针对Ubuntu 12.04,完整的参阅官方文档
  • 本部署为开发环境,Swift配置为以root权限运行,生产环境推荐新建用户swift
  • 选择Ubuntu 12.04因其默认内核为3.5,减少部署时的麻烦
  • Ubuntu Server安装时不选其它组件,最小化安装
  • 以下安装命令全部以root身份运行

Ubuntu 更改为国内源(非必需):

sudo vi /etc/apt/sources.list
%s/cn.archive.ubunt...

详细内容

云计算2013年中回顾:趋势、观察与建议

      2013年已经过半,对于技术驱动和/或技术赋能的企业来说,是时候来对到目前为止的各种技术规划及其结果进行一番总结性评估,看看行业或业务领域哪些东西发生了改变;同时也可在今年余下的时间中对各种规划进行一番必要的调整。

  这里列出了一些可用来核查的趋势、观察以及建议,可帮助你评估各种规划,并可在今年余下的时间对各种规划进行调整。这些观察和建议都是基于实际场景的,是在与客户、合作伙伴、分析师以及行业领袖的沟通中获得的智慧结晶。

  1、云计算市场继续由先驱者如亚马逊和Salesforce.com等领头,微软、VMware、谷歌和IBM与所收购的SoftLayer一起也在积极拓展。其他厂商如Oracle、SAP、惠普、Rackspace、Terremark和NetSuite等也正在成为须认真对待的竞争者。

  2、云计算已成为大多数组织的关键性战略。从早期被视为技术…

详细内容

英特尔将延长定制处理器业务期限

摘要:英特尔同时也正向软件开发进行投资,以期将应用直接与芯片开发相结合。该公司已经发布了其自有Hadoop,它同时也积极地向OpenStack提供一个编排层(orchestration layer)以及资源能够在分布式计算环境中有效地被分配至服务器、存储空间以及网络层面上。

8月27日消息,据国外媒体报道,英特尔将极大的注意力都集中于扩大其定制处理器以及芯片业务上,旨在与企业在其机构内部建造服务器以满足特定的工作负荷或数据中心设计这一趋势日益增长相符合。

英特尔公司高级副总裁兼数据中心及互联系统事业部总经理柏安娜(Diane Bryant)表示:“英特尔去年为18家企业提供了定制处理器,最著名的为eBay和Facebook,这样的趋势正丰增长。”

柏安娜还表示,呈增长状况的定制处理器业务将对公司赖以谋生芯片业务的发展进行补充。服务器基建正随着云计算、大数据以及其他应用的普…

详细内容