java自学网VIP

Java自学网

 找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 2363|回复: 0

《大规模分布式存储系统》第12章 云存储【12.4】

[复制链接]
  • TA的每日心情
    开心
    2021-5-25 00:00
  • 签到天数: 1917 天

    [LV.Master]出神入化

    2025

    主题

    3683

    帖子

    6万

    积分

    管理员

    Rank: 9Rank: 9Rank: 9

    积分
    66153

    宣传达人突出贡献优秀版主荣誉管理论坛元老

    发表于 2017-3-16 16:09:04 | 显示全部楼层 |阅读模式
    12.4 云存储的核心优势, `6 R# e" y3 g
    作为云计算的存储部分,云存储的核心优势与云计算相同。主要包括两个方  I9 g1 U/ s9 `0 Z+ w3 X, k
    面:最大程度地节省成本以及加快创新速度。
    , o" Y) v3 T: u: J0 v2 p+ `全球企业IT开销,分为三个部分:硬件开销、能耗以及管理成本。其中硬件开5 P0 ~0 q5 o  v2 `( N
    销包括存储、计算服务器以及网络带宽成本。由于摩尔定律的作用,硬件成本越来
    ) x5 N1 u: A' O( A越低,而能耗以及管理成本所占比例相应地变得越来越高了。  V" K7 E* A2 n* Z# U1 Y
    根据James Hamilton的数据,一个拥有5万个服务器的特大型数据中心与拥有1000
    - h8 L; \3 Q( L# T% q. r个服务器的中型数据中心相比,特大型数据中心的网络和存储成本只相当于中型数$ g: W& Q" u9 a& [) q/ T* `
    据中心的1/5或者1/7,而每个管理员能够管理的服务器数量则扩大到7倍之多。因4 S, i9 N5 T4 @2 N- X8 M
    而,对于规模达到几十万至上百万计算机的云存储平台而言,其网络、存储和管理: B) j0 r5 k9 {( Z7 c' g8 D
    成本较之中型数据中心至少可以降低5~7倍,如表12-1所示。
    ( d; m4 X3 v4 g% e; v( H- h电力和制冷成本也会有明显的差别。例如,美国爱达荷州的电力资源丰富,电. h% d7 y+ p+ w" }9 W' n/ d
    价很便宜。而夏威夷是岛屿,本地没有电力资源,电力价格就比较贵,二者相差5' V( c3 c) L4 o4 S5 M: w4 f$ U: z& f
    倍,如表12-2所示。0 f/ g. ], U$ D4 T$ _
    PUE(Power Usage Effectiveness,能源使用效率)用来衡量数据中心的能源效1 I) U* x: A  R  u
    率,等于数据中心所有设备能耗(包括IT电源,冷却等设备)/IT设备能耗。PUE是
    2 X- \3 E0 R+ e一个比率,基准是2,越接近1表明能效水平越好。国内很多中型数据中心的PUE值大' }) w8 ~9 E5 j4 V5 w6 q, Z
    于2,也就是说,一半以上的能源被白白浪费掉,而特大型数据中心,比如Facebook
    0 ?( y5 P9 q: n8 B' t' p某太阳能供电数据中心的PUE值为1.07,几乎没有额外的能源损耗。
    & y, D  P2 k- m* i+ G* c! T, y云存储的规模效应能够大大地降低IT成本。当然,我们国家的情况有些特殊,% i, v& @3 B/ N8 X, S
    比如电价全国统一,人力成本相对较低,运营商垄断导致网络带宽成本偏高,自建# X) n4 ^8 m& Z/ |) }
    数据中心也有各种政策因素,云存储带来的成本优势虽比不上美国但仍然是巨大0 Y* @  j$ C% q' ]% H
    的。
    3 c, w9 ?6 f3 E. R. b1 K1 D再者,云存储与传统存储相比,资源的利用率也有很大的不同。传统存储对资$ ?1 C2 n  x4 y2 i% A7 B% Z  B) ]
    源的利用率非常低,对存储资源的分配通常是静态的,即参考用户的估计值对存储, M' M, w% n0 X. e: O' L
    设备划分成分区或卷,以分区或卷为单位将存储资源分配给用户,相应的网络和
    , U$ E( R5 v. O* }CPU资源也是固定的。然而,绝大多数网站的访问流量都不是均衡的,例如,有的
    : s- [" y& x. @; C5 T" Q网站时间性很强,白天访问的人少,到了晚上8点到10点就会流量暴涨,典型的例子
    - C; G1 C5 q" N是电子商务网站;有的网站季节性很强,平时访问人不多,但是到国庆节,春节的
    7 h- {( H& a/ N6 V访问量就很大,典型的例子是铁道部火车票预订网站;有的网站突发性很强,典型# X9 A# a4 S& r! H
    的例子是微博开放平台上的外部应用。网站拥有者为了应对这些突发流量,需要按( L! b. \! R7 U. P/ M6 C
    照峰值要求来购买服务器和网络带宽,造成资源的平均利用率很低。例如,淘宝网
    0 z: _" O$ Y* a9 n' \1 E6 ]在2011年11月11日“双11”促销活动时CDN流量最高达到820G,是平常的很多倍。云/ W% ^2 _" }& F9 x/ h
    存储通过共享的方式提供弹性的服务,它根据每个租用者的需要在一个超大的资源
    2 E/ _+ M6 \/ d) u# i! `池中动态分配和释放资源,而不需要为每个租用者预留峰值资源。由于云存储的规$ q  v7 m2 L# h8 ^+ E# |
    模极大,其租用者数量非常多,支撑的应用种类也是五花八门,通过这种错峰效0 j8 Z/ H# q' C! l
    应,资源利用率可以达到80%左右,是传统模式的5~7倍。
    / O" N$ [! q0 |: [/ s# c7 G综上所述,由于云存储更低的硬件成本和网络成本,更低管理成本和电力成
    6 X" w" r4 s7 ]( x: [本,以及更高的资源利用率,Google,Amazon,Microsoft等互联网巨头能够通过从数据7 e/ N6 u/ R! b
    中心开始构建整套公有云存储解决方案达到节省30倍以上成本的目的。
    7 P2 ]( W' s' _. E. F在我国,由于政府政策及技术实力等问题,大多数企业不可能从头开始构建完2 o; V% j9 X9 ?9 H
    整的云存储方案,然而,当企业发展到一定的规模后,仍然可以通过云存储技术降/ m8 c9 e6 v+ w2 u' n1 O- B
    低成本,原因如下:
    0 v% |3 Y; V! b; O9 m6 k4 P●由于云存储技术的容错能力很强,使得我们可以使用低端硬件替代高端硬件,
    4 j5 X2 R$ a6 D6 f8 @$ }7 [如采用普通PC服务器替代EMC高端存储以及IBM小型机。另外,可以通过对云存储
    ) F% [2 i5 C1 Z: a: I系统不断的优化来降低硬件成本和能耗。+ Z/ n3 V, C4 `# l# z
    ●在保证服务质量的前提下,通过云存储调度技术将用户的请求调度到网络带宽
    # A* ?- I0 J2 Q  b% ?' o费用较低的数据中心,从而降低整体网络带宽成本。& b1 k: h2 ]8 U* Y8 r: Q# ~4 t. n3 @
    ●云存储技术的管理时高度自动化的,极少需要人工干预,可以大大降低管理成
    6 c" t3 C, i# C& T8 G$ q本。
    # P) [& }# Y) K●云存储技术的核心理念是多租户共享,多个业务共享相同的资源池,每个业务8 J6 g) k! @$ y; z$ i) @" C
    动态分配和释放资源,提高资源利用率。) t  G% ~3 N1 Z, y; M) h4 j
    云存储的另外一个核心优势就是加快创新速度。云存储通过提供海量的数据存
    / Q) k; C( {  g储和处理能力,使得用户不必关心底层基础设施的可扩展性,突发流量处理等复杂4 T5 t0 u! {% ]) u$ h( D
    的系统架构问题,将有限的精力集中在最核心的创新业务上,使得创新想法很快得2 P! b( c: R1 M
    到实现,大大地提高了创新速度。由于云平台的存在,加上移动互联网的重大机5 R& |- k- \- Y/ w% A/ G$ C  I
    遇,大量创业公司得以迅速兴起,许多美国当前热门公司,例如Pinterest、
    2 i: }' K, k- JDropbox、Instagram、Reddit、Zynga,都构架在Amazon的云平台(Amazon Web
    . Q! Q) U% H' u1 Z  `$ XService,AWS)之上。比如,2012年4月以10亿美元(因为大部分是股票,实际价值1 q9 E; x" b; J- r
    可能更高)被Facebook收购的Instgram,其技术方案大量采用AWS(主机选择Amazon" I4 n- N  C' |& q) o" w
    EC2,图片数据库采用Amazon S3,CDN选用Amazon CloudFront等)。所以虽然& a4 j# f: g2 |2 C
    Instgram只有13名员工(工程团队仅3人),却构建了最强大的移动端图片分享平
    * ~, Z1 d0 {6 ~' q& t/ f& g8 f1 h3 t台,甚至让Facebook感到了威胁。3 ?& A4 ?: v! D% \" ]6 l
    今天,一个普通的技术人员可以短时间内借助云存储平台,拥有和巨人对手们
    8 e" ^, S/ b& c: ?& W' P* r' v相同的计算资源,实现梦想,这才是云存储平台的真正价值所在。我们需要共同为' ~: |7 L  z) t- h3 }3 ]" ?  {
    之努力。7 g9 A3 v* b8 Z/ S8 E/ l& h
    4 m* W3 r9 U8 `+ B/ c, m7 b1 p

    0 `. I- ^+ y. h. z
    回复

    使用道具 举报

    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    QQ|Archiver|手机版|小黑屋|Java自学网

    GMT+8, 2024-6-17 17:48 , Processed in 0.100050 second(s), 31 queries .

    Powered by Javazx

    Copyright © 2012-2022, Javazx Cloud.

    快速回复 返回顶部 返回列表