摘要:OpenStack更新频繁,导致采用企业为避免升级后预期外的错误而却步,但日本雅虎却透过资料中心分区升级的策略,反而能够积极采用新版,甚至在正式版释出前,从Beta 2版本就会开始导入,先用于维运团队的内部测试。

日本雅虎用 OpenStack 打造5万台VM管理术-速客网

对全日本网站流量第一的日本雅虎而言,满足每月650亿次的网页浏览量不是太大的问题,更大的困难是瞬间3倍爆量的考验。日本雅虎网络营运总部基础建设技术分部部长伊藤拓矢说,曾观察到日本发生地震后,在数十秒内,日本雅虎资料中心的网络流量瞬间暴增为平时尖峰的3倍,如何事先打造出一套可以应付这种瞬间爆量的基础架构,正是伊藤拓矢的任务。

通过资料中心抽象化,提供内部稳定服务

因为日本雅虎除了网站服务外,也提供了不少天气预报或防灾情报的行动App,每当遇到地震,许多民众会透过这类App来查询最新的地震、海啸等资讯而导致网站流量暴增。而这些都是攸关人身安全的服务,即使系统处于高负荷的状态下,仍然要确保稳定提供服务,伊藤拓矢表示,关键作法就是必须将整座资料中心的资源抽象化。

日本雅虎起初自行开发了一套IaaS平台来调度内部服务所需的运算资源,可提供超过1万台虚拟机器的规模。但因采用了自行开发的专属API,很难结合开源软体社群的资源。

因此,在2013年时,日本雅虎决定改导入OpenStack来打造内部IaaS平台。过去一年来,日本雅虎OpenStack丛集的规模也成长了1倍,部署用的实体机器从2,000台增加到4,000台,可提供的虚拟机器数量也从2.5万个增加到了5万个。由于OpenStack软体上的效能改进,单柜伺服器所能执行的虚拟机器,也从400个提高到单柜2,000个。伊藤拓矢表示,目前1柜OpenStack丛集,抵得上过去6柜采裸机部署的机柜。

日本雅虎目前部署了超过20个OpenStack丛集,总储存容量达20PB,可用性能达到99.996%。日本雅虎还建立了一个10人规模的OpenStack维运团队,其中6名开发者和4名维运人员。为了管理大量OpenStack丛集,甚至还自制了一套小型整合管理平台。

伊藤拓矢表示,透过OpenStack建立了一个自助式的资料中心资源使用平台,来提供2千名雅虎员工使用,让OpenStack团队专注于处理突发事件。开发者随时都可以取得自行申请虚拟机器,最近甚至连非开发人员,如分析人员和营业人员都会用。

不需要透过工程师协助,这套系统平均每天会自动建立500个新的虚拟机器,不过,其中半数虚拟机器用不满一个月就会移除。

他说,这套日本雅虎5万个虚拟机器的新IaaS平台,直接使用了庞大社群所开发的OpenStack来提供基础功能,不用像过去得自​​行开发介接各种虚拟化技术的特殊API。而Appliance层级的功能则与第三方厂商共同开发,只有内部特殊需求的专属功能才由雅虎开发人员自制,如内部签核流程或是公司法的特殊需求。

伊藤拓矢表示,使用OpenStack的好处是,可以使用一套统一的API,来管理多种虚拟化平台,甚至能管理Container。更重要的是能将资料中心的硬体抽象化,使用者不再需要为了效能调校而费心研究所用的硬体设备,而是可以专注于开发服务。

不过,他提醒,使用OpenStack建立虚拟机器要有用完即丢的概念。以日本雅虎为例,导入OpenStack时要克服的最大问题,反而是要求开发人员抛掉过去执行程式的习惯,不是要想办法调校出一个能够永久使用的系统环境,而是要懂得善用替换成本很低的虚拟机器。 「每次建立新的虚拟机器就是一个全新的执行环境,使用完毕后就删除,需要的时候再重新建立。」他说。

这个用完即丢的思维也有助于降低成本。伊藤拓矢表示,以现在日本雅虎使用的运算资源来说,用OpenStack自建私有云,比起使用公有云服务减少了97%的成本。但是服务取得越方便,也越容易造成浪费,因此,雅虎会透过OpenStack的帐务机制来计算使用者所使用虚拟机器的时数,来教育使用者要具备成本意识, 养成虚拟机器不用时就释出的习惯。

丛集版本不用更新,直接砍掉重练

OpenStack更新频繁,1年中改版2次的快节奏,让不少采用的企业直呼吃不消,甚至干脆选择不更新,而日本雅虎以资料中心生命周期管理版本,也同样借镜用完即丢的思维,来解决这个困扰许多企业的问题。

日本雅虎在资料中心内,同时部署了4种版本的OpenStack丛集,每一个版本各所提供的虚拟机器数量约各占总量的四分之一。当OpenStack要推出新版时,他们会有计画地全部移除最旧版本丛集上的虚拟机器,再重新安装最新版本,因此一个OpenStack版本在日本雅虎资料中心的寿命大约是两年。

伊藤拓矢解释,例如他们原先在资料中心部署了Havana、Icehouse、Kilo以及Juno等4种版本的丛集,等到Havana版丛集上的虚拟机器都关闭后,再将该丛集的软体重新安装为还未发表正式版的Liberty版本。

不仅不担心OpenStack快速改版的步调,伊藤拓矢甚至非常肯定OpenStack的改版作法,「有新版本,才有新功能可用。」他说。透过资料中心分区升级的策略,日本雅虎也能积极采用新版,甚至在正式版释出前,从Beta 2版本就会开始导入,先用于维运团队的内部测试。例如,伊藤拓矢已经开始试用今年10月才会正式发布的Liberty版本,他个人最推荐的新功能是共享档案系统服务Manila,由于日本雅虎近期有类似储存服务的计画,这个套件则符合日本雅虎的需求。

日本雅虎用 OpenStack 打造5万台VM管理术-速客网

日本雅虎采资料中心生命周期管理策略,采分区分版安装的作法,来进行OpenStack丛集的版本控管,资料中心伺服器分成4区,各安装不同版本的OpenStack,要导入新版时,直接将最旧版本丛集内所有伺服器整批直接改装新版本。

(图片来源/日本雅虎)

Via iThome(李建兴)

历史上的今天:

  1. 2017:  二十出头的你看不清未来?五百强CEO告诉你路在何方!(0)
  2. 2014:  玛丽莎·梅耶尔的真相时刻(1)
  3. 2013:  专访刘元:雅虎的监控平台与故障告警那些事儿(2)
  4. 2013:  雅虎为全球移动互联网用户带来了更新体验(2)
  5. 2013:  雅虎CEO梅耶尔的另一面:开会迟到成习惯(2)