京东架构师“强娃”对CloudFoundry的架构优化
本人作为京东云擎(JAE)的架构师,在从事云平台特别是PASS平台的架构、开发多年,有一些体会以及一些解决方案。下面,我想对开源PaaS框架CloudFoundry的一个NATS单节点的问题发表一下个人看法
AD:
本人作为京东云擎(JAE)的架构师,在从事云平台特别是PASS平台的架构、开发多年,有一些体会以及一些解决方案。下面,我想对开源PaaS框架CloudFoundry的一个NATS单节点的问题发表一下个人看法。目前京东云擎也是基于这种方案来实现,大大减小了NATS 单节点的风险问题,避免了单个NATS节点挂掉而导致整个云擎无法运行的情况发生,从而提高云擎的高可靠性。
为了避免有宣传个人之嫌疑,希望小编屏蔽自己的名字,改用本人之 艺名 --- 强娃。
一、概述
云擎是基于CloudFoundry(后文统一使用CF作为简称)开源系统进行二次开发的,我们利用CF开源系统的基本框架,然后整合了京东自己的各个云服务产品,并且根据需求开发了智能路由、弹性伸缩、智能启动和资源隔离等扩展功能。
CF开源系统作为一个通用的PaaS平台解决方案,很好的满足了大部分基本需求,但是要打造一个高可靠的PaaS平台,还需要做很多架构容错和改进。
CF由很多组件构成,有一些核心组件是必不可少的,还有很多可选组件可以根据需求选择性使用。其中NATS、Router和Cloudontroller三个组件更是整个CF的最关键的组件,其中任何一个组件不可用都会导致整个PaaS平台不可用,所以这三个组件的容错显得更加重要。 Router的容错可以VIP实现,Cloudontroller本身通过Router的软域名映射进行容错。NATS作为整个CF各个组件的连接枢纽,一旦不可用所有CF组件都出问题,所以NATS的重要性不言而喻,但是目前业界普遍使用单实例。虽然NATS的稳定性不容置疑,但是不能解决由于网络、服务器硬件故障和操作系统故障导致玛瑙 mnwg.net的不可用,特别是由于服务器不可用导致的故障,恢复成本很高,时间也是很长的。开源的NATS组件也有集群版本,但是普遍反映不够稳定,都没有在生产环境使用。本人表达一下对NATS升级改造的一点看法。
二、NATS集群化方案设计
为了提高京东云擎的可靠性,京东云擎团队基于GO语言版本的NATS设计并实现了NATS的集群化方案,这个方案在预发布环境运行了一个月,现在也正式上线,表现都非常稳定。下面就对我们的NATS集群化方案和实现进行阐述。
首先看看NATS集群化方案的架构图,如下:

zookeeper进行心跳存活的管理,这样可以保证所有NATSNATS服务器节点都是存活的;NATS
这个NATS集群化方案有如下优点:
(1)方便的横向扩展,随时上线下线NATS服务器节点;
(2)通过zookeeper管理NATS服务器节点的存活,保证了客户端得到的NATS服务器实例都是可用的;
(3)通过最多两次的消息转发,极大的提高了消息转发的性能。
三、NATS集群化方案实现
NATS集群化实现的难点主要在于怎样保证消息的订阅与发布能够在各个NATS节点之间进行同步。下面分别从NATS服务器节点启动、订阅消息、发布消息和NATS客户端改进等方面说明NATS集群化方案的实现。
1. NATS服务器节点启动
为了保证各个NATS服务器节点订阅信息的同步,启动一个NATS服务器节点的时候需要判断
深度剖析CloudFoundry的架构设计_计算机软件及应用_IT/计算机_专业资料。cloud ... 百度认证SEM02关键词优化... 1/2 相关文档推荐 架构设计 38页 1下载券 ...
2012云架构师峰会--淡成-Cloud Foundry PaaS平台对软件开发的影响_计算机软件...为MTTR优化,而不是MTBF ? 消息驱动,组件松耦合 ? 组件间动态发现,无依赖性 ...
cloudfoundry试用笔记_计算机硬件及网络_IT/计算机_专业资料。cloudfoundry 试用笔记从 http://rubyforge.org/frs/?group_id=167&release_id=4633 下载最新的 ...
cloudFoundry源码学习_计算机软件及应用_IT/计算机_专业资料。cloudFoundry相关组件源码说明与解析,cloud foundry 之 vmc 代码解读 vmc 其实是使用 ruby 来实现的一...
1 注册,申请账号密码(http://www.cloudfoundry.com/),该步 骤需要等待 cloudfoundry 发送的邮件(据说至少一天),将会以你申 请的邮箱为账号,创建账号,密码在给...
CloudFoundry_互联网_IT/计算机_专业资料。Cloud Foundry & Cloud on a Stick Greg Zimmer Cloud Foundry ? Open Platform as a Service project – ...
Cloud Foundry分布式架构概述_互联网_IT/计算机_专业资料。#LAMP人# Cloud Foundry分布式架构概述Cloud Foundry 开源云计算平台架构剖析张轩宁 Henry Zhang VMWare 云...
部署基于 Spring 与数据库的应用到 CloudFoundry 将 Spring 应用部署到 CloudFoundry.com 很简单,就像 SpringSource 网站说的那样在注册 申请到 Cloud Foundry beta ...
扩展Cloudfoundry_计算机软件及应用_IT/计算机_专业资料。Scaling Cloud Foundry ? ? Scaling Platform Capacity o Tradeoffs and benefits Scaling Platform Avail...
基于CloudFoundry的私有云平台构建方案_互联网_IT/计算机_专业资料。基于CloudFoundry的私有云平台构建方案基于CloudFoundry的私有云平台 内容背景与目标 实践与改造(...
热门文档