从MySpace基于.NET平台的六次重构经历,来感受分布式系统。
可以说是立竿见影, MySpace马上就发现ASP.NET程序运行更有效率,与ColdFusion相比,完成同样任务需消耗的处理器能力更小。据技术总监Whitcomb说,新代码需要150台服务器完成的工作,如果用ColdFusion则需要246台。Benedetto还指出,性能上升的另一个原因可能是在变换软件平台,并用新语言重写代码的过程中,程序员复审并优化了一些功能流程。
最终,MySpace开始大规模迁移到ASP.NET。即便剩余的少部分ColdFusion代码,也从Cold-Fusion服务器搬到了ASP.NET,因为他们得到了BlueDragon.NET(乔治亚州阿尔法利塔New Atlanta Communications公司的产品,它能将ColdFusion代码自动重新编译到Microsoft平台)的帮助。
账户达到1千万时,MySpace再次遭遇存储瓶颈问题。SAN的引入解决了早期一些性能问题,但站点目前的要求已经开始周期性超越SAN的I/O容量——即它从磁盘存储系统读写数据的极限速度。
原因之一是每数据库1百万账户的分割策略,通常情况下的确可以将压力均分到各台服务器,但现实并非一成不变。比如第七台账户数据库上线后,仅仅7天就被塞满了,主要原因是佛罗里达一个乐队的歌迷疯狂注册。
某个数据库可能因为任何原因,在任何时候遭遇主要负荷,这时,SAN中绑定到该数据库的磁盘存储设备簇就可能过载。"SAN让磁盘I/O能力大幅提升了,但将它们绑定到特定数据库的做法是错误的。"Benedetto说。
最初,MySpace通过定期重新分配SAN中数据,以让其更为均衡的方法基本解决了这个问题,但这是一个人工过程,"大概需要两个人全职工作。"Benedetto说。
长期解决方案是迁移到虚拟存储体系上,这样,整个SAN被当作一个巨型存储池,不再要求每个磁盘为特定应用服务。MySpace目前采用了一种新型SAN设备——来自加利福尼亚州弗里蒙特的3PARdata。
在3PAR的系统里,仍能在逻辑上按容量划分数据存储,但它不再被绑定到特定磁盘或磁盘簇,而是散布于大量磁盘。这就使均分数据访问负荷成为可能。当数据库需要写入一组数据时,任何空闲磁盘都可以马上完成这项工作,而不再像以前那样阻塞在可能已经过载的磁盘阵列处。而且,因为多个磁盘都有数据副本,读取数据时,也不会使SAN的任何组件过载。
当2005年春天账户数达到1千7百万时,MySpace又启用了新的策略以减轻存储系统压力,即增加数据缓存层——位于Web服务器和数据库服务器之间,其唯一职能是在内存中建立被频繁请求数据对象的副本,如此一来,不访问数据库也可以向Web应用供给数据。换句话说,100个用户请求同一份资料,以前需要查询数据库100次,而现在只需1次,其余都可从缓存数据中获得。当然如果页面变化,缓存的数据必须从内存擦除,然后重新从数据库获取——但在此之前,数据库的压力已经大大减轻,整个站点的性能得到提升。 缓存区还为那些不需要记入数据库的数据提供了驿站,比如为跟踪用户会话而创建的临时文件——Benedetto坦言他需要在这方面补课,"我是数据库存储狂热分子,因此我总是想着将万事万物都存到数据库。"但将像会话跟踪这类的数据也存到数据库,站点将陷入泥沼。 增加缓存服务器是"一开始就应该做的事情,但我们成长太快,以致于没有时间坐下来好好研究这件事情。"Benedetto补充道。
里程碑五:2千6百万账户
系统架构到目前为止保持了相对稳定,但 MySpace 仍然...化和分布式计算而设计的 模型架构) ASP.NET 则由...性能上升的另一个原因可能是在变换软件平台,并用新...
系统架构到目前为止保持了相对稳定,但 MySpace 仍然...化和分布式计算而设计的 模型架构) ASP.NET 则由...性能上升的另一个原因可能是在变换软件平台,并用新...
从myspace数据库看分布式系统数据结构变迁_IT/计算机...可以说是立竿见影, MySpace 马上就发现 ASP.NET ...性能上升的另一个原因 可能是在变换软件平台,并用新...
OK 工具、自我 广告平台、简历编辑工具、安全系统、隐私过滤器、Myspace 书单等等...我们很快就把网站建起来,我们打败了 Friendster,打败 了 Tribe.net,打败了所有...
MySpace 的六次重构经历,来认识分布式系统到底该如何...(平台、内容源、用户、传播方式等)转化到以用户为...ASP.NET 则由编写 Web 站点脚本的 ASP 技术演化...
MySpace图文教程 14页 免费 MySpace的六次重构 4...阶为音乐人系统,如此谨慎的手法反映出 MySpace 聚友...如此看来, MySpace 聚友网转型为音乐平台至少为国内...
OK 机、自助广告平台、主页编辑工具、安全系统、隐私过滤器、MySpace 书 单等等...“但它非常易用, 我们得以很快推出 MySpace,击败了 Friendster、Tribe.net 等...
MySpace 的六次重构经历,来认识分布式系统到底该如何...(平台、内容源、用户、传播方式等)转化到以用户为 ...ASP.NET 则由编写 Web 站点脚本的 ASP 技术演化...
硬件性能以及系统的可扩展性,将成为影响网站性能和...( http://turck-mmcache.sourceforge.net)、php ...Myspace的六次重构 最后不得不提到程序编码和数据库...
MySpace 的六次重构经历,来认识分布式系统到底该如何...(平台、内容源、 用户、传播方式等)转化到以用户 ...ASP.NET 则由编写 Web 站点脚本的 ASP 技术演化...
热门文档