新浪部署统一存储缓解数据压力

日期: 2008-12-14 来源:TechTarget中国 英文

  新浪是一家服务于中国及全球华人社群的领先在线媒体及增值资讯服务提供商。新浪拥有多家地区性网站,以服务大中华地区与海外华人为己任,通过旗下五大业务主线:即提供网络新闻及内容服务的新浪网(SINA.com)、提供移动增值服务的新浪无线(SINA Mobile)、提供Web 2.0服务及游戏的新浪互动社区(SINA Community)、提供搜索及企业服务的新浪企业服务(SINA.net)以及提供网上购物服务的新浪电子商务(SINA E-Commerce),向广大用户提供包括地区性门户网站、移动增值服务、搜索引擎及目录索引、兴趣分类与社区建设型频道、免费及收费邮箱、博客、影音流媒体、网络游戏、分类信息、收费服务、电子商务和企业电子解决方案等在内的一系列服务。公司收入的大部分来自网络广告和移动增值服务,少部分来自搜索及其他收费服务。

  新浪在全球范围内的注册用户超过2.8亿,日浏览量超过9亿次,其面临的挑战是
建立一套简单、易于管理、具有高可靠性、高灵活性和高可扩展性的存储系统,以缓解数据急增的压力。

  新浪网新闻中心与全国上千家媒体有着良好的合作,以对国内外大事全面、快速的报道赢得了业界良好的口碑和网友的喜爱,目前“上新浪网看新闻”已成为网民上网时不可或缺的内容。新浪博客已经发展成为中国最具影响力的超人气博客品牌,已经成长为中国第一大原创社区。汇聚了各领域的行业精英,集中展现深刻的人文思想和丰富的各类资讯。而新浪邮件用户每天增长超过十万,存储容量每天增加超过10GB。不到两个月的时间,存储容量就可增加1TB,而且是超线性的加速增长。

  电子邮件、新闻、博客的访问量,占据了整个新浪网访问量的1/3以上。随着内容和最终用户的增加,给存储设备带来了巨大的压力,对后台存储系统立即进行有效的改造成为非常迫切的要求。面对这种情况,新浪提出在充分利用现有网络资源的前提下,网络及存储系统的设计应遵循如下原则:标准化、容错性、扩展性、管理性、安全保密性,利用一种系统的、简单的方式,经济地达到有效提升存储系统性能的目的。建成的存储系统应该易于配置、管理和维护,并且具有极高的可靠性和安全性;另外,还需要具有较高的灵活性和可扩展性以适应业务的发展。

  针对新浪以上的需求,NetApp在以往为其他互联网公司提供存储系统成功经验的基础上,坚信通过NetApp统一存储服务解决方案,可以帮助新浪降低数据的存储、管理和备份成本,并且能够根据业务的需要灵活扩展。

  NetApp利用独特的Appliance应用技术,将存储的数据与应用软件分离后专门放置在一个已被优化的专门进行数据服务Appliance结构中,从而使其方便、快捷和有效地存储和读取大容量数据。

  NetApp认为存储系统应当提供数据服务,而非磁盘服务,应用程序是使用文件组织和存取数据的,存储应直接为应用提供数据。因此它的存储方案无论采用网络连接,存储将数据都将直接送达应用程序。

  新浪采用NetApp 的统一存储系统对用户的数据进行集中存储,增加了系统的可管理性与可维护性,改变了由每台主机保存部分用户数据的情况。并且具有TCP/IP、 NFS、CIFS和HTTP等多种标准协议接口,可以支持WindowsNT、UNIX、LUNIX等多个操作系统进行并行访问。

  应用NetApp专用的统一存储设备的新浪新闻、博客和邮件系统,具有极高的存储速度,保证了用户的高速访问。同时这个系统中所有的前端机运行同样的应用进程,通过NFS或CIFS访问存储系统中的用户数据,由于文件系统运行在NetApp FAS系统上,可以减轻前端机的负载。并且随着用户数量的增加,只需采用简单的增加硬盘(即插即用)或添加新机器的方式就可以扩大存储空间,保证系统的可扩展性,保证不中断的连续服务。

  而NetApp独特的精灵卷技术(FlexVol),大大提高了存储的实际使用效率。FlexVol 技术在存储配置、利用率和调节卷大小方面具有实实在在的改进。数据卷可根据应用程序需求的变动,动态快速地调整尺寸。FlexVol极大降低了以物理方式分配的存储,节省了包括数据中心空间、电源、冷热要求等多项费用。

  另外,由于NetApp的统一存储系统具有高可靠性的设计结构(如RAID DP、集群故障转移等),保证了网站具有良好的稳定性,即使出现断电事故,系统也可以保证在2分钟内重新启动并且保证不会丢失任何数据。同时系统可以利用现有的磁盘空间进行在线快速备份和恢复。由于该存储系统使用的是处于工作状态的磁盘,而不是速度较慢的磁带,故备份和恢复地速度非常快,并且方便灵活。而NetApp独特的数据快照(SnapShot)功能,使新浪可以在低磁盘耗费的情况下对全盘数据进行快速地照相。而它的快速恢复(SnapRestore)功能,可以使用户可以大规模地恢复数据,保证系统在遭受病毒感染、系统数据全盘误删除等情况下免受损失。另外,还可以利用NetApp内置的异地镜像软件SnapMirror构建远程容灾方案。除此之外,NetApp的存储设备还支持直接连接磁带机和通过第三方软件来控制和管理磁带库。

  使用NetApp存储方案为基础构建的新浪邮件、新闻、博客等系统遵循了“软件优化导致性能的提高远远超出硬件的提高,专门的目的导致管理的简单”的设计理念,以解决应用与数据的分离,解决存储、移动、部署为根本的设计原则,采用SAN方式进行数据备份,NAS方式进行数据共享,因而同时集成了SAN和NAS的优点。而且NetApp一直坚持的产品简单化原则使得该系统拥有了先进的服务体系,大大提高了服务效率,极大降低新浪的维护成本,对新浪邮件服务的迅速发展打下坚实的基础。

  以邮件系统为例,新浪拥有了国内最大的邮件系统,而且注册用户数量已经超过了2.6 亿,而后台的NetApp FAS系列存储系统正是新浪海量邮件系统的坚实基础。

  新浪网络系统部总监李源表示:“NetApp统一存储解决方案为我们提供了一个简单、易于管理、可扩展的强大存储系统。面对呈超线性加速增长的用户和庞大的数据存储,NetApp 彻底解除了我们的后顾之忧,为我们的邮件、新闻、博客等系统的正常运行提供了坚实后盾。”

  截至到目前,新浪已经采用了超过800TB的NetApp存储系统,可以说,NetApp存储系统为新浪的持续发展奠定了良好的基础。

我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。

我原创,你原创,我们的内容世界才会更加精彩!

【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】

微信公众号

TechTarget微信公众号二维码

TechTarget

官方微博

TechTarget中国官方微博二维码

TechTarget中国

电子邮件地址不会被公开。 必填项已用*标注

敬请读者发表评论,本站保留删除与本文无关和不雅评论的权力。

相关推荐