当前位置: 主页 > 网络架构 >

海量导致架构取向,适用是王道

时间:2013-05-05 16:44来源:www.itkoala.com 作者:itkoala 点击:
互联网最大的趋势和变化是海量,海量导致架构取向,特别是成长、成熟期产品会遇到更多的挑战和困难,海量用户导致架构对分布式存储、缓存、数据库更加依赖,业界成熟、成功方
欢迎大家分享自己的文档,请点击查阅:分享方法,Linux系统运维
如果你喜欢这文章,可以点击文章结尾处百度分享,分享到你的各种社区收藏,或推荐给朋友……


返回:海量运维、运营规划--linux网络架构规划首页
互联网最大的趋势和变化是海量,海量导致架构取向,特别是成长、成熟期产品会遇到更多的挑战和困难,海量用户导致架构对分布式存储、缓存、数据库更加依赖,业界成熟、成功方案很多,十八般武艺,各有所长,各有用场,如何打造具有符合自己产品特色的分布式,还需要着眼实际,技术太过纯粹,适用是王道,这里的适用=主流思想+定制,对海量应用有些汇总如下表所示(部分数据来自2012velocity大会):
 

  分布式文件系统 分布式缓存 分布式数据库 IDC、CDN
腾讯 TFS(Tencent File System),数100+P,200+亿文件数,60+万次/秒,80+G出流量,数万台服务器 TTC(Tencent Table Cache) TDB 10个城市,50个IDC集群,1000G+ IDC带宽,2000G+ 自建CDN,20万+服务器
阿里 TFS(Taobao File System),数P+,+100亿文件数,440台PC Server, TAIR,淘宝key/value解决方案 Oracle 自建CDN,>200亿文件数,平均图片15K,20+个节点,峰值带宽2100G,140个节点,最大峰值带宽2400G
开源或第三方 Hadoop
MogileFS
FastDFS
MooseFS
Lustre
Dynamo
Redis
Tokyo Tyrant
Dbcached
mcached/' target='_blank'>Memcached
MemcaChedb
Keyspace
Hbase
HadoopDB
MongoDB
Cassandra
第三方云服务商,第三方CDN运营商蓝讯、网宿、帝联等

 

腾讯作为中国领先的互联网公司,海量服务的规模令世界瞩目,一起看看腾讯遇到的挑战。

QQ.com的挑战和架构

1、国内最大的门户网站
2、日点击量超过10亿,日动态请求过10亿
3、日突发流量过100G,日发布图片20万,日图片增量2G

架构概览

1、对静、动态拆分、再拆分,针对应用定制web server,产品平台化、应用平台化、架构平台化、运营和运维平台化。
2、带宽随新闻具有突发性,大事件=大流量,QQ tips短时间可能将带宽拉动3~5倍,静态架构需要具备高性能、高韧性,核心IDC+多家CDN分流,IDC容灾、区域容灾。
3、新闻要求秒级直达全国IDC,高速跨IDC、ISP分发能力,图片速度=新闻网页速度。
4、全量图片存储2T,要求可伸缩、易扩容,逻辑转存,将热点留在接入,最小成本,最快腾挪。

 

Qzone.com的挑战和架构

1、国内最大的SNS网站
2、活跃用户超过2亿,日点击量超过100亿,日上传照片超过1亿

Qzone的运营、运维团队是在用智慧和艺术做架构,已经达到了登峰造极的境界,叹为观止、无与伦比。

架构概览

 

转载请注明linux系统运维
http://www.linuxyw.com/linux/wangluojiagou/20130420/41.html

------分隔线----------------------------
发表评论
请自觉遵守互联网相关的政策法规,严禁发布色情、暴力、反动的言论。
评价:
验证码: 点击我更换图片