【冯大辉】有关 Alexa 与 AOL 部署集群文件系统
上一篇 /
下一篇 2008-04-07 14:43:34
这两天关注了一下基于 SAN/NAS 的集群文件系统的产品。找到了关于Alexa 的一则旧闻,之后又发现了一篇关于AOL 部署 SAN文件系统的文章。
Alexa 的相关数据
Alexa 超过 1000 台 Linux 服务器 Farm,每半年增长 300T 新数据。经过了同类产品的选型后,最后选择了 Ibrix 融合文件系统。
SAN 使用的是 HPModular Smart Array (MSA1000),最大支持 12T ,Cache I/O 最大 3 万个,算是个中低端的阵列。Amazon 没有透漏这套系统的吞吐能力,只是说 Ibrix 这套系统能达到 1T 的 I/O 聚合能力,单个 NameSpace 可达 16PB 容量。
不过从现在的一些迹象上来看,Amazon 对存储层重新做了改造。这套解决方案被替换掉了也说不定.
AOL的相关数据
原有状况:3000 台主机通过 10000 多个光纤通道端口连接到传统的 SAN 上。其中有 8PB 的非结构化数据,分布在大约 1000 台 文件服务器上。管理维护的复杂度可想而知。
解决方案:文件服务器采用直连的磁盘,每个 12 块 700GB 的 ATA 磁盘,然后通过 Ibrix 融合文件系统进行集群化。
看起来,Ibrix提供的解决方案很有竞争力。现在一些比较大的用户对于存储层的集群的需求越来越多,快成为趋势,一揽子解决方案还是有必要的,毕竟不是每家技术能力都强如 Amazon、Google ,有的时候用第三方的成本是能小于自己动手 DIY 的。
--EOF--
作者:Fenng|可以转载, 转载时务必以超链接形式标明文章原始出处和作者信息及版权声明
网址:http://www.dbanotes.net/arch/alexa_ibrix_san_file_system.html
导入论坛
引用链接
收藏
分享给好友
推荐到圈子
管理
举报
TAG:
alexa
aol