高级搜索»
热门:  web2.0 字体 css 图片 博客 游戏 设计 flash 壁纸
1
0评

Google相关 | Google每天处理20PB数据 37倍于三年前

easyba 腌生肉 提交于 2008-1-11 17:21:23

标签

Google的Jeff Dean和Sanjay Ghemawat近日披露，Google庞大的分布式计算集群现在平均每天都要处理20PB(20000TB)以上的数据，三大核心技术之一的MapReduce每天工作量超过10万个。

在2007年9月，MapReduce的工作量多达221.7万个，平均完成时间395秒，平均每个工作使用394台机器，一个月下来就要动用11081台服务器；当月每天Map输入数据403152TB，Map输出数据34774TB，Reduce输出数据14018TB，最终输出20756TB，也就是将近21PB。

Google还同时透露了2004年8月和2006年3月的MapReduce状态统计，对比之下更能看出Google的飞跃发展，单就处理数据量而言就是三年前的37倍。
【点击进入链接 http://www.easyba.cn/article.asp?id=211 】

Google相关 | Google每天处理20PB数据 37倍于三年前

 

发表评论 | 放入小组 | 收藏 | 埋葬!

收藏到   del.icio.us | QQ书签 | 百度搜藏 | Mister-Wong | 9fav
分享地址


发表评论

* 昵称:

博客(可不填写):

*评论:
高兴 悲伤 惊讶 挂掉! 困惑 冷静 气愤 尴尬 受不了啦 转动眼睛 眨眼 睡梦中     

*输入验证码: