下沙论坛

 找回密码
 注册论坛(EC通行证)

QQ登录

QQ登录

下沙大学生网QQ群8(千人群)
群号:6490324 ,验证:下沙大学生网。
用手机发布本地信息严禁群发,各种宣传贴请发表在下沙信息版块有问必答,欢迎提问 提升会员等级,助你宣传
新会员必读 大学生的论坛下沙新生必读下沙币获得方法及使用
查看: 3377|回复: 0
打印 上一主题 下一主题

Google每天要处理多少数据?答案:20PB

[复制链接]
  • TA的每日心情
    奋斗
    7 小时前
  • 签到天数: 2384 天

    [LV.Master]伴坛终老

    跳转到指定楼层
    1
    发表于 2008-1-10 15:21:38 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
    大家知道Google是世界上访问最大的网站之一,但有谁知道它每天处理多少数据呢?: z* a7 [% S$ W7 Q4 g! s
    这里可以告诉你一个大致的数据,约20PB(20000TB,1TB=1024GB).的确是非常惊人的一个数字.这些数据每天通过巨大的群集来处理,截至2007年9月,Google的集群数量已经达到11000台.
    0 v4 Z3 x7 m! h7 P3 g  l* A- r  L这些服务器的配置大多采用两颗英特尔至强(HT)处理器和4GB内存,两个160GB的硬盘,并采用以太网连接,每台大约在2400美元左右,以下是详细的统计表格.
    7 n( ^* B  `) X, a8 J1 A

    1 r- N; A4 L* M, ^# J( Y) p9 F# W" _
    MapReduce statistics for different months Number of jobs (1000s)291712,217completion time () completion time ()634874395Machine years used2172,00211,081map input data ())3,28852,254403,152map output data ())7586,74334,774reduce output data ())1932,97014,018machines per job machines per job157268394Unique implementationsmap3951,9584,083reduce2691,2082,418
    分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友
    收藏收藏 分享分享 顶 踩

    本版积分规则

    关闭

    下沙大学生网推荐上一条 /1 下一条

    快速回复 返回顶部 返回列表