西西河

主题:【讨论】米帝一给力,中国的超级计算机前十都排不进去了! -- 菜菜西红柿

共:💬40 🌺138
分页树展主题 · 全看首页 上页
/ 3
下页 末页
        • 家园 计算和存储的结合是Google Cluster一大特色

          传统超级计算机和以Google为代表的DISC体系结构一个重大区别在于计算和存储是否分离. HPC通常有专用的storage cluster, 以专用IO设备或者以太网相连. 而Google(以及起山寨Hadoop)的一大特点是运算和存储的紧密结合. Server既当运算server又是storage server. 其应运而生的MapReduce运算framework紧紧利用这一特性, 并尽量把work分配到拥有本地数据的server上, 使得整个cluster的IO带宽可以达到惊人的程度,非常适合Google的workload (比如计算Page Index就需要读取已经所有抓下来的互联网webpage内容)

          通宝推:唐家山,
        • 家园 你如果非要说原理差不多,我也没办法。

          但是,超级计算机的重要特征就是节点间的互连速度要求非常高,比如这次的天河1号就是创新了infiniband,将速度提高了一倍。

          极端一点说,如果你的工作需要节点间的数据交换很少,完全可以不用超级计算机,多买计算节点,最后把数据一汇总就行了。所以,google也不好意思把自己的服务器集群叫做超级计算机吧?

          • 家园 但是现在已经有十万兆级的以太网络出来了,

            采用多端口绑定技术, 一个节点可获得二十万兆甚至更高的速度. 我只是比较看好以太组网, 太便宜了.我觉得现在一般千兆网, 对一个结节有2Gbps的速度已经可以满足不太的计算需求了.

            超级计算机的话, 看怎么比较了, 与像蓝色基因那样的系统自然的没法比的, 但是如果以并行处理能力来说, 十几个类似的结点, 也可以获得不错的性能, 未必要上非常强大的网络. 就算不自称超级计算机, 自称是"并行运算系统"还是可以的吧? 总之干的事情是一样滴嘛.

            • 家园 万兆网还很不成熟

              我们是2008年配的10GbE。由于经费有限,10GbE只是到刀片机笼和NAS服务器。机笼到刀片还是GbE。内部GbE比较稳定,10GbE网络平均每个月死一次,必须手动重启。速度方面,没有发现10GbE有什么提高,因为其延迟大,对MPI程序应当没有什么太大的作用。

              • 家园 这个咱就不好说了, 但现在看厂商给出的数据,

                真的很不错, 特别是延迟已经接近了IB网络. 新的十万兆以太网大有取代IB的趋势. 而且mpi也有多种实现, 具体应用非常重要.

            • 家园 意思是一样的,不过我比较谦虚吧

              我用的32个节点的集群,用的就是千兆以太网,用的也挺好,而且很多时候还用不满32个节点,毕竟8个小时和24小时,对于我来说都是一整天。

              超级计算机比的就是超级能力,不计成本的超级能力。当然,这个不计成本也是相对普通计算机而言的,超级计算机之间也是比成本的,比如这次天河一号据说能耗也是相对低的,属于创新的一部分。

    • 家园 话说100000台android没有这么给力吧

      现在主流机器人大概是1g左右,10w台明显不够的

      一百万台可能差不多

      关键词(Tags): #android
    • 家园 呵呵

      大家都知道那个Top500用Linpack就是个joke,但一定要等到今天才改。

    • 家园 跟那个奥运金牌榜有异曲同工之妙。
    • 家园 还要修改GDP呢,未雨绸缪啊。
分页树展主题 · 全看首页 上页
/ 3
下页 末页


有趣有益,互惠互利;开阔视野,博采众长。
虚拟的网络,真实的人。天南地北客,相逢皆朋友

Copyright © cchere 西西河