拥有相对宽松的时间和资金预算如何合理有效建设分布式计算中心? - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Recommended Services
Amazon Web Services
LeanCloud
New Relic
ClearDB
wsgzao
V2EX    云计算

拥有相对宽松的时间和资金预算如何合理有效建设分布式计算中心?

  •  
  •   wsgzao 2014-05-27 14:04:26 +08:00 3462 次点击
    这是一个创建于 4158 天前的主题,其中的信息可能已经有所发展或是发生改变。
    2000pc server,每台10T本地硬盘,加外置存储10PB*5,存储网络使用NAS,做分布式计算中心;

    希望各位大牛能够分享下比较实际的解决方案,使用的技术和架构;

    如果有更合理的硬件投入和规划方案也欢迎帮忙一起调整思路。
    10 条回复    2014-05-28 12:42:33 +08:00
    guotie
        1
    guotie  
       2014-05-27 14:08:21 +08:00
    NB
    imn1
        2
    imn1  
       2014-05-27 15:10:23 +08:00
    有这样的NB能力,如果请求IBM提供方案
    pc10201
        3
    pc10201  
       2014-05-27 15:51:46 +08:00
    先花钱请业界最牛B的架构师~
    wupher
        4
    wupher  
       2014-05-27 16:29:03 +08:00
    砍一半钱,外包出去好了 ;-)
    thinkxen
        5
    thinkxen  
       2014-05-27 16:50:00 +08:00
    膜拜一下~~~~~~~~
    loading
        6
    loading  
       2014-05-27 17:09:21 +08:00 via Android
    #12306

    我也想有这方面的知识储备!
    66450146
        7
    66450146  
       2014-05-27 17:30:03 +08:00
    收购 Google。
    wsgzao
        8
    wsgzao  
    OP
       2014-05-28 09:38:44 +08:00
    @loading 这个已经不是知识储备了,是实际需要干的事情,没有最牛的架构师,只有不断深入实践才能理解的更透彻
    tshwangq
        9
    tshwangq  
       2014-05-28 11:02:01 +08:00
    seti@home
    notnumb
        10
    notnumb  
       2014-05-28 12:42:33 +08:00
    本人有一点,机房,运维,编程都搞过。写出来让大家见笑见笑。

    如果真要做好,必须找偏执狂。找提供方案的中庸企业不行,如果要求不高,找IBM也是不错的。
    性能分析要做好,安全流程要写好

    机型选择要跟着你跑不同程序来,首先需要一组好的测试码农,能够拿到相对准确数据。
    测试你们程序的类型,以来高主频,还是核心数,还是效率低下的傻等,还是疯狂的循环让cpu傻跑,
    在来决定机型。
    个人认为计算和存储的机型是最重要的,

    当然后续你要选择你的应用,目前应用,以及规模扩大后应用,
    以及软硬件如何扩展以及修补设计缺陷
    比如,文件系统: lustre,gpfs,hdfs, glusterfs
    以及包含备份方案的,LTFS

    举例机型如下,要写太多了。

    任何一点都可以无限发散,看你要做到哪个程度了


    场地
    面积
    制冷
    计划PUE达到多少
    制冷方式
    Free Air Cooling
    水冷空调
    承重
    依赖型号,配置,地板结构,建筑承重能力
    机柜
    不管计算还是存储i节点
    CPU
    主频
    核心数
    单纯的高网络或者磁盘IO考虑arm或者atom,只要计算好吞吐量,达到平衡即可。
    MEM
    满槽高容量
    满通道低延时
    IO
    HDD
    SAS
    HBA
    RAID
    带扩展
    本地
    FC
    IB

    NIC
    连接方式
    IB
    以太网
    带宽
    10Gb/S
    40Gb/s
    端口数量
    决定交换机,路由器链接方式

    电源
    功耗决定机房用电量
    PDU接口数量

    ......
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     1178 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 24ms UTC 23:31 PVG 07:31 LAX 16:31 JFK 19:31
    Do have faith in what you're doing.
    ubao snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86