为什么 pc 上的软件基本不使用 mpi 实现多核并行而使用多线程居多 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
请不要在回答技术题时复制粘贴 AI 生成的内容
ljiaming19
V2EX    程序员

为什么 pc 上的软件基本不使用 mpi 实现多核并行而使用多线程居多

  •  
      ljiaming19 2024-06-08 00:39:33 +08:00 2062 次点击
    这是一个创建于 490 天前的主题,其中的信息可能已经有所发展或是发生改变。
    感觉 pc 上跑的应用就算要并行也基本是用多线程 基本没有使用 openmpi/intel mpi 之类的软件实现并行的 这主要是什么原因
    6 条回复    2024-06-08 18:30:49 +08:00
    dongruixuan
        1
    dongruixuan  
       2024-06-08 01:21:26 +08:00 via iPhone
    因为不用 serialize?MPI 应该得把数据 serialize 后才能发到其他进程吧,相比之下多线程可以直接用 threadsafe 的 queue 之类的就行
    Kirscheis
        2
    Kirscheis  
       2024-06-08 02:36:05 +08:00
    当年在超算上写代码的跑模拟的飘过。

    不是一个概念,用 mpi 的主要目的是多个机器间并行,pc 就一个机器,想共享数据直接共享内存就完事了,用 mpi 还要显式地处理数据传输,增加一堆代码,降低性能,这不是纯纯给自己找不痛快。

    而且用多线程多直观,入门编程四五天就能学会了,什么语言都能用。mpi 得学半天,支持的语言也不咋多。
    ljiaming19
        3
    ljiaming19  
    OP
       2024-06-08 03:24:57 +08:00
    @Kirscheis 不过超算上很多软件多线程反而不如用 mpi 单线程相同核数算得快
    w568w
        4
    w568w  
       2024-06-08 11:00:41 +08:00
    MPI 是消息传递机制,Multithreading 是共享内存机制。在 SMP 的前提下,一般来说共享内存性能要高于前者。单台 PC 是 SMP 。
    ShuWei
        5
    ShuWei  
       2024-06-08 12:01:37 +08:00
    多线程在单机上,调度更灵活,性能也能保证,没必要使用 mpi 机制,mpi 主要针对跨计算模块的,这个计算模块一般指有自己独立的 cpu 内部缓存和内存的情况,与现在所说的多核处理器场景还不太一样
    secondwtq
        6
    secondwtq  
       2024-06-08 18:30:49 +08:00
    Python multiprocessing 迫真猴版 MPI
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     897 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 20ms UTC 20:53 PVG 04:53 LAX 13:53 JFK 16:53
    Do have faith in what you're doing.
    ubao snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86