Python Thread/gevent 等待 Event 完成,主线程被锁 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
hihihihihi

Python Thread/gevent 等待 Event 完成,主线程被锁

  •  
      hihihihihi 2016 年 10 月 4 日 3420 次点击
    这是一个创建于 3491 天前的主题,其中的信息可能已经有所发展或是发生改变。
    我的程序需要调用一个第三方 C++ 写的函数 Func_from_CPP() 这个函数用了一个 WaitForSingleObject 函数,大概要处理 3 到 5 秒才能处理完成返回, 所以导致我的 UI 会被 block 掉。

    所以我就想把这个函数丢到 Thread 或者 Gevent 里面去处理,等处理完成再异步通知我去对返回数据处理。

    但是,奇怪的是,不管我用 thread 还是 gevent , UI 始终都是被 block 掉,都需要等函数处理完成才能返回。

    是不是因为 Python 本身对线程的支持不够,导致对于 WaitForSingleObj 这样的函数,不管是否使用工作线程 /协程序,它始终是会让主线程处于等待状态?


    大致代码如下:

    CPP

    result Func_from_CPP()
    {
    waitforsomeevent() //WaitForSingleObject
    dowork()
    return reuslt
    }


    python

    def Work(self):
    Func_from_CPP()


    def onbutt onClicked(self):
    Work() //直接掉用,函数调用这几秒 UI 会挂掉

    threading.thread(self.Work)
    threading.start() //尝试用线程来做, UI 仍然挂掉

    gevent.spawn(self.Work)
    gevent.sleep(0) // 第三次尝试 gevent UI 仍然挂掉



    是我打开姿势不对吗?
    12 条回复    2016-10-05 19:46:19 +08:00
    mooncakejs
        1
    mooncakejs  
       2016 年 10 月 4 日 via iPhone
    我猜是 gil
    alqaz
        2
    alqaz  
       2016 年 10 月 4 日
    应该是楼上说的原因,而且 Func_from_CPP 这个函数调用了 WaitForSingleObject 函数,这是一个同步操作。 If the object's state is nonsignaled, the calling thread enters the wait state until the object is signaled or the time-out interval elapses.所以,改写这个 c++库?
    Zzzzzzzzz
        3
    Zzzzzzzzz  
       2016 年 10 月 4 日
    第三种只适用于 IO 堵塞, 并且 C/C++层有暴露相应的 fd 的接口可以加到 gevent 的 ioloop 里.
    第二种倒是通用, 但前提是拿 C 或者 Cython 嵌一层释放 GIL 的包装.
    wangxn
        4
    wangxn  
       2016 年 10 月 4 日 via Android
    在 Func_from_CPP() 里面使用原生线程才行。如 std::thread 什么的。
    hihihihihi
        5
    hihihihihi  
    OP
       2016 年 10 月 4 日 via iPhone
    现在问题是我不可能去修改那部分 cpp 代码
    alqaz
        6
    alqaz  
       2016 年 10 月 4 日
    @4ever911 封装一层试下,实在不行,就两层。
    ericls
        7
    ericls  
       2016 年 10 月 4 日 via iPhone
    可以用 asyncio.run_in_executor 试一下 需要用 processpoolexecuror
    zhuangzhuang1988
        8
    zhuangzhuang1988  
       2016 年 10 月 4 日 via iPad
    因为没有释放 Gil
    zhuangzhuang1988
        9
    zhuangzhuang1988  
       2016 年 10 月 4 日 via iPad
    推荐看 time.sleep 的 c 实现就知道了。。
    binux
        10
    binux  
       2016 年 10 月 4 日
    丢进程里处理就完了呗。
    hihihihihi
        11
    hihihihihi  
    OP
       2016 年 10 月 5 日 via iPad
    @binux 丢给进程处理,也要在 thread.join() 等待完成吧。还是会 block 掉主线程吧,我回头试试看。
    ryd994
        12
    ryd994  
       2016 年 10 月 5 日 via Android
    @4ever911 先不 join ,用 pipe ,这样就是 IO 问题,用线程还是 gevent 都可以
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     2753 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 54ms UTC 10:03 PVG 18:03 LAX 03:03 JFK 06:03
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86