人脸动态捕捉技术实现方案? - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
knockkey
V2EX    问与答

人脸动态捕捉技术实现方案?

  •  
  •   knockkey 2023 年 7 月 19 日 1602 次点击
    这是一个创建于 930 天前的主题,其中的信息可能已经有所发展或是发生改变。
    # 非常好奇 b 站一个 up 叫'抵抗 Resistance'的视频是怎么做出来的。
    # 他的主页链接 https://space.bilibili.com/475912512/
    # 感觉鲨鱼的可爱形象比真人露脸更加有节目效果哈哈,不论是视频还是直播都挺有趣。

    # 我第一想到的是 用 iPhone 的拟我表情,但显然这个博主不是用手机搞的。
    # 以前也接触过 Adobe 的 Character Animator ,虽然是捕捉人脸的表情让形象动起来,但这个软件貌似是只能出 2D 的形象。
    # 我对动态捕捉的技术没什么了解,在网上查了一圈,也不知道 up 是怎么实现这个效果的?
    # 如果想做一个 up 主那样的虚拟形象,具体要怎么实现呢?用到了什么软件?
    # 这个 3D 的鲨鱼模型是怎么搞出来的? blender 建模的吗?
    [上传图片中...]
    8 条回复    2023-07-20 13:33:06 +08:00
    knockkey
        1
    knockkey  
    OP
       2023 年 7 月 19 日
    westoy
        2
    westoy  
       2023 年 7 月 19 日
    blender 2.6 还是 2.7 的时候油管上有人出过平价方案的教程的

    就是脸上拿圆珠笔画无数点, 然后追踪投射到 3D 坐标里, 再套模型

    你可以找找看
    knockkey
        3
    knockkey  
    OP
       2023 年 7 月 19 日
    @westoy 好的 我去找找 谢谢!
    hzy1422045654
        4
    hzy1422045654  
       2023 年 7 月 20 日
    以前有个 facerig 现在停售了,换了个名叫 Animaze by FaceRig 可以看一下哦
    andyskaura
        5
    andyskaura  
       2023 年 7 月 20 日
    https://github.com/tensorflow/tfjs-models/tree/master/face-landmarks-detection#keypoint-diagram
    这个应该满足你的需求,这个模型返回面部点阵,然后将点阵与模型的脸部顶点绑定,就可以做到动态 3d 表情了
    knockkey
        6
    knockkey  
    OP
       2023 年 7 月 20 日
    @hzy1422045654 哈哈!我在里面看到了那个 up 用的鲨鱼模型!感谢!
    knockkey
        7
    knockkey  
    OP
       2023 年 7 月 20 日
    @andyskaura 谢谢!
    madeworldbetter
        8
    madeworldbetter  
       2023 年 7 月 20 日
    unreal 有一个 metahuman ,就是用手机捕捉表情的
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     3620 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 43ms UTC 04:05 PVG 12:05 LAX 20:05 JFK 23:05
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86