Meta 开源全新音频压缩技术 EnCodec,比 MP3 小 10 倍 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
IBMall
V2EX    分享发现

Meta 开源全新音频压缩技术 EnCodec,比 MP3 小 10 倍

  •  
  •   IBMall 2022-11-06 19:38:33 +08:00 2718 次点击
    这是一个创建于 1068 天前的主题,其中的信息可能已经有所发展或是发生改变。

    Meta 旗下基础人工智能研究 (FAIR) 团队在 AI 驱动的音频超压缩领域取得了成功,构建了一个由三部分组成的系统,并对其进行端到端训练,以将音频数据压缩到目标大小,然后可以使用神经网络对这些数据进行解码。与 64 kbps 的 MP3 相比,Meta 的新技术 EnCodec 实现了大约 10 倍的压缩率,而且没有质量损失。

    Meta 表示,该技术尚未涵盖视频,但目前已在计划中,其目标是改进视频会议、流媒体电影以及在 VR 中与朋友玩游戏等的音频体验。EnCodec GitHub

    转自

    9 条回复    2022-11-07 08:26:13 +08:00
    konecho
        1
    konecho  
       2022-11-06 19:47:58 +08:00   1
    先放个信息论在这里
    RiverMud
        2
    RiverMud  
       2022-11-06 19:54:45 +08:00 via iPhone   2
    还是美剧《硅谷》里的那个压缩算法 nb 。
    cpstar
        3
    cpstar  
       2022-11-06 20:01:13 +08:00
    一个大胆的想法,传输的并非原始数据,而是 AI 构建的算法,就是源端用 AI 生成构建算法,AI 在目标端按照算法实时合成。
    所以,并不存在压缩,而是摘要,1#的信息论就不存在了。
    systemcall
        4
    systemcall  
       2022-11-06 20:08:19 +08:00
    @cpstar #3
    纯语音的话,我记得这几年确实有公司做过,英伟达好像就搞过,码率比 amr 还低,但是效果还不错
    gzlock
        5
    gzlock  
       2022-11-06 21:21:07 +08:00
    google 也有一个类似的项目
    https://github.com/google/lyra
    ericls
        6
    ericls  
       2022-11-06 22:23:39 +08:00 via iPhone
    从文章提取关键词
    传输关键词
    另一头用 AI 根据关键词写作?
    cest
        7
    cest  
       2022-11-06 23:42:33 +08:00
    @cpstar #3 这不就是两端都自带一个巨大 dictionary
    ungrown
        8
    ungrown  
       2022-11-07 00:25:19 +08:00 via Android
    和 mp3 比怎么好意思的,有本事跟 opus 比
    chenqh
        9
    chenqh  
       2022-11-07 08:26:13 +08:00
    虽然有点钻牛角尖,但是我还是想法,你音频算法这么 NB,为什么短视频看不到呢
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     5773 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 25ms UTC 02:48 PVG 10:48 LAX 19:48 JFK 22:48
    Do have faith in what you're doing.
    ubao snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86