买 M4 iPad 1TB 以下 建议等 6 月 WWDC 后再决定 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
serafin
V2EX    Apple

买 M4 iPad 1TB 以下 建议等 6 月 WWDC 后再决定

  •  2
     
  •   serafin 2024-05-08 01:04:57 +08:00 2895 次点击

    这是一个创建于 520 天前的主题,其中的信息可能已经有所发展或是发生改变。

    买 M4 iPad 1TB 以下建议等 WWDC 后再决定。1TB 以下内存是 8GB ,1TB 2TB 内存是 16GB 。如果买了 8GB 内存,6 月 WWDC 发布本地 AI 大(xiao)模型只支持 16GB 那你就成韭菜了。虽然我认为 8GB 跑推理大概率是支持的,不排除可能模型会有阉割。

    14 条回复    2024-05-29 15:41:29 +08:00
    icz
        1
    icz  
       2024-05-08 01:31:45 +08:00 via iPhone   4
    可是我为啥非要用 ipad 跑推理呢
    maolon
        2
    maolon  
       2024-05-08 01:40:35 +08:00 via Android
    你要是关注过的话就会发现苹果的模型是超小型模型,之前开源的模型是 0.27b 0.45b 1b 和 3b ,不量化都能在 8g 里跑, 更何况还有量化+llm in a flash 技术,把 cache 存到储存里。
    苹果的目标显然是连 4g 设备都能一并支持的模型。
    BEza5k2j7yew0VN9
        3
    BEza5k2j7yew0VN9  
       2024-05-08 01:40:53 +08:00
    你的 M4 ipad 会更新吗?
    很多人都是到手什么版本用到报废,我因为上个 ipad 系统太老了才买的新的。
    zhusimaji
        4
    zhusimaji  
       2024-05-08 06:58:40 +08:00 via iPhone
    没啥好等的,如果做端侧务必会考虑模型大小,裁剪,蒸馏,量化等一系列操作下来模型就能兼容大部份设备,所以等 wwdc 没啥意义吧! 8g 和 16g 内存下可能体积大小有差异,但是也不一定
    Dream4U
        5
    Dream4U  
       2024-05-08 07:40:22 +08:00
    大模型肯定是云端的啊,本地肯定是小模型
    vicalloy
        6
    vicalloy  
       2024-05-08 09:14:28 +08:00
    移动设备更关心的是能耗吧。
    我是不太明白苹果为啥要在移动设备上卷 AI 算力。
    现在 7B 的 LLM 效果也不怎么样,真涉及到大模型还是走远程 API 更现实一点。
    考虑到续航时间,iPad 上的 AI 模型应当不会太大。
    gamekiller0010
        7
    gamekiller0010  
       2024-05-08 09:19:48 +08:00
    iPhone pro 最高也只有 8G
    mkdirmushroom
        8
    mkdirmushroom  
       2024-05-08 09:41:58 +08:00
    为啥要用移动设备跑本地大模型,如果实在在乎隐私,完全可以在家里搭建一个家庭服务器来跑啊,内网直接连,外网穿透连。(我现在就是这个方案)
    mkdirmushroom
        9
    mkdirmushroom  
       2024-05-08 09:43:28 +08:00
    @maolon apple 的优势其实还是生态,本地模型完全可以用家庭服务器跑,但是肯定不能接入苹果的软件就是了。
    neptuno
        10
    neptuno  
       2024-05-08 09:54:50 +08:00
    多出来这几千块,我都能订阅好几年 openai 了
    unneeded
        11
    unneeded  
       2024-05-08 10:02:56 +08:00
    新款 8G 起步,意味着 ai 功能就算限制也只能限制 m4
    其他功能我觉得 m1 开始都能用
    justsomac
        12
    justsomac  
       2024-05-08 10:28:41 +08:00
    怎么感觉你们还在等苹果会在 LLM 上发布什么大杀器似的…即使 M4 算力提升不少,在端侧 LLM 也不能咋样啊,不也是现在 AI 的那些能力么,顶多是 Siri 没那么智障而已
    happyzhong0618
        13
    happyzhong0618  
       2024-05-14 20:23:20 +08:00 via iPhone
    这玩意能干活?精确?啊?确定?开啥玩笑
    iyue56
        14
    iyue56  
       2024-05-29 15:41:29 +08:00
    还是建议别建议了,现在 MacBook 都是 8g 起步,就是为了变相提价而已,不会存在 16g 能做 8g 做不了的,最多就是慢一点卡一点。
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     3573 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 27ms UTC 04:16 PVG 12:16 LAX 21:16 JFK 00:16
    Do have faith in what you're doing.
    ubao snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86