Macbook测试大模型,M1到M4,这次玩新意用2.5B

2024-12-01 12:18:31 3点赞 13收藏 10评论

油管有博主,从另外角度分享Apple M系列跑大模型的能力,我稍微搬砖一下给大家。


博主比较了2014款配备英特尔处理器的MacBook Pro与多款搭载不同M系列芯片的MacBook的性能。测试使用了一个小型语言模型(LLaMA 2.5B)来评估各设备的处理速度。


测试设备:

2014款MacBook Pro:英特尔处理器,8GB内存

2020款MacBook Air:M1芯片,8GB统一内存。

2023款MacBook Pro:M3 Pro芯片,36GB统一内存。

最新款Mac Mini:M4芯片,16GB统一内存。

Macbook测试大模型,M1到M4,这次玩新意用2.5BMacbook测试大模型,M1到M4,这次玩新意用2.5B


测试结果:

2014款MacBook Pro:处理速度为2.2 tokens/秒。

2020款MacBook Air(M1):处理速度约为50 tokens/秒,比2014款快约20倍。

2023款MacBook Pro(M3 Pro):处理速度为124 tokens/秒。

最新款Mac Mini(M4):处理速度为120 tokens/秒。


虽然是小模型,但是也从另外一个侧面看到性能,未来我会分享更多。

展开 收起
10评论

  • 精彩
  • 最新
  • 这么小的模型,主要用途是什么呢

    校验提示文案

    提交
    为了测试 [喜极而泣] ,一般配合RAG或者互联网搜索,可以做总结

    校验提示文案

    提交
    好歹用个7B,14B吧,也可以跑起来啊

    校验提示文案

    提交
    收起所有回复
  • 我一直没搞懂,你们折腾本地大模型,到底啥用

    校验提示文案

    提交
    自己数据别上传

    校验提示文案

    提交
    不懂就别问,因为就是知道答案你也用不上 [不说话]

    校验提示文案

    提交
    还有1条回复
    收起所有回复
  • 至少应该用m3比m4吧

    校验提示文案

    提交
  • 看到一个评测说某些能力m1 pro 要比m4强 ,大部分m4也没强多少。这个和那个评测差别有点大

    校验提示文案

    提交
  • m1应该换成m1 pro

    校验提示文案

    提交
提示信息

取消
确认
评论举报

相关文章推荐

更多精彩文章
更多精彩文章
相关好价
最新文章 热门文章
13
扫一下,分享更方便,购买更轻松