唯一本地跑1280亿参数大模型!AMD锐龙AI Max+ 395重磅升级

7月30日消息,AMD Zen5架构的锐龙AI Max+ 395,是第一个可以在本地运行700亿参数AI大模型的平台,当然需要搭配128GB统一内存,而现在,AMD奉上重磅升级,1280亿参数大模型都可以在本地运行了!

当然,能做到这一点的还是只有锐龙AI Max+ 395,还是必须搭配128GB统一内存,并分配96GB作为显存,而且必须在Vulkan llama.cpp环境下。

驱动方面需要搭配还在测试阶段的25.10 RC 24版本,下个月初将会变成正式版25.8.1。

唯一本地跑1280亿参数大模型!AMD锐龙AI Max+ 395重磅升级

唯一本地跑1280亿参数大模型!AMD锐龙AI Max+ 395重磅升级

唯一本地跑1280亿参数大模型!AMD锐龙AI Max+ 395重磅升级

唯一本地跑1280亿参数大模型!AMD锐龙AI Max+ 395重磅升级

这使得锐龙AI Max+ 395成为第一个能在本地运行1090亿参数的Meta Llama 4 Sout大模型的平台,体积多达66GB,活跃参数最多170亿,并支持Vision、MCP。

这得益于该模型使用了混合专家(MoE)模式,每次只激活模型的一部分,从而保持性能可用,锐龙AI Max+ 395实测可以做到每秒15 Tokens。

同时,锐龙AI Max+ 395还可以跑68GB体积、1230亿参数的Mistral Large,至于18GB、300亿参数的Qwen3 A3B、17GB、270亿参数的Google Gemma,自然更是不在话下。

当然,锐龙AI Max+ 395还支持各种各样的模型尺寸、量化格式,包括GGUF。

唯一本地跑1280亿参数大模型!AMD锐龙AI Max+ 395重磅升级

唯一本地跑1280亿参数大模型!AMD锐龙AI Max+ 395重磅升级

唯一本地跑1280亿参数大模型!AMD锐龙AI Max+ 395重磅升级

同样重要的是,锐龙AI Max+ 395升级支持了更大的上下文尺寸,从传统的4096 Tokens左右,一举来到了惊人的256000 Tokens,从而能够分析、汇总更大规模的文档等数据资料。

不过这里需要注意,得开启Flash Attention、Q8 KV Cache。

对于一般的非大规模模型,32000 Tokens的上下文就足够用了,锐龙AI Max+ 395则提供了新的可能,而以往如此超大规模的上下文,往往需要几万十几万的设备才能实现。

锐龙AI Max+ 395、128GB配置的迷你AI工作站,价格已经低至1.3万元左右,可以说性价比是相当高了。

唯一本地跑1280亿参数大模型!AMD锐龙AI Max+ 395重磅升级

唯一本地跑1280亿参数大模型!AMD锐龙AI Max+ 395重磅升级

文章来源于网络。发布者:火星财经,转载请注明出处:https://www.sengcheng.com/article/83780.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
火星财经的头像火星财经
至高2TB、8200MT/s!全何推出OC RDIMM内存:适配线程撕裂者9000
上一篇 2025年7月30日 上午11:09
iPhone 17系列4款机型所有颜色齐亮相:橙色最抢眼
下一篇 2025年7月30日 上午11:09

相关推荐

  • 中国3月销量最高车型出炉:小米SU7冲至第8

    4月9日消息,乘联会最新数据,3月全国乘用车厂商批发241.2万辆创当月历史新高,同比增长8.9%,环比增长36.4%。 3月乘用车批发销量超两万辆的车型有20个,其中销量前9位全是新能源汽车。 其中,比亚迪宋系列依然是王者,9.6万辆几乎是第二名特斯拉Model Y的两倍,这也是比亚迪的当家花旦,是比亚迪销量最高的家族。 尤其是插混版本,十几万就能买个插混…

    2025年4月9日
    24400
  • 持久留香更温和 超能洗衣液39.9元到手11斤

    天猫超能官方旗舰店,超能双离子(焕彩新生)洗衣液11斤标价200.9元,券后实付39.9元包邮。 每次用量约为30~40g,11斤可用137~183次,折合0.19~0.25元/次。超市同款3.5kg装日常售价55元,折合7.8元/斤。 持久留香+换彩新生+不易变旧。天然椰子油生产,对织物、肌肤温和更安全。 与标准洗衣液相比,经本产品洗涤的织物颜色更亮。高档…

    2025年9月1日
    23100
  • 问界M9销量破20万!创50万级车型交付新纪录

    6月7日消息,鸿蒙智行宣布,问界M9累计交付突破20万台,创50万级车型交付新纪录。 作为鸿蒙智行的热门车型,问界M9自上市以来,持续刷新纪录。 官方数据显示,新款问界M9上市仅2小时,大定数量便突破了10000台,上市72小时大定突破21000台。 长期以来,50万元以上SUV市场由传统豪华品牌占据主导,其优势根植于品牌历史与审美惯性。 但随着智能化浪潮席…

    2025年6月7日
    32800
  • 关税下厂商囤货!DRAM内存现货价格上涨8-10%

    4月23日消息,据TrendForce最新内存现货价格趋势报告显示,由于关税政策的不确定性,OEM厂商正在逐步增加库存水平,以确保在关税政策明朗化之前有足够的存货。 与此同时,DRAM供应商将DRAM产品的现货价格上调了8-10%,特别是对于低价芯片,现货买家对报价很积极并囤积,从而推高了现货价格。 对于主流芯片(DDR4 1Gx8 3200MT/s),平均…

    2025年4月23日
    26500
  • 小米明年或推4款新车,涵盖纯电改款与增程SUV,加速布局家庭用车赛道

    “小米汽车的产品矩阵要加速扩张了!”2025年12月30日,有汽车行业资深人士向媒体透露,小米计划在2026年推出4款全新车型,涵盖紧凑级轿车、中型SUV、中大型轿车和豪华纯电MPV,售价区间覆盖15万-50万元,全面进军主流新能源汽车市场。这一消息一经传出,立即引发市场广泛关注,小米集团港股股价当日尾盘上涨3.2%,收于18.5港元/股。若消息属实,小米汽…

    2025年12月31日
    35500

发表回复

登录后才能评论
关注微信