“背包版” GLM-5.3-Flash 好了,这是今天的最后一个演示。

[复制链接]
发表于 10 小时前 | 显示全部楼层 |阅读模式
“背包版” GLM-5.3-Flash

好了,这是今天的最后一个演示。

运行环境:2 台 M5 Mac Ultra(每台配备 256GB 内存)

- 单路并发:150 token/s
- 8 路并发:380 token/s
- KV 缓存容量:140 万 token

该系统由 2 块电动自行车电池供电,已持续不间断运行超过 90 分钟。
https://x.com/0xSero/status/2120294401801109884/video/1

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关注公众号

相关侵权、举报、投诉及建议等,请发 E-mail:2776601884@qq.com

Powered by Discuz! X5.0 Licensed © 2001-2026 Discuz! Team.|青ICP备2025004122号-1

在本版发帖
关注公众号
返回顶部