
帖子
Tether AI 发布开源 TurboQuant,并将其集成至 QVAC SDK 0.12.0

深潮 TechFlow 消息,6 月 01 日,Tether AI 宣布发布开源 TurboQuant,并将其纳入 QVAC SDK 0.12.0。该技术基于 Google Research 的内存压缩算法,可将大语言模型运行中的 KV 缓存压缩最高约 5 倍,在尽量保持输出质量的同时,降低本地与边缘设备的内存占用。
Tether 表示,TurboQuant 可支持笔记本、手机、消费级 GPU、边缘设备及去中心化推理网络处理更长对话、更大文档和更复杂工作负载,并已通过 Fabric 向开发者开放。
相关快讯
亿万富翁抛售1.53亿美元谷歌股票(GOOGL)
美股云计算服务板块走强,CoreWeave涨近9%
XBIT DEX:美股开盘下跌,加密概念股普遍走低
研究机构披露AI企业应用排名:英伟达、Meta、亚马逊并列第一
XBIT DEX:Anthropic预测6月底最佳AI模型概率83.2%
「新股神」Serenity复盘ARM大胜:从134美元到354美元,150亿美元营收目标已完全合理
Loeb驳泡沫论:投资AI绝非拿钱冲厕所,我们刚刚触及热潮表面
美股前十大公司已全部由科技与AI相关企业占据
XBIT DEX:预计5月底第二大公司为Alphabet概率83.4%
美股半导体、存储芯片、服务器、应用软件全线爆发,多股再创历史新高