Google开源DiffusionGemma:文本扩散模型推理速度比传统LLM快4倍
Google开源发布DiffusionGemma文本扩散模型,基于图像扩散原理实现一次并行生成256个token,推理速度比传统LLM快4倍。采用混合专家架构,260亿总参数仅激活38亿,可在RTX 5090消费级GPU上运行,H100上每秒超1000 token。
京ICP备:2022009079号-2
京公网安备:11010502051901号
ICP证:京B2-20230255
TOB最前沿 公众号
TOB最前沿 抖音号
CBI科技在线 公众号