2025-08-12 13:24:33
汇通财经APP讯——【华为将发布AI推理创新技术UCM 实现高吞吐、低时延体验 】
在2025金融AI推理应用落地与发展论坛上,华为将发布AI推理创新技术UCM(推理记忆数据管理器)。作为一款以KV Cache为中心的推理加速套件,其融合了多类型缓存加速算法工具,分级管理推理过程中产生的KV Cache记忆数据,扩大了推理上下文窗口,以实现高吞吐、低时延的推理体验,降低每Token的推理成本。据介绍,推理体验直接关系到用户与AI交互时的感受,包括回答问题的时延、答案的准确度以及复杂上下文的推理能力等方面

下载汇通财经APP,全球资讯一手掌握

下载易汇通电脑版行情软件

行情

美元指数 97.72 -0.94 -0.95%
欧元美元 1.1721 0.0001 0%
英镑美元 1.3516 -0.0009 -0.07%
美元日元 146.84 -0.08 -0.05%
美元人民币 7.1666 -0.0136 -0.19%
现货黄金 3371.78 33.33 1%
现货白银 38.885 0.768 2.01%
美原油 63.77 0.25 0.39%
澳元美元 0.6488 -0.0004 -0.06%
美元加元 1.3816 -0.0011 -0.08%
恒生指数 25339.1 208.8 0.83%
日经225 42633.29 23.12 0.05%
英国FT 9321.40 12.20 0.13%
德国DAX 24363.09 69.75 0.29%
标普500 6466.91 96.74 1.52%
}