热点事件持续更新
ArisGlobal 缓存共享提示前缀控制推理成本
1 篇报道1 个报道来源7 小时前更新
先了解这件事
SI 综述
AWS 机器学习博客称,ArisGlobal 在 Amazon Bedrock 上使用 Anthropic Claude Sonnet 4.5,将共享提示词前缀前置并缓存,典型请求 65% 的输入 token 由缓存提供,多租户生成式 AI 推理得以扩展,成本未随规模按比例增长。 此前,ArisGlobal 的共享前缀在 6 个月内增长约 150%,每案例推理成本增加超过 200%。
SI 根据报道生成 · 6 小时前更新
最新进展11月17日 23:57
ArisGlobal 在 Bedrock 前置并缓存共享提示前缀,典型请求 65% 输入 token 来自缓存。报道时间线
沿着报道,了解事件的不同侧面。
11月17日
- AWS Machine Learning Blog精选ArisGlobal 如何在 Amazon Bedrock 上扩展生成式 AI 推理
ArisGlobal 在 Amazon Bedrock 上通过前置并缓存共享提示词前缀,在不让成本按比例增长的情况下扩展多租户生成式 AI 推理。实现使用 Anthropic Claude Sonnet 4.5,此前共享前缀 6 个月增长约 150%,每案例推理成本增加超过 200%;调整后典型请求 65% 的输入 token 由缓存提供。
本事件热度走势
当前热度 8·可比范围峰值 10(11月18日 01:00)·近 24 小时可比范围变化 –
趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。