跳到正文
热点事件持续更新

AWS 发布 Bedrock 上 OpenAI 模型提示词缓存最佳实践

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

AWS 发布教程,详解在 Amazon Bedrock 上使用 OpenAI 模型时如何配置 prompt caching(提示词缓存)。通过显式和隐式两种模式缓存工具的重复输入前缀,在多轮对话、工具变更、子 agent 调用和新会话等场景给出代码示例。实测 GPT-6 Astra 可降低约 64% 的输入成本。 符合条件的可复用前缀需达到 1,024 tokens,缓存写入费用为正常输入费率的 1.25 倍,缓存前缀在最新写入或成功复用上之后至少 30 分钟内仍可用于复用。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月27日
  1. AWS Machine Learning Blog
    AI agent 的 Groundhog Day 循环:在 Amazon Bedrock 上使用 OpenAI 模型时的 prompt caching 模式

    AWS 官方博客详解如何在 Amazon Bedrock 上为 OpenAI 模型配置 prompt caching,通过显式和隐式两种模式缓存工具的重复输入前缀,并在多轮对话、工具变更、子 agent 调用和新会话等场景下给出具体代码示例,实测 GPT-6 Astra 可降低约 64% 的输入成本。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。