内容摘要PANews称OpenAI API支持12小时提示词缓存,Codex和Work登录用户缓存可永久保留。
正文
OpenAI API 推出 12 小时提示词缓存,Codex 和 Work 登录用户的缓存永久保留
PANews 10月21日消息,据 OpenAI Developers,OpenAI API 现在支持 12 小时的提示词缓存(prompt caching)。开发者可以把共享的指令、工具和上下文缓存更长时间,即使请求之间隔了几个小时,也能按较低的缓存输入价格计费。这项功能主要面向持续运行、全天复用上下文的智能体。Tibo(@thsottiaux)随后补充,Codex 和 Work 的登录用户的缓存将永久保留。用户回到旧对话,或者隔几小时再继续时,都能命中缓存,不会产生额外费用。
原文链接:https://www.panewslab.com/zh/articles/01a15c05-f237-73d6-8b72-63345c0d5e9f
AI 辅助解读
以下为辅助分析,与已报道事实分开展示;重要信息请进一步核实。
提示词缓存是把重复使用的指令、工具和上下文暂时保存起来。按照报道,OpenAI API的缓存时间可达12小时;Tibo还称,Codex和Work登录用户的缓存可永久保留。
对读者的影响
对于需要反复使用相同上下文的智能体,较长缓存可能减少重复输入,并让符合条件的请求按较低的缓存输入价格计费。
如果你会隔几小时继续旧对话,或让智能体持续运行,这项变化可能影响重复上下文的计费;但具体适用范围仍需核实。
风险与未知
- 给定材料未包含OpenAI原始公告或定价条款。
- 12小时缓存适用的模型、价格及生效时间未说明。
- Codex和Work“永久保留”及“不产生额外费用”的具体适用范围未说明。
- Tibo补充内容的原始出处未包含在材料中。