中文科技资讯
业界资讯 互联网 手机资讯 电脑硬件 数码产品 家电产品 APP应用 手机游戏 美通快讯

谷歌Gemini 2.5 API新推隐式缓存功能,开发者成本有望大幅削减

2025-05-10来源:ITBEAR编辑:瑞雪

近期,科技界传来一则新动态,谷歌在其Gemini 2.5 API中引入了名为“隐式缓存”的新功能,旨在通过智能化手段降低开发者的成本。据科技媒体WinBuzzer于5月9日报道,这一创新技术能自动识别并重用API请求中的常见前缀,从而帮助开发者实现成本的大幅缩减,最高可达75%。

具体而言,“隐式缓存”功能适用于Gemini 2.5系列中的Pro和Flash模型。该功能无需开发者进行任何手动配置,系统默认启用,大大简化了操作流程。它通过自动检测并重用API请求中的重复前缀,有效提升了效率,降低了成本。

值得注意的是,“隐式缓存”与谷歌早前在2024年5月推出的“显式缓存”有所不同。后者需要开发者自行配置,而前者则完全由系统自动处理,不仅节省了成本,还显著提升了用户体验。为了最大化隐式缓存的效果,谷歌建议开发者在构建提示词时,将稳定且常见的内容置于开头,随后再添加用户特定的变量内容。

谷歌还指出,如果开发者在短时间内发送具有相似前缀的请求,将有助于提高缓存的命中率,进一步提升效率。不过,为了享受这一功能,开发者需要满足一定的Token数量要求:Gemini 2.5 Flash模型需至少1024个Token,而Gemini 2.5 Pro模型则需至少2048个Token。

为了帮助开发者更好地了解缓存的使用情况,谷歌在API响应中新增了“cached_content_token_count”字段。这一字段将显示缓存Token的使用详情以及优惠计费信息,让开发者能够清晰掌握成本节约的具体情况。

尽管谷歌宣称“隐式缓存”功能能够带来高达75%的成本节省,但实际效果仍需第三方进行验证。同时,由于不同开发者的使用模式可能存在差异,因此具体节省的幅度也可能有所不同。

谷歌并未完全放弃“显式缓存”方案。作为可选方案,显式缓存仍然支持Gemini 2.5及2.0模型,并允许开发者自定义缓存内容和生存时间(TTL,默认1小时)。这一灵活性使得开发者能够根据自身需求选择最适合的缓存方案。

技嘉B860M冰雕主板深度评测:千元价位与酷睿Ultra的完美搭档
XMP AI Boost的DDR5-8200 CL40挡位也能够顺利开启,再叠加上高带宽、低延迟功能的性能加成之后,内存性能继续得到提升,但写入性能基本上是到顶了,主要是受限于B860芯片组主板无法调整CP…

2025-11-14

杭州上城第三批50个“人工智能+”场景发布 涵盖多领域促发展
11月13日,杭州市上城区第三批“人工智能+”机会场景发布会暨场景供需对接会活动举行,推出50个高价值场景,涵盖社会治理、金融服务、民生服务、城市管理、智能建造、文化旅游、时尚消费等多个热门领域。如,由上城…

2025-11-14

高光谱探测器助力宽带叠层扫描成像 开启3D高光谱成像新篇
最近的研究表明,能量分辨或高光谱探测器可以在某种程度上取代单色器的作用来执行,例如,在单次采集中使用宽带辐射进行边缘减影叠层扫描成像。利用这样的探测器,时间相干性变得可调(在探测器的能量分辨率的限制内)并且在…

2025-11-12

乐鑫年会背后:17年创新坚守,从芯片到生态开启万物互联新征程
重要的是早在2024年,乐鑫科技就已成功突破Wi-Fi 6E技术,完成2.4GHz/5GHz/6GHz全频段技术布局,为Wi-Fi7产品研发奠定核心技术基础。 乐鑫从单枪匹马的上海浦东到登录科创板的行业排…

2025-11-12

中国电信携手多方完成2万公里中轨NTN在轨验证 助力6G天地一体组网
试验配置 Ka 频段 100MHz 带宽,基于自研的 NTN 终端样机,完成 FR2 频段 n510参数配置的透明转发模式在轨通信技术验证及海域宽带应用试点,实测下行峰值速率达 140Mbps(IT之家注…

2025-11-11

湖北Steam Deck下载遇阻?连接超时不用慌,这些方法助你畅享游戏
下载并安装UU加速器打开UU加速器,搜索并选择"Steam"在加速选项中,特别选择"下载异常专用"区服启动加速后再打开Steam Deck进行下载许多湖北用户反馈,使用这种方式后,原本停滞的下载进度条重新开…

2025-11-11

毕马威进博会聚焦运营服务:以智能驱动,助企业迈向可持续增长新路
毕马威运营服务四大核心价值运营重塑(Operational Reinvention)不只是把流程自动化,而是让智能成为业务的一部分。 在复杂监管中确保透明与合规在多业务场景中提升客户体验与决策质量在跨职能协作…

2025-11-11

解码细胞“对话”密码:单细胞转录组技术洞察疾病微环境奥秘
3. 通讯潜力: 如果细胞A表达配体,同时细胞B表达匹配的受体,那么A to B 的信号通路就被认为具有潜在的通讯活性。如果发现成纤维细胞通过TGF-β 信号轴强烈抑制 NK 细胞,那么 TGF-β 阻断…

2025-11-11

2025年AI智能鼠标深度体验:星火大模型赋能,它能替代哪些办公工具?
AI智能鼠标2025深度测评:星火大模型加持,AI问答、AI绘图能替代哪些工具?当一款鼠标,内嵌了如科大讯飞星火这般强大的认知大模型时,它所带来的,远不止是光标移动的流畅,更是一场关于效率与创造力的革命。我们…

2025-11-10