中文科技资讯
业界资讯 互联网 手机资讯 电脑硬件 数码产品 家电产品 APP应用 手机游戏 美通快讯

Meta推出Llama API,携手Cerebras和Groq打造超高速AI推理方案

2025-04-30来源:ITBEAR编辑:瑞雪

在科技界的瞩目下,meta公司在首届LlamaCon大会上不仅推出了独立的AI应用,还解锁了一项重要资源——Llama API,目前正以免费预览模式面向全球开发者开放。

据悉,Llama API为开发者提供了测试最新模型的机会,包括备受期待的Llama 4 Scout和Llama 4 Maverick。为了简化开发流程,meta公司特别设计了一键API密钥创建功能,并配备了轻量级的Type和Python SDK。这些举措使得开发者能够迅速上手,无需繁琐的配置。

更为贴心的是,Llama API完全兼容OpenAI SDK,为那些计划从OpenAI平台迁移应用的开发者提供了极大的便利。这意味着他们可以在不改变原有开发习惯的前提下,轻松切换至Llama API,享受meta带来的技术红利。

为了进一步提升Llama API的性能,meta携手Cerebras和Groq两大技术巨头展开合作。Cerebras宣称,其Llama 4 Cerebras模型的tokens生成速度高达2600 tokens/s,这一速度远超传统GPU解决方案,如NVIDIA,达到了18倍的领先优势。

根据Artificial Analysis的基准测试数据,Cerebras的这一速度不仅超过了ChatGPT的130 tokens/s,更是DeepSeek的25 tokens/s的数十倍之多。Cerebras的CEO兼联合创始人Andrew Feldman对此表示:“我们非常自豪能够让Llama API成为全球最快的推理API。在构建实时应用时,开发者对速度有着极高的要求,Cerebras的加入使得AI系统的性能达到了GPU云无法比拟的高度。”

而Groq提供的Llama 4 Scout模型虽然速度略逊于Cerebras,但也达到了460 tokens/s,相比其他GPU方案快了4倍。在费用方面,Groq上的Llama 4 Scout每百万tokens输入费用为0.11美元,每百万tokens输出费用为0.34美元;而Llama 4 Maverick的对应费用则分别为0.50美元和0.77美元。这些数据显示出Groq在提供高性能的同时,也保持了较低的成本。

此次meta推出的Llama API及其与Cerebras和Groq的合作,无疑为AI领域注入了新的活力。随着技术的不断进步和成本的进一步降低,AI应用将更加广泛地渗透到各个领域,为人类社会的发展带来前所未有的变革。

2025年苹果手机选移动流量卡指南:选卡要点+注销流程全解析
1. 网络制式要匹配:苹果手机支持多家运营商的网络,但确保你选择的移动流量卡能在你所在的区域提供稳定的4G/5G服务至关重要。 如果你办理了移动流量卡后,发现信号不好、套餐不合适,或者有其他原因需要注销,请…

2025-10-23

苹果手机双卡全攻略:从流量切换到高级设置,新手也能轻松掌握
苹果手机双卡切换与流量设置终极指南

2025-10-23

局部放电智能诊断工具:精准捕捉隐患,助力电力系统安全稳定运行
通过引入机器学习算法,诊断工具可以不断提高自身的预测精度和可靠性;通过构建大数据平台,可以实现对电力设备运行状态的全面监测和分析。 作为电力设备安全的“智能卫士”,正以其精准捕捉、智能分析、高效便捷等优势,在…

2025-10-22

漫游宝进军日本市场必看:JATE认证全流程解析与注意事项
JATE认证涵盖的产品范围相当广泛,主要包括以下几类设备:电话网络设备、无线呼叫设备、ISDN设备、租赁线路设备等。发证机构会仔细核查测试报告的完整性和准确性,确认设备完全符合认证要求后,即可颁发JATE认…

2025-10-22

联想Filez:以全球加速破传输壁垒,用合规管控守数据主权
除核心的全球加速与合规管控功能外,Filez 还从安全防护、协作效率、业务融合等维度提供全方位支撑,满足企业跨境协作的多元需求。联想Filez 以全球加速技术打破跨境传输效率瓶颈,以本地化合规管控筑牢数据…

2025-10-22

浙江公牛“5G+AI”智能工厂:工业神经网络织就,每2秒产一品效率领跑
在浙江,有这样一家工厂——“工业神经网络”覆盖30余万平方厂房,智能化渗透到制造的每一个细节,模具会自己“报位置”,黑灯车间全流程无人化生产,AI摄像头会实时发现违规行为和安全隐患,每2秒生产一个电连接产品…

2025-10-22

OpenAI发布ChatGPT Atlas浏览器:以AI对话重塑网络浏览新体验
(AI云资讯消息)当地时间10月21日,OpenAI正式发布全AI驱动的网页浏览器ChatGPTAtlas,将对话模型置于用户网络浏览体验的核心。ChatGPT Atlas浏览器不再依赖传统输入搜索和重复…

2025-10-22

商汤沙特SenseTime MEA携手中国电信(阿联酋) 共启阿曼智慧城市与数字化转型新篇
商汤科技业务涵盖生成式AI、视觉AI和创新业务,以高效率、低成本、规模化的AI创新和落地,打通商业价值闭环,引领人工智能进入工业化发展阶段。 商汤倡导“发展”的人工智能伦理观,并积极参与有关数据安全、隐私保…

2025-10-22

华为Mate 70 Air现身电信库,或携eSIM技术加入竞争与苹果同赛道角逐
iPhone Air马上就要在国内发售了,这是国内首款支持eSIM技术的手机,随着iPhoneAir的发售,后续也有更多支持该技术的手机,比如国产厂商的OPPO Find X9 Pro卫星通信版就支持了eS…

2025-10-22

EasyCVR级联GB28181协议“在线但失联”?从端口差异入手破解订阅无响应难题
总结:GB28181级联排查的3个关键思路抓包优先:协议级问题需从交互报文入手,重点关注REGISTER、SUBSCRIBE等核心指令的收发状态;端口校验:注册、订阅、心跳等环节需使用一致的端口(或提前约定动…

2025-10-21