谷歌Gemini数学能力超越O1预览版!成本降低九成,即时运算

数学击败o1-preview,成本仅为十分之一,并且几乎没有思考延迟!

OpenAI《Her》全量开放同一天,谷歌Gemini 1.5迎来重大升级。

谷歌Gemini数学反超o1预览版!成本仅1/10、无需额外思考时间

除此之外,价格也是原来的一半,速度限制提升2-3倍;输出速度提升2倍、延迟降为原来三分之一。

开发者可以通过 Google AI Studio 和 Gemini API免费访问。聊天版本还得再等等。

不过也有网友发现了华点,虽然数学能力很强,但还是没有打败o1-mini以及o1完整版(94.8)。

谷歌Gemini数学反超o1预览版!成本仅1/10、无需额外思考时间
谷歌Gemini数学反超o1预览版!成本仅1/10、无需额外思考时间

此次更新的有两个型号:Gemini-1.5-Pro-002Gemini-1.5-Flash-002

总结来说,主要有这些更新:

  • 对于1.5pro(输入和输出都小于128K),降价幅度大于50%。
  • 速率限制提升2-3倍;
  • 输出速度提高2倍,延迟降低3倍;
  • 更新了默认过滤器设置。

首先,提升了整体性能,尤其在数学、长文本以及多模态方面。

在MMLU-Pro上性能提高约7%;而在 MATH 和 HiddenMath(内部保留的竞赛数学问题集)基准测试中,两种模型有约 20% 的显著改进,其中Pro版本以86.5%的成绩超过了o1-preview(85.5%)。

除此之外,在视觉理解和代码代码生成的评估中也有2%-7%的提升。

根据开发人员的反馈,这两个模型现在都采用了更简洁的风格,目的是使这些模型更易于使用并降低成本。

对于摘要、问题解答和提取等用例,更新后模型的默认输出长度比以前的模型短 5-20%。

价格方面,1.5pro输入token降价64%,输出token降价52%,对增量缓存token降价64%,10月1日开始生效。

谷歌Gemini数学反超o1预览版!成本仅1/10、无需额外思考时间

速率限制也有所提升,1.5 Flash的付费速率限制从1000RPM提高到2000RPM;1.5 Pro速率限制从360RPM到1000RPM。

另外,输出速度提高2倍,延迟减少为原来的三分之一。

谷歌Gemini数学反超o1预览版!成本仅1/10、无需额外思考时间

对于新模型,过滤器已切换成可选,默认情况下不会应用过滤器。

最后的最后,还有Gemini 1.5 Flash-8B实验版本更新,在文本和多模态能力方面都有显著的提升。

有网友就这么水灵灵地测试上了。

他测试了Gemini 1.5 Flash的音频转录功能。后者能在50-60秒内转录13分钟音频。

多个音频文件测试结果中,转录准确率接近99%。如果音频清晰,准确率能达到100%。

谷歌Gemini数学反超o1预览版!成本仅1/10、无需额外思考时间

有网友测试了它的视觉理解能力,结果顺利通过,之前难倒了一众视觉模型。

谷歌Gemini数学反超o1预览版!成本仅1/10、无需额外思考时间

不过讨论最多的还是它数学能力的提升。

谷歌Gemini数学反超o1预览版!成本仅1/10、无需额外思考时间

不过倒也有网友表示,数学基准也没啥用。它已经饱和,而且污染了大多数模型的训练数据。在现实世界的数学难题里,这些还是没办法跟o1系列相提并论。

谷歌Gemini数学反超o1预览版!成本仅1/10、无需额外思考时间

虽然但是,谷歌升级模型还有一个用处。

那就是push一下OpenAI,赶紧发布新模型,以此来“夺回王冠”。

什么时候赶紧把o1完整版发了。(Doge)

谷歌Gemini数学反超o1预览版!成本仅1/10、无需额外思考时间

版权所有,未经授权不得以任何形式转载及使用,违者必究。

免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,可联系本站进行审核删除。
(0)
AI快讯网编辑-青青AI快讯网编辑-青青
上一篇 2024年 9月 26日 上午7:47
下一篇 2024年 9月 26日 上午8:43

相关推荐

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

欢迎来到AI快讯网,开启AI资讯新时代!