尽(jin)管(guan)亮相时被OpenAI压了一(yi)头，但谷歌一(yi)直在悄悄迭代Gemini大模型，和OpenAI最新(xin)大模型GPT-4o的(de)差距已经显著缩小。最新(xin)测试结果显示，Gemini 1.5 Pro/Advanced在综合(he)测试中排名第 2，逼近GPT-4o，轻量版Gemini 1.5 flash排名第9，超越 Llama-3-70b，接近GPT-4。
相比4月份的(de)版本，免费的(de)Gemini Pro和Flash的(de)能力有明(ming)显加强。且上下(xia)文长度可以达到(dao)100万token，远(yuan)远(yuan)超出GPT-4的(de)12.8万token。
Gemini的(de)中文能力更是惊艳，在中文测试中，Gemini Pro和Advanced双双超越GPT-4o，分别(bie)排在第一(yi)、第二位(wei)。
此外，在Hard Prompts测试中，Gemini同(tong)样名列(lie)前茅。在Hard Prompts测试中，大模型需要面对那些(xie)更具挑战性的(de)问题，Gemini 1.5 Pro在这(zhe)一(yi)测试中排名第二，仅次(ci)于GPT-4o.
从大模型置信区间(jian)（Confidence Intervals）来看，Gemini的(de)测试结果也名列(lie)前茅。
值得一(yi)提的(de)是，两周(zhou)前，在Google Gemini更新(xin)撞档GPT-4o发(fa)布时。Gemini因(yin)为羸弱的(de)能力几乎引来了群嘲(chao)。根据多家科技博客的(de)测评，即(ji)使谷歌已经对1.5 Pro进行了数月的(de)改进，但从常识推理到(dao)多模态能力和代码能力，仍然无法与OpenAI最新(xin)的(de)GPT-4o模型相媲美。唯一(yi)亮点就是更大的(de)上下(xia)文窗口。如今谷歌Gemini取得了如此神速的(de)进步，显示出AI界届黄埔军校仍然有深厚的(de)技术底蕴。