Google Gemini 1.5 Pro Supera GPT-4o da OpenAI no Último Teste de Benchmark de IA

August 29, 2024

O modelo de IA Gemini 1.5 Pro do Google superou seus rivais em recentes benchmarks de IA generativa da LMSYS Chatbot Arena. O experimental Gemini 1.5 Pro 0801 alcançou uma pontuação de 1.300, ultrapassando o GPT-4o da OpenAI (1.286) e o Claude-3 da Anthropic (1.271).

Embora os benchmarks forneçam insights valiosos, eles podem não representar totalmente as capacidades de um modelo de IA em aplicações do mundo real. Apesar da disponibilidade do Gemini 1.5 Pro, seu status de lançamento antecipado sugere que o Google pode fazer ajustes ou retirar o modelo por razões de segurança ou alinhamento.