La scorsa settimana Google ha annunciato l’uscita del nuovo modello Gemini-1.5-Pro-002, ora disponibile per gli sviluppatori. Per gli abbonati a pagamento è arrivato anche un aggiornamento per Gemini Advanced, che sfrutta una versione “ottimizzata per la chat” del modello 1.5 Pro-002.
Questo upgrade è stato progettato per migliorare le prestazioni in vari ambiti, inclusi quelli relativi a matematica, visione, generazione di codice e altre attività generali. Google ha fornito un confronto dettagliato tra il nuovo modello Gemini-1.5-Pro-002 e la versione precedente (lanciata a maggio 2024), evidenziando significativi miglioramenti nelle seguenti aree:
- Prestazioni Generali: C’è un aumento di circa il 7% nell’MMLU-Pro, una versione più impegnativa del popolare benchmark MMLU (Massive Multitask Language Understanding), che testa la conoscenza generale del modello in vari ambiti.
- Problemi Matematici: I benchmark MATH e HiddenMath (un set interno di problemi matematici avanzati) mostrano un miglioramento del 20% circa, indicando che il modello è ora in grado di risolvere equazioni matematiche complesse con maggiore efficacia.
- Visione e Codice: Il modello Gemini-1.5-Pro-002 ha ottenuto miglioramenti tra il 2% e il 7% anche nelle competenze visive e nella generazione di codice Python, con una maggiore capacità di comprendere immagini e rispondere a compiti di programmazione.
Per gli utenti di Gemini Advanced, questi miglioramenti si traducono in risposte più precise e affidabili, specialmente quando si trattano argomenti complessi o richieste articolate, che si tratti di ricevere spiegazioni su tematiche complicate o di eseguire calcoli matematici avanzati.
Google attribuisce questi progressi a un allenamento continuo dei modelli e all’ascolto dei feedback ricevuti dagli utenti, che contribuiscono a perfezionare il sistema per rispondere meglio alle esigenze quotidiane.
Il lancio di Gemini-1.5-Pro-002 arriva dopo una serie di aggiornamenti significativi alla piattaforma Gemini. A luglio, la versione gratuita di Gemini è stata aggiornata a 1.5 Flash, introducendo nuove funzionalità, e ad agosto sono stati effettuati miglioramenti significativi nella latenza, migliorando la reattività complessiva del sistema.