Chatbot Arena Italia: comparazione LLM per l'italiano

È operativa dai giorni scorsi Chatbot Arena Italia, una nuova piattaforma crowdsourced e gratuita strutturata in modo da consentire l’interazione nella nostra lingua con i principali modelli linguistici, al fine di compararne le abilità, l’efficacia e l’affidabilità. La si può raggiungere attraverso il sito ufficiale di indigo.ai, realtà nostrana nota per gli assistenti virtuali basati su agenti AI.

La piattaforma Chatbot Arena Italia di indigo.ai

L’obiettivo dell’iniziativa è consentire agli utenti di sottoporre i loro prompt ai diversi LLM disponibili, votando poi le risposte ricevute e contribuendo così a determinarne la qualità. Come si può intuire già dal nome, è ispirata alla piattaforma globale Chatbot Arena lanciata nel 2023. Queste le parole di Enrico Bertino, Co-founder e Chief AI Officer di indigo.ai.

In indigo.ai lavoriamo con l’intelligenza artificiale già dal 2016: per questo siamo consapevoli del ruolo attivo che la community svolge in ambito AI. Abbiamo quindi scelto di avviare il progetto Chatbot Arena Italia per coinvolgerla attivamente anche sul nostro territorio, colmando la mancanza di una classifica solida e affidabile per le performance dei modelli di linguaggio in italiano.

Sono previste tre modalità di interazione.

• Arena (battaglie): consente di inviare un prompt e ricevere risposte da due modelli anonimi, scelti randomicamente dalla piattaforma. Solo dopo aver votato la risposta migliore tra quelle in output, sarà possibile scoprire con quali modelli si è interagito.
• Arena (fianco a fianco): consente di selezionare due modelli specifici tra quelli disponibili sulla piattaforma, da interrogare con lo stesso prompt. Non essendo condotte con modelli anonimi, tuttavia, tali interazioni non contribuiscono alla classifica di Chatbot Arena Italia.
• Chat diretta: consente di avviare una conversazione con uno specifico modello linguistico, valutandola.

I feedback raccolti alimentano la classifica, fornendo così una guida utile sia agli sviluppatori, sia a chi desidera orientarsi in un panorama in continua e rapida evoluzione, che solo nelle ultime settimane ha visto debuttare novità del calibro di o3-mini (OpenAI), DeepSeek R1 e Grok 3 (xAI). Conclude Bertino.

Il nostro obiettivo è quello di favorire lo sviluppo di un vero e proprio ecosistema della Gen AI in Italia, promuovendo un confronto trasparente e collaborativo tra i suoi protagonisti. Siamo convinti che la piattaforma possa diventare un vero e proprio punto di riferimento per appassionati ed esperti del settore, poiché rappresenta uno strumento essenziale per mappare in modo chiaro e trasparente lo stato dell’arte degli LLM nel nostro Paese.