AI
Pillole20.10.20261 min di lettura

Le promesse di ogni modello AI

Ogni nuovo modello AI arriva con la stessa promessa: fare meglio di quello che c’era prima.
La domanda che ci interessa, però, è un’altra: migliore, rispetto a cosa?

Un risultato convincente su un testo non ci dice necessariamente come lo stesso sistema si comporterà cambiando lingua, settore o tipologia di contenuto.
Ed è proprio su questo terreno che stiamo lavorando nello sviluppo di scenia®.

Con l’Università di Macerata è stato avviato un progetto di ricerca che mette a confronto sistemi basati sull’intelligenza artificiale e traduzione automatica neurale attraverso metriche oggettive, diverse combinazioni linguistiche e differenti tipologie di testo. 
A questo lavoro si affianca quello con il Dipartimento di Interpretazione e Traduzione dell’Università di Bologna – Campus di Forlì, dedicato alla costruzione di dataset di controllo e ricerca per la valutazione comparativa di scenia®.

L’obiettivo non è partire dalla convinzione che la tecnologia più nuova sia automaticamente quella più adatta.

È raccogliere dati sufficienti per capire come cambia la qualità al cambiare delle condizioni, dove un sistema offre risultati migliori e quali evidenze possono essere utili per orientare le successive scelte di sviluppo.

Perché una demo può mostrare che un modello funziona.
La ricerca serve a capire quanto, dove e in quali condizioni.
Ed è su questo che, per noi, vale la pena continuare a fare domande.

Quando valutate uno strumento AI in azienda, qual è l’evidenza che vi fa dire che è davvero migliore di quello che utilizzavate prima?