Dall’editore · ITANU
ITANU pubblica questa rivista e sviluppa i prodotti di cui parla questo articolo. È il punto di vista dell’azienda, non un articolo di cronaca.
Oracle Max di KolWrite ottiene il tasso di errore più basso in cinque lingue in un test pubblico
Nel test FLEURS, in cinque lingue nessun sistema dell’Open ASR Leaderboard ha un tasso di errore per parola inferiore a quello di Oracle Max. In italiano il tasso è dello 0,72%.
I numeri tra parentesi quadre rimandano alle fonti elencate sotto.
Il 21 e il 22 novembre 2026 abbiamo sottoposto Oracle Max, il livello di servizio cloud più avanzato della nostra applicazione di trascrizione KolWrite, al test FLEURS in cinque lingue. La prova ha riguardato italiano, tedesco, spagnolo, portoghese brasiliano e francese[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. In tutto sono 4.230 frasi registrate, circa 15 ore di parlato[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. Per le stesse registrazioni l’Open ASR Leaderboard pubblica i risultati di altri 46-48 sistemi[3Hugging FaceOpen ASR LeaderboardApri la fonteFonti [3]]. In quattro lingue Oracle Max ha il tasso di errore per parola più basso in assoluto. In spagnolo condivide il primo posto con un altro sistema[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1], 3Hugging FaceOpen ASR LeaderboardApri la fonteFonti [3]].
I cinque risultati
Il tasso di errore per parola si calcola sommando le parole sostituite, omesse o aggiunte dal sistema e dividendo il totale per il numero di parole pronunciate[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. Per ogni lingua riportiamo il nostro risultato e il tasso più basso tra gli altri sistemi in classifica[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1], 3Hugging FaceOpen ASR LeaderboardApri la fonteFonti [3]].
- Italiano: Oracle Max 0,72%, ElevenLabs Scribe v2 0,90%[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1], 3Hugging FaceOpen ASR LeaderboardApri la fonteFonti [3]]
- Tedesco: Oracle Max 1,58%, Microsoft Azure Speech 1,62%[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1], 3Hugging FaceOpen ASR LeaderboardApri la fonteFonti [3]]
- Spagnolo: Oracle Max 1,76%, Microsoft Azure Speech 1,76%[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1], 3Hugging FaceOpen ASR LeaderboardApri la fonteFonti [3]]
- Portoghese: Oracle Max 2,35%, Microsoft Azure Speech 2,45%[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1], 3Hugging FaceOpen ASR LeaderboardApri la fonteFonti [3]]
- Francese: Oracle Max 2,54%, Microsoft Azure Speech 2,64%[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1], 3Hugging FaceOpen ASR LeaderboardApri la fonteFonti [3]]
In italiano Oracle Max ha trascritto senza errori 753 frasi su 865, con un totale di 152 errori su 21.223 parole[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. La classifica attribuisce a gpt-transcribe di OpenAI un tasso dell’1,35% in italiano e del 3,45% in francese. Per Universal-3.5 Pro di AssemblyAI i valori sono rispettivamente dell’1,03% e del 2,82%[3Hugging FaceOpen ASR LeaderboardApri la fonteFonti [3]].
Stesse registrazioni e stessi criteri di valutazione
FLEURS raccoglie registrazioni di frasi lette ad alta voce in 102 lingue[2arXivFLEURS: Few-shot Learning Evaluation of Universal Representations of SpeechApri la fonteFonti [2]]. Abbiamo usato le stesse registrazioni di prova e gli stessi testi di riferimento della classifica. Per valutare Oracle Max abbiamo utilizzato il codice pubblicato dall’Open ASR Leaderboard[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. Prima del confronto abbiamo ricalcolato i risultati sui file originali della classifica con la nostra copia del codice. Per tutti i 169 valori lo scarto rispetto alla tabella pubblicata è stato al massimo di 0,13 punti percentuali[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]].
Abbiamo inviato le registrazioni tramite l’API pubblica di KolWrite, lo stesso servizio a cui accedono i clienti, indicando ogni volta la lingua[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. Tutte le registrazioni sono entrate nel calcolo e per ciascuna abbiamo ricevuto una trascrizione[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]].
Il confronto sulle singole registrazioni
Per 33 o 34 sistemi, a seconda della lingua, la classifica pubblica la trascrizione di ogni registrazione. Si possono così confrontare due sistemi sulle stesse identiche frasi[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. Dalle registrazioni abbiamo estratto a sorte 10.000 nuovi campioni, valutando entrambi i sistemi su ciascun campione[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. In italiano, tedesco e francese Oracle Max ha ottenuto un tasso di errore inferiore a quello di ciascuno di questi sistemi. In ogni confronto l’intervallo al 95% per la differenza esclude lo zero[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]].
In spagnolo e in portoghese lo stesso vale per 33 sistemi su 34[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. Per il sistema rimanente, Voxtral Small di Mistral, lo scarto è di circa un decimo di punto percentuale, troppo poco per trarre una conclusione[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. In nessuna delle cinque lingue un sistema con dati per singola registrazione ha ottenuto un tasso più basso di Oracle Max[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]].
I sistemi senza trascrizioni pubbliche
Per Microsoft Azure Speech, ElevenLabs, AssemblyAI e OpenAI la classifica riporta un solo risultato complessivo per lingua, senza un file con i dati delle singole registrazioni[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. Possiamo affiancare i valori, ma i dati disponibili non consentono di verificare la significatività dello scarto[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. In tedesco, spagnolo, portoghese e francese il valore di Azure rientra nell’intervallo al 95% di Oracle Max. In queste quattro lingue i risultati sono quindi vicini[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. In italiano il limite superiore dell’intervallo è lo 0,86%, al di sotto del tasso di ogni altro sistema[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]].
La classifica comprende altre prove per queste lingue. Noi abbiamo eseguito soltanto il test FLEURS[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. FLEURS usa registrazioni pulite di testi letti ad alta voce. Le riunioni e le telefonate sono più difficili da trascrivere per tutti i sistemi[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. Abbiamo valutato anche altre lingue. Queste cinque sono quelle in cui nessun sistema ha ottenuto un tasso inferiore a Oracle Max in questo test[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]].
Come verificare i risultati
Ogni trascrizione è pubblica insieme al relativo punteggio[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]]. Il file per l’italiano è disponibile all’indirizzo itanu.org/data/oracle-max-italian-fleurs-865-2026-11-22.csv. La nota di accompagnamento, oracle-max-five-languages-fleurs-2026-11-22.md, descrive il metodo e contiene i collegamenti agli altri quattro file[1ITANU Studios LtdKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Apri la fonteFonti [1]].
Fonti
- 1Materiale fornito da ITANU Studios Ltd
FornitoKolWrite Oracle Max on the FLEURS test in Italian, German, Spanish, Portuguese and French, measured 21 and 22 November 2026Consultata
- 2FLEURS: Few-shot Learning Evaluation of Universal Representations of Speech
IndipendentearXivConsultata
- 3Open ASR Leaderboard
IndipendenteHugging FaceConsultata
Il sistema di redazione di ITANU ha prodotto questo articolo con l’IA e lo ha verificato sulle fonti indicate sopra. Come lavoriamo
