Dall’editore · ITANU
ITANU pubblica questa rivista e sviluppa i prodotti di cui parla questo articolo. È il punto di vista dell’azienda, non un articolo di cronaca.
Oracle Max di KolWrite fa meno errori nel test pubblico su 22 sistemi di trascrizione per l’ebraico
Sulle 792 registrazioni in ebraico del test FLEURS, Oracle Max ha registrato un tasso di errore per parola del 12,6%. Per gli stessi brani, i valori dei 21 sistemi nella classifica pubblica di ivrit.ai vanno dal 17,4% al 46,0%.
I numeri tra parentesi quadre rimandano alle fonti elencate sotto.
Il 21 novembre 2026 abbiamo provato Oracle Max, il piano cloud più avanzato di KolWrite, la nostra applicazione di trascrizione, su tutte le registrazioni in ebraico di FLEURS. In ebraico questo insieme pubblico di dati per i test sul parlato comprende 792 frasi registrate, per un totale di 13.751 parole[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. Il tasso di errore per parola è stato del 12,6%[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. La classifica di ivrit.ai per la trascrizione in ebraico riporta, per 21 sistemi valutati sugli stessi brani, tassi di errore compresi tra il 17,4% e il 46,0%[2ivrit.aibenchmark.csv · ivrit-ai/hebrew-transcription-leaderboardApri la fonteFonti [2]].
I risultati pubblicati
Il tasso di errore per parola si calcola sommando le parole trascritte male, omesse o aggiunte dal sistema e dividendo il risultato per il numero di parole pronunciate[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. Per le registrazioni in ebraico di FLEURS riportiamo il valore che abbiamo misurato e sei valori tratti dalla classifica[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1], 2ivrit.aibenchmark.csv · ivrit-ai/hebrew-transcription-leaderboardApri la fonteFonti [2]].
- KolWrite Oracle Max, 12,6%[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]
- Soniox, 17,7%[2ivrit.aibenchmark.csv · ivrit-ai/hebrew-transcription-leaderboardApri la fonteFonti [2]]
- ElevenLabs Scribe v1, 18,1%[2ivrit.aibenchmark.csv · ivrit-ai/hebrew-transcription-leaderboardApri la fonteFonti [2]]
- OpenAI gpt-4o-transcribe, 21,0%[2ivrit.aibenchmark.csv · ivrit-ai/hebrew-transcription-leaderboardApri la fonteFonti [2]]
- Amazon Transcribe, 23,0%[2ivrit.aibenchmark.csv · ivrit-ai/hebrew-transcription-leaderboardApri la fonteFonti [2]]
- Deepgram Nova-3, 23,3%[2ivrit.aibenchmark.csv · ivrit-ai/hebrew-transcription-leaderboardApri la fonteFonti [2]]
- Google Speech, 38,5%[2ivrit.aibenchmark.csv · ivrit-ai/hebrew-transcription-leaderboardApri la fonteFonti [2]]
Il valore più basso in classifica, il 17,4%, è quello di un modello per l’ebraico pubblicato dalla stessa ivrit.ai[2ivrit.aibenchmark.csv · ivrit-ai/hebrew-transcription-leaderboardApri la fonteFonti [2]]. Con il 12,6%, Oracle Max si colloca sotto tutti i 21 valori[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. A questo tasso, il sistema trascrive esattamente sette parole su otto. Il criterio è rigoroso. Anche una grafia diversa di un nome conta come errore[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]].
Stesse registrazioni e stesso metodo di valutazione
FLEURS raccoglie frasi lette ad alta voce e registrate in 102 lingue, con circa 12 ore di parlato per lingua[3arXivFLEURS: Few-shot Learning Evaluation of Universal Representations of SpeechApri la fonteFonti [3]]. La sezione di test in ebraico comprende 792 registrazioni[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. Per valutare Oracle Max abbiamo seguito il metodo pubblicato da ivrit.ai per la classifica. Abbiamo rimosso i segni vocalici e la punteggiatura, uniformato maiuscole e minuscole e calcolato un unico tasso di errore su tutte le parole di tutte le registrazioni[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. Prima della prova, con la nostra copia del codice di valutazione abbiamo riprodotto i valori in tabella con uno scarto massimo di 0,17 punti percentuali[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]].
Abbiamo inviato le registrazioni tramite l’API pubblica di KolWrite, lo stesso servizio usato dai clienti, selezionando l’ebraico come lingua[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. Nel calcolo rientrano tutte le 792 registrazioni[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. In un caso il sistema non ha restituito alcun testo e ogni parola è stata conteggiata come errore[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]].
In testa in 10.000 ricampionamenti su 10.000
Il divario tra due tassi di errore può dipendere dalle frasi incluse nel test[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. Per verificare il divario che abbiamo misurato, abbiamo confrontato le trascrizioni pubblicate da ivrit.ai per 16 dei 21 sistemi con quelle di Oracle Max, registrazione per registrazione[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. Dalle 792 registrazioni abbiamo estratto 10.000 campioni casuali, valutando entrambi i sistemi di ogni confronto sullo stesso campione[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. In tutti i 10.000 campioni Oracle Max ha avuto un tasso di errore inferiore a quello di ciascuno dei 16 sistemi[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]].
Soniox è il sistema che più si avvicina a Oracle Max[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. Il vantaggio di Oracle Max è di 5,1 punti percentuali, con un intervallo al 95% che va da 4,3 a 5,9 punti[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. In termini di parole, Oracle Max ha commesso 1.734 errori contro i 2.435 di Soniox, il 29% in meno[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. Oracle Max ha commesso il 31% in meno di errori sulle parole rispetto a ElevenLabs Scribe v1, il 40% in meno rispetto a gpt-4o-transcribe di OpenAI e il 67% in meno rispetto a Google Speech[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]].
Oracle Max ha trascritto senza errori 309 frasi su 792[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. Tra i 16 sistemi di confronto il risultato migliore è stato di 218 frasi senza errori[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. Per gli altri cinque sistemi non sono disponibili trascrizioni pubbliche di queste registrazioni. I tassi pubblicati, dal 17,4% al 24,5%, superano tutti il limite superiore dell’intervallo al 95% di Oracle Max, pari al 14,1%[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]].
Che cosa copre il test
Abbiamo svolto una sola prova il 21 novembre 2026 su frasi lette in ebraico, con una sola voce per registrazione[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. I dati degli altri sistemi provengono dalle prove condotte da ivrit.ai con le versioni indicate in classifica[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. Stiamo svolgendo lo stesso confronto in altre lingue e pubblicheremo ciascun confronto insieme ai relativi file[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]].
Come verificare i risultati
Tutte le 792 trascrizioni, ciascuna con la frase di riferimento e il punteggio, sono disponibili nel file pubblico all’indirizzo itanu.org/data/oracle-max-hebrew-fleurs-792-2026-11-21.csv[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. La nota che accompagna il file descrive il metodo e riporta la tabella con tutti i confronti e il seme usato dal generatore di numeri casuali[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]]. Anche le trascrizioni della classifica sono pubbliche e chiunque può ripetere il confronto[1ITANU Studios LtdKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Apri la fonteFonti [1]].
Fonti
- 1Materiale fornito da ITANU Studios Ltd
FornitoKolWrite Oracle Max on the full Hebrew FLEURS test: 792 clips, measured 21 November 2026Consultata
- 2benchmark.csv · ivrit-ai/hebrew-transcription-leaderboard
Indipendenteivrit.aiConsultata
- 3FLEURS: Few-shot Learning Evaluation of Universal Representations of Speech
PrimariaarXivConsultata
Il sistema di redazione di ITANU ha prodotto questo articolo con l’IA e lo ha verificato sulle fonti indicate sopra. Come lavoriamo

