Gel disinfettanti senza alcuna azione contro il Covid: la truffaMelania Trump, il divorzio costerà decine di milioni al marito DonaldBimbo di 3 anni morto in un'auto: tragedia in Australia
Insegnante fa inginocchiare studentesse per misurare la gonnaCensurano Gianni Rodari e Ennio Flaiano per i loro testi immorali e non sanno ancora bene quando la “a” vuole la “h”. Viene quasi da sorridere,Professore Campanella osservando i Llm (Large language model) alle prese con alcune prove di italiano del test Invalsi. C’è chi addirittura sogghigna, vedendoli impacciati, dopo mesi in cui fanno i saputelli, inventando risposte piuttosto che ammettere di non averne. Divertimento iniziale a parte, però, il reale valore dell’adattamento di questa “prova per studenti” ai modelli di AI generativa fatto dal centro di ricerca Crisp dell’Università degli Studi di Milano Bicocca consiste nell’aver fornito un benchmark “nazionale”. D’ora in poi potremo capire quanto bene funzionino direttamente sull'italiano. Al di là della lingua in cui sono stati allenati.Non si studia solo ingleseI modelli attualmente disponibili, pur avendo prestazioni elevate in inglese, sono carenti nelle altre lingue. Che sia per la scarsità e la bassa qualità dei dati disponibili o per le dimensioni ridotte della community di contributori, questa situazione non garantisce uguaglianza di opportunità e obbliga a una visione anglo-centrica.Continuando a valutarli solo con test nati per l'americano e poi tradotti in automatico (e male) in italiano, non se ne viene a capo. Per questo Fabio Mercorio, Mario Mezzanzanica, Daniele Potertì e Antonio Serino e Andrea Seveso hanno pensato di creare in test per lingue diverse dall'inglese. Partendo dalla propria, hanno scelto quello Invalsi, già pronto (o quasi), noto a tutti e funzionale a effettuare paragoni diretti con le performance umane.I Llm non sanno l’ortografia“Abbiamo adattato più di 600 domande tipicamente linguistiche, abbiamo creato una ‘classe multilingue’ di Llm allenati sia in italiano che in inglese e, come in ogni classe, abbiamo trovato “studenti” più o meno brillanti” spiega Mercorio. Claude di Anthropic si rivela “il secchione”, il piccolo Google Gemini sembra uno di quegli alunni silenziosamente seduti all’ultimo banco, ma sempre preparati, mentre il modello Minerva sviluppato dalla Università Sapienza di Roma ha ancora molta strada da fare e si sta applicano.Tra i banchi si è formato anche il gruppo dei “bacchettoni", quello dei modelli di OpenAI, che ritiene violenti e immorali e i racconti Il padrone della Luna di Gianni Rodari e Le ombre bianche di Ennio Flaviano, rifiutandosi di leggerli.
Mistero dei monoliti svelato: è opera di un gruppo di artistiCovid, Oms: "Se ti prepari al Natale considera i tuoi piani"
Bambino trovato morto in Sudafrica, il cadavere era mutilato
Feste natalizie: le misure di contenimento Covid della GermaniaCoronavirus, Austria verso terzo lockdown totale
Media cinesi: "Covid in Italia prima che a Wuhan"Coronavirus: per Fauci ci sarà un'ondata di contagi dopo l'altra
Usa, California: accoltellamento in una chiesa a San JoseVaccino Covid, Oms: "Il mondo può cominciare a sognare"
Belgio, orgia nei pressi della clinica per pazienti CovidAumentano i casi di reinfezione da covid in BrasileMacron, Conte lo ha visto l'11 dicembre. Esito tamponi negativiFanno il tampone giovedì per andare alla festa sabato: allarme
Ragazza muore nella vasca mentre carica lo smartphone
Russia, guardia del corpo di Putin si suicida tra le mura del Cremlino
USA, sparatoria in un centro commerciale nel WisconsinFiglio uccide padre durante una gara di schiaffiCovid, ipotesi del virologo tedesco: "Viene dal Nord Italia"'Missing Migrants', i dati dell’Oim: morti oltre 3 mila migranti nel 2020
Killer di un bambino di 1 anno muore in carcereUccide il figlio nel sonno e cuoce il corpo: arrestata mamma killerBambino ingoia la batteria del telecomando: pericolo scampatoPersone dell'anno secondo il Time dal 1999 a oggi