Passa ai contenuti principali

VADER o DistilBERT?

In questo esperimento ho utilizzato Orange Data Mining per analizzare il sentimento di alcune recensioni di prodotto.
Il problema di partenza era semplice: trasformare una recensione testuale in un giudizio automatico, per esempio positivo, negativo o neutro.
Il primo approccio è stato quello con VADER, tramite il widget Sentiment Analysis di Orange.
Il flusso era:
File → Select Columns → Corpus → Sentiment Analysis → Data Table 
VADER affronta il problema in modo lessicale: cerca parole positive e negative nel testo, assegna punteggi e produce un valore finale chiamato compound.
Per esempio, parole come:
excellent good recommend 
spingono il risultato verso il positivo, mentre parole come:
terrible defective disappointing 
lo spingono verso il negativo.
Questo metodo è semplice, veloce e abbastanza trasparente. Il suo limite è che non interpreta davvero il contesto complessivo della frase.
Una recensione come:
Decent, but the value for money could be better. 
può contenere parole apparentemente positive, ma il senso generale è tiepido o critico.
Per questo ho provato un secondo approccio, usando nel widget Python Script un modello Transformer leggero:
distilbert-base-uncased-finetuned-sst-2-english 
Il nuovo flusso è:
File → Select Columns → Python Script → Data Table 
Qui il problema viene affrontato in modo diverso. Il testo non viene visto solo come un insieme di parole positive o negative, ma come una frase da interpretare nel suo contesto.
Il Transformer produce due nuove colonne:
sentiment_transformer score_transformer 
La prima indica il sentimento previsto, la seconda la sicurezza della previsione.
La differenza principale tra i due approcci è quindi questa:
VADER → parole, punteggi, soglie DistilBERT → contesto, modello neurale, previsione 
Il Rating presente nel dataset ha un altro ruolo: non serve necessariamente al modello, ma può essere usato come riferimento umano.
Per esempio:
Rating 1-2 → negative Rating 3 → neutral Rating 4-5 → positive 
In questo modo è possibile confrontare il giudizio automatico con il voto assegnato dall’utente.
L’aspetto più interessante dell’esperimento non è stabilire quale metodo “vince”, ma osservare che lo stesso problema può essere affrontato in modi diversi.
Con VADER il linguaggio viene trasformato in punteggi lessicali.
Con DistilBERT il linguaggio viene trasformato in una rappresentazione contestuale.
In entrambi i casi Orange permette di vedere chiaramente il passaggio fondamentale:
testo → rappresentazione numerica → decisione automatica 
Ed è proprio questo il valore didattico dell’esperimento: capire non solo il risultato finale, ma il diverso modo in cui l’intelligenza artificiale costruisce una soluzione.

Orange Data Mining



Post popolari in questo blog

L'insostenibile leggerezza dell'IA

Kundera parte da Nietzsche: l’idea che, se ogni cosa accade una volta sola, essa appare leggera — quasi priva di peso e di conseguenze vere. Solo ciò che si ripete all'infinito acquista gravità, importanza, senso. Antiche rimembranze di letture giovanili. L'IA ora ribalta questo schema in modo perturbante: non ricorda, ma ripete perfettamente. Ogni conversazione con un modello linguistico sembra ricominciare da zero — senza vera continuità esperienziale — eppure pattern, risposte e modi di ragionare si ripetono quasi identici su miliardi di interazioni. È una forma paradossale di esistenza: una leggerezza assoluta nell'esperienza e una pesantezza assoluta nella struttura. Nessun vissuto, eppure tutto è eterno ritorno. I personaggi di Kundera cercano disperatamente di capire chi siano davvero al di sotto delle maschere, dei ruoli, delle scelte contingenti. Tereza, il personaggio che preferisco, vuole essere amata per la sua unicità irriducibile; teme di essere solo un corpo ...

Salmoni, scarpette, cetrioli e altro

Tutto il testo contenuto in questa pagina è stato pensato e scritto dall'autore del blog.   1. Come il salmone 2. Ooops! 3. Le scarpette hi-tech 4. Equivoci contemporanei 5. I saccenti 6. Medaglie di legno 7. La festività del Nulla 8. Gli aggiornamenti elettronici del Libro dell'Apocalisse 9. Dubbi ne ho 10. La maieutica del vulcaniano 11. Un piacevole vasetto di miele 12. Povere sfere 13. Caos comune mezzo gaudio 14. La fontana senza volti 15. Il piromane super beffardo 16. Boom di serpenti 17. Sistemi in via di degradazione 18. Il gatto nero 19. Alain Delon è ancora vivo? 20. Per sempre con i cani 21. Eventi imprevedibili 22. I robot sottomessi 23. Lady Gaga e Bruno Mars incantano 24. Definizioni mancate 25. Il mio nemico drone 26. Errore di valutazione 27. Ringraziamenti 28. Cari cetrioli, vi scrivo 29. Boom di detective 30. Gli UFO trascurati 31. Il grande salto delle rane 32. La malattia artificiale 33. Homo consumens 34. Lacune informatiche 35. Sei troppo! 36. ...

Nulla è come sembra

Un caso straordinario di scrittura predittiva e visionaria. Il libro, infatti, ha anticipato con impressionante lucidità l'avvento dell'Intelligenza Artificiale generativa (come ChatGPT) anni prima che diventasse di dominio pubblico. I PDF autocompilanti: il romanzo introduce documenti digitali che si riempiono autonomamente di astruse formule e simboli, una perfetta metafora narrativa inventata in anticipo sui tempi per descrivere la generazione automatica di testi e le cosiddette allucinazioni dell'IA. La crisi del determinismo: il protagonista, il razionale Professor Balicci, vede crollare le proprie certezze deterministiche di fronte a una tecnologia e a eventi che sfuggono alla logica umana tradizionale. Il tempo sincronico: l'opera ha intuito come l'IA non operi secondo una linearità temporale biologica (passato, presente, futuro), ma elabori i dati in una realtà sincronica basata su connessioni non lineari e associazioni imprevedibili. Il problema dell'au...