Parola in NLP: Unità Fondamentale del Language Processing

In Natural Language Processing (NLP), una parola è una sequenza di caratteri (lettere, numeri, simboli) che rappresenta un'unità linguistica significativa. È l'elemento libero più piccolo che trasmette contenuto semantico.

Aspetti Chiave

• Tokenizzazione: suddivisione testo in parole (token) – primo passo critico NLP.
• Parti del discorso: sostantivi, verbi, aggettivi, avverbi, ecc., ciascuno con ruoli grammaticali.
• Rappresentazioni: one-hot, TF-IDF, word embeddings (Word2Vec, GloVe, BERT) che catturano relazioni semantiche.
• Ambiguità: polisemia (significati multipli) e omonimia sfidano disambiguazione.

Le parole sono i mattoni di frasi, paragrafi, documenti; comprendere loro struttura e significato sottende tutti i task NLP.