TLN - Prima parte (Mazzei)
Stai vedendo l'anteprima delle prime pagine. Registrati per sbloccare le pagine restanti.
Di cosa parla
- Il livello linguistico rappresenta il concetto fondamentale che permette di passare dalla superficie del linguaggio a una rappresentazione più profonda attraverso moduli funzionali come l'analisi lessicale e morfologica, quella sintattica e l'interpretazione semantica.
- L'identificazione dei confini delle frasi (Sentence Segmentation) può essere affrontata tramite regole formali basate su pattern o mediante tecniche di machine learning che utilizzano alberi decisionali per classificare i caratteri come inizio o fine frase.
- Il livello morfologico e lessicale si basa sull'utilizzo di analizzatori che scompongono le parole in morfemi, distinguendo tra forme composte con significato non composizionale e gestendo ambiguità tramite dizionari e regole per la lemmatizzazione o lo stemming.
- Le parti del discorso vengono classificate come parole a contenuto (nome, verbo) o funzioni linguistiche (preposizioni), distinte ulteriormente in categorie aperte che evolvono nel tempo e chiuse rimaste stabili storicamente.
- L'analisi sintattica trasforma una sequenza di parole in strutture dati che codificano le relazioni grammaticali, distinguendo tra rappresentazioni a costituenti annidati tipiche della tradizione statunitense e rappresentazioni a dipendenze.
Registrati e sblocca subito 3 appunti gratis, questo incluso.