Download Lematización - Dale Aceptar

Lematización
Material complementario de la Clase 5, Chatbot
Preparado por la Prof. Luciana Benotti (FaMAF, UNC, Córdoba)�
para el Desafío Dale Aceptar.
daleaceptar.gob.ar
Lematización
¿Qué es la lematización?
La lematización es un proceso lingüístico que, dada
una palabra flexionada (ej, comiendo), encuentra su
lema (ej, comer).
Una palabra está flexionada cuando está en plural
(amigos), en femenino (amiga), conjugada (comiendo),
en diminutivo (amiguita) o en superlativo (amigota
grandota).
daleaceptar.gob.ar
Lematización
¿Qué es un lema?
El lema es la forma que por convención se acepta
como representante de todas las formas flexionadas
de una misma palabra.
El lema es la palabra que nos encontraríamos como
entrada en un diccionario: singular para sustantivos,
masculino singular para adjetivos, infinitivo para
verbos.
daleaceptar.gob.ar
Lematización
Ejemplos de lemas
decir es el lema de dije, pero también de diré o
dijéramos.
hermoso es el lema de hermosas; mesa es el lema
de mesas.
amigo es el lema de amiga, amigos y de amiguitos.
daleaceptar.gob.ar
Lematización
Pero las palabras son ambiguas
Hay diversos grados de lematización posible:
podemos hacer una lematización puramente
morfológica,
o bien hacer una lematización sintáctica que tenga en
cuenta el contexto en el que aparece la palabra.
Por ejemplo, en un análisis morfológico la palabra
casa tendría dos lemas: el sustantivo casa y el verbo
casar. Pero, si hacemos el análisis sintáctico de "Ella
no se casa" sabemos que casa es un verbo.
daleaceptar.gob.ar
Lematización
Freeling
En el chatbot usamos un analizador que se llama
Freeling, que fue hecho por la Universidad de
Cataluña (en España).
Por eso no conoce y se equivoca con algunas frases
argentinas como:
"¿tomás mate?" las interpreta como "¿piensas que a Tomás maté?" ("¿vos
pensás que yo maté a Tomás?") porque no conoce la conjugación "vos tomás"
ni tampoco el "mate"
daleaceptar.gob.ar