En el mundo del Procesamiento del Lenguaje Natural, hay dos métodos principales para tratar las palabras: el stemming y la lematización. El stemming se limita a eliminar los últimos caracteres de una palabra, lo que a menudo da lugar a significados y ortografías incorrectos. La lematización, por su parte, tiene en cuenta el contexto y convierte la palabra en su forma base significativa, que se denomina lema. A veces, una misma palabra puede tener varios lemas diferentes.
Stemming
El "stemming" y el "keyword stemming" se refieren al análisis del significado de una palabra y a la comprensión de las diferentes formas de una palabra en particular. consulta de búsqueda. Se llama "stemming" porque parte de la palabra tallo, base o forma de la raíz.
Ejemplo: Comprar >> Comprar, Comprado, Compra
En Stemming, te centras en el tema de la raíz y te abres camino hacia las variaciones de la palabra.
Lemmatización
La lematización es el proceso de agrupar las formas flexionadas de una palabra para analizarlas como una sola palabra en lingüística.
Ejemplo: Comprar, Comprado, Compra >> Comprar
En la lematización, se encuentra el tema raíz analizando las variaciones de las palabras clave.
Conclusión
Así pues, ¿qué es mejor para la PNL: la stemming o la lematización? La respuesta es... depende. Ambos métodos tienen sus pros y sus contras, y la mejor opción para su aplicación dependerá probablemente de la lengua específica con la que trabaje y de la tarea que realice. En general, sin embargo, la lematización suele considerarse más precisa que la derivación, ya que tiene en cuenta el contexto de una palabra para identificar correctamente su forma base. Si está buscando una forma más precisa de tratar las palabras en sus aplicaciones de PNL, la lematización es probablemente el camino a seguir si quiere identificar las palabras clave de partida, y el stemming para crear una lista de ideas de palabras clave.
Publicado en: 2022-03-28
Actualizado el: 2022-06-29
Spanish 
English 
Portuguese 
Japanese 
French 
Chinese