Categoría: Natural-language-processing

Usando los datos del corpus treebank_chunk, permítanos evaluar los chunkers (preparados en el artículo anterior). Código #1: # loading libraries from chunkers import ClassifierChunker from nltk.corpus import treebank_chunk    train_data = treebank_chunk.chunked_sents()[:3000] test_data = treebank_chunk.chunked_sents()[3000:]    # initializing chunker = ClassifierChunker(train_data)    # evaluation score = chunker.evaluate(test_data)    a = score.accuracy() p = score.precision() r … Continue reading «PNL | Fragmentación basada en clasificador | conjunto 2»

¿Qué son los trozos? Estos se componen de palabras y los tipos de palabras se definen utilizando las etiquetas de parte del discurso. Incluso se puede definir un patrón o palabras que no pueden ser parte de chuck y esas palabras se conocen como grietas. Una clase ChunkRule especifica qué palabras o patrones incluir y excluir … Continue reading «PNL | Fragmentación usando Corpus Reader»

En este artículo, vamos a discutir una técnica de procesamiento de lenguaje natural de modelado de texto conocida como modelo de bolsa de palabras . Siempre que aplicamos cualquier algoritmo en PNL, funciona en números. No podemos introducir directamente nuestro texto en ese algoritmo. Por lo tanto, el modelo Bolsa de palabras se usa para … Continue reading «Modelo de bolsa de palabras (BoW) en PNL»

¿Qué es el etiquetado de parte del discurso (POS)? Es un proceso de convertir una oración en formas: lista de palabras, lista de tuplas (donde cada tupla tiene una forma (palabra, etiqueta) ). La etiqueta en caso de es una etiqueta de parte del discurso e indica si la palabra es un sustantivo, un adjetivo, … Continue reading «PNL | Parte del discurso: etiquetado predeterminado»