Natural Language Toolkit es una biblioteca de Python para lingüística computacional.
Estoy leyendo este libro ( NLTK ) y es confuso. La entropía se define como : La entropía es la suma de la probabilidad de cada etiqueta por la probabilidad de registro de esa misma etiqueta ¿Cómo puedo aplicar la entropía y la entropía máxima en términos de minería de texto? ¿Alguien puede...
Al intentar cargar el punkttokenizer ... import nltk.data tokenizer = nltk.data.load('nltk:tokenizers/punkt/english.pickle') ... a LookupErrorse planteó: > LookupError: > ********************************************************************* > Resource
¿Cómo encuentro una lista con todas las posibles etiquetas de posición utilizadas por Natural Language Toolkit
Estoy buscando una manera de dividir un texto en n-gramas. Normalmente haría algo como: import nltk from nltk import bigrams string = "I really like python, it's pretty awesome." string_bigrams = bigrams(string) print string_bigrams Soy consciente de que nltk solo ofrece bigrams y trigrams, pero...
Quiero comprobar en un programa de Python si una palabra está en el diccionario de inglés. Creo que la interfaz nltk wordnet podría ser el camino a seguir, pero no tengo idea de cómo usarla para una tarea tan simple. def is_english_word(word): pass # how to I implement
¿Cuándo uso cada uno? Además ... ¿la lematización de NLTK depende de las partes del discurso? ¿No sería más preciso si lo
Estoy empezando a usar NLTK y no entiendo cómo obtener una lista de palabras del texto. Si lo uso nltk.word_tokenize(), obtengo una lista de palabras y puntuación. Solo necesito las palabras en su lugar. ¿Cómo puedo deshacerme de la puntuación? Tampoco word_tokenizefunciona con varias oraciones: se...
Así que tengo un conjunto de datos que me gustaría eliminar el uso de palabras vacías stopwords.words('english') Estoy luchando por cómo usar esto dentro de mi código para simplemente eliminar estas palabras. Ya tengo una lista de las palabras de este conjunto de datos, la parte con la que estoy...
En el script de shell, estoy verificando si estos paquetes están instalados o no, si no están instalados, instálelos. Entonces, dentro del script de shell: import nltk echo nltk.__version__ pero detiene el script de shell en la importlínea en linux terminal traté de ver de esta manera: which...
Tengo dificultades para usar pip para instalar casi cualquier cosa. Soy nuevo en la codificación, así que pensé que tal vez esto es algo que he estado haciendo mal y he optado por easy_install para obtener la mayor parte de lo que necesitaba, que generalmente ha funcionado. Sin embargo, ahora estoy...
Mi código: import nltk.data tokenizer = nltk.data.load('nltk:tokenizers/punkt/english.pickle') Mensaje de error: [ec2-user@ip-172-31-31-31 sentiment]$ python mapper_local_v1.0.py Traceback (most recent call last): File "mapper_local_v1.0.py", line 16, in <module> tokenizer =...
Estaba siguiendo un tutorial que estaba disponible en la Parte 1 y la Parte 2 . Desafortunadamente, el autor no tuvo tiempo para la sección final que involucraba el uso de la similitud de coseno para encontrar la distancia entre dos documentos. Seguí los ejemplos del artículo con la ayuda del...
¿Es posible utilizar Stanford Parser en NLTK? (No estoy hablando de POS de Stanford).
Calculé que a menudo la respuesta a mi título es ir y leer la documentación, pero revisé el libro NLTK pero no da la respuesta. Soy un poco nuevo en Python. Tengo un montón de .txtarchivos y quiero poder usar las funciones de corpus que NLTK proporciona para el corpus nltk_data. Lo intenté...
NLTK versión 3.4.5. Python 3.7.4. OSX versión 10.14.5. La actualización de la base de código de 2.7 comenzó a encontrarse con este problema en este momento. He realizado una nueva reinstalación sin caché de todos los paquetes y extensiones, en un nuevo virtualenv. Bastante desconcertado sobre cómo...