Natural Language Toolkit adalah pustaka Python untuk linguistik komputasi.
Saya membaca buku ini ( NLTK ) dan itu membingungkan. Entropi adalah didefinisikan sebagai : Entropi adalah jumlah dari probabilitas setiap label dikalikan dengan probabilitas log dari label yang sama Bagaimana saya bisa menerapkan entropi dan entropi maksimum dalam hal penambangan teks?...
Saat mencoba memuat punkttokenizer ... import nltk.data tokenizer = nltk.data.load('nltk:tokenizers/punkt/english.pickle') ... a LookupErrordibesarkan: > LookupError: > ********************************************************************* > Resource 'tokenizers/punkt/english.pickle'...
Bagaimana cara menemukan daftar dengan semua kemungkinan tag pos yang digunakan oleh Natural Language Toolkit
Saya mencari cara untuk membagi teks menjadi n-gram. Biasanya saya akan melakukan sesuatu seperti: import nltk from nltk import bigrams string = "I really like python, it's pretty awesome." string_bigrams = bigrams(string) print string_bigrams Saya sadar bahwa nltk hanya menawarkan bigrams dan...
Saya ingin memeriksa program Python jika ada kata dalam kamus bahasa Inggris. Saya percaya antarmuka wordnet nltk mungkin cara untuk pergi tapi saya tidak tahu bagaimana menggunakannya untuk tugas yang sederhana. def is_english_word(word): pass # how to I implement
Kapan saya menggunakan masing-masing? Juga ... apakah lemmatisasi NLTK tergantung pada Bagian Bicara? Bukankah lebih akurat jika
Saya baru mulai menggunakan NLTK dan saya tidak begitu mengerti bagaimana cara mendapatkan daftar kata dari teks. Jika saya menggunakan nltk.word_tokenize(), saya mendapatkan daftar kata dan tanda baca. Saya hanya membutuhkan kata-kata saja. Bagaimana cara menghilangkan tanda baca? Juga...
Jadi saya memiliki kumpulan data yang ingin saya hapus kata-kata henti dari penggunaan stopwords.words('english') Saya berjuang bagaimana menggunakan ini dalam kode saya untuk hanya mengambil kata-kata ini. Saya sudah memiliki daftar kata-kata dari kumpulan data ini, bagian yang saya perjuangkan...
Dalam skrip shell saya memeriksa apakah paket ini diinstal atau tidak, jika tidak diinstal maka instal. Jadi dengan skrip shell: import nltk echo nltk.__version__ tetapi menghentikan skrip shell pada importbaris di terminal linux mencoba melihat dengan cara ini: which nltk yang tidak...
Saya mengalami kesulitan menggunakan pip untuk menginstal hampir semua hal. Saya baru mengenal pengkodean, jadi saya pikir mungkin ini adalah kesalahan yang telah saya lakukan dan telah memilih untuk keluar dari easy_install untuk menyelesaikan sebagian besar dari apa yang perlu saya selesaikan,...
Kode Saya: import nltk.data tokenizer = nltk.data.load('nltk:tokenizers/punkt/english.pickle') Pesan eror: [ec2-user@ip-172-31-31-31 sentiment]$ python mapper_local_v1.0.py Traceback (most recent call last): File "mapper_local_v1.0.py", line 16, in <module> tokenizer =...
Saya mengikuti tutorial yang tersedia di Bagian 1 & Bagian 2 . Sayangnya penulis tidak memiliki waktu untuk bagian terakhir yang menggunakan kesamaan kosinus untuk benar-benar menemukan jarak antara dua dokumen. Saya mengikuti contoh dalam artikel dengan bantuan tautan berikut dari...
Apakah mungkin menggunakan Stanford Parser di NLTK? (Saya tidak berbicara tentang Stanford POS.)