Cara Mengunduh & Menginstal NLTK

โšก Ringkasan Cerdas

Unduh dan Instal NLTK di Windows, Mac, atau Linux dengan menginstal Python pertama, kemudian menambahkan yang Alami Language Toolmenggunakan kit melalui pip atau Anaconda dan mengunduh dataset korpus.

  • โœ… Persyaratan: Install Python sebelum menambahkan NLTK.
  • โš™๏ธ Install: Gunakan pip, easy_install, atau Anaconda.
  • ๐Ÿ“š Kumpulan data: Jalankan nltk.download() untuk mengambil korpus.
  • ๐Ÿ Memeriksa: impor nltk di Python kulit.
  • ๐Ÿค– Penggunaan AI: Tokenisasi dan penandaan untuk alur kerja NLP.

Unduh dan Instal NLTK

Menginstal NLTK di Windows

Pelajari cara mengatur NLTK di Windows dari command prompt. Instruksi di bawah ini mengasumsikan Python belum terpasang, jadi langkah pertama adalah memasangnya. Python.

Instalasi Python in Windows

Langkah 1) Buka tautannya https://www.python.org/downloads/, dan pilih yang terbaru Windows lepaskan.

Instalasi Python in Windows

NoteUntuk versi yang lebih lama, kunjungi tab Unduhan untuk melihat semua rilis.

Instalasi Python in Windows

Langkah 2) Klik file penginstal yang telah diunduh.

Instalasi Python in Windows

Langkah 3) Pilih Sesuaikan Instalasi.

Instalasi Python in Windows

Langkah 4) Klik BERIKUTNYA.

Instalasi Python in Windows

Langkah 5) Di layar berikutnya:

  1. Pilih opsi lanjutan.
  2. Tentukan lokasi instalasi khusus. Dalam contoh ini, folder di drive C dipilih agar lebih mudah diakses.
  3. Klik Install.

Instalasi Python in Windows

Langkah 6) Klik tombol Tutup setelah instalasi selesai.

Instalasi Python in Windows

Langkah 7) Salin jalur folder Skrip Anda.

Instalasi Python in Windows

Langkah 8) Dalam majalah Windows prompt perintah:

  • Arahkan ke lokasi folder pip.
  • Masukkan perintah untuk menginstal NLTK:
    pip3 install nltk
  • Instalasi seharusnya berhasil diselesaikan.

Instalasi Python in Windows

CATATAN: Untuk Python 2, gunakan perintah pip2 install nltk.

Langkah 9) Dari Windows Menu Mulai, cari dan buka Python Kulit.

Instalasi Python in Windows

Langkah 10) Verifikasi apakah instalasi berhasil dengan menjalankan perintah di bawah ini:

import nltk

Instalasi Python in Windows

Jika tidak ada kesalahan yang muncul, instalasi selesai.

Menginstal NLTK di Mac/Linux

Menginstal NLTK di Mac atau Linux memerlukan hal-hal berikut: Python pengelola paket pip. Jika pip belum terinstal, ikuti petunjuk di bawah ini untuk menyelesaikan prosesnya.

Langkah 1) Perbarui indeks paket dengan typing perintah di bawah ini:

sudo apt update

Langkah 2) Instal pip untuk Python 3:

sudo apt install python3-pip

Anda juga dapat menginstal pip melalui easy_install:

sudo apt-get install python-setuptools  python-dev build-essential

Setelah easy_install terpasang, jalankan perintah di bawah ini untuk menginstal pip:

sudo easy_install pip

Langkah 3) Gunakan perintah berikut untuk menginstal NLTK:

sudo pip install -U nltk
sudo pip3 install -U nltk

Menginstal NLTK melalui Anaconda

Langkah 1) Instal Anaconda dengan mengunjungi https://www.anaconda.com/products/individual dan memilih Python versi yang Anda butuhkan.

Menginstal NLTK melalui Anaconda

Catatan: Lihat tutorial ini untuk mengetahui langkah-langkah detailnya instal Anaconda.

Langkah 2) Dalam prompt Anaconda:

  1. Masukkan perintah:
    conda install -c anaconda nltk
  2. RevLihat informasi peningkatan, penurunan versi, dan instalasi paket, lalu masukkan ya.
  3. NLTK telah diunduh dan diinstal.

Menginstal NLTK melalui Anaconda

Kumpulan Data NLTK

Modul NLTK dilengkapi dengan banyak dataset yang perlu Anda unduh sebelum digunakan. Secara teknis, setiap dataset disebut sebagai sebuah badanContoh umum termasuk kata-kata penghenti, Gutenberg, framenet_v15, tata bahasa_besar, coklat, dan jaringan kata.

Cara Download semua paket NLTK

Langkah 1) Jalankan Python penerjemah in Windows atau Linux.

Langkah 2)

  1. Masukkan perintah-perintahnya:
import nltk
nltk.download ()
  1. Jendela NLTK Downloader akan terbuka. Klik tombol Download untuk mengambil dataset. Proses ini membutuhkan waktu, tergantung pada koneksi internet Anda.

Unduh semua Paket NLTK

CATATAN: Anda dapat mengubah lokasi pengunduhan dengan mengklik File > Ubah Direktori Pengunduhan.

Unduh semua Paket NLTK

Langkah 3) Untuk menguji data yang terpasang, gunakan kode berikut:

>>> from nltk.corpus import brown
>>>brown.words()

['The', 'Fulton', 'County', 'Grand', 'Juri', 'berkata', โ€ฆ]

Unduh semua Paket NLTK

Menjalankan Skrip NLP

Bagian ini menjelaskan cara menjalankan skrip NLP di PC lokal. Pilihan pustaka yang tepat bergantung pada kebutuhan Anda. Lihat daftar resminya. perpustakaan NLP untuk alternatif seperti spaCy, gensim, dan TextBlob.

Cara Menjalankan Skrip NLTK

Langkah 1) Di editor kode favorit Anda, salin kode dan simpan file sebagai NLTKsample.py:

from nltk.tokenize import RegexpTokenizer
tokenizer = RegexpTokenizer(r'\w+')
filterdText=tokenizer.tokenize('Hello Guru99, You have build a very good site and I love visiting your site.')
print(filterdText)

Jalankan Skrip NLTK

Code Penjelasan:

  1. Tujuan dari program ini adalah untuk menghapus semua jenis tanda baca dari teks yang diberikan. Kami mengimpor โ€œRegexpTokenizerโ€, sebuah modul dari NLTK yang menghapus ekspresi, simbol, karakter, atau nilai numerik apa pun yang Anda pilih.
  2. Ekspresi reguler diteruskan ke modul โ€œRegexpTokenizerโ€.
  3. Teks dipecah menjadi token menggunakan metode โ€œtokenizeโ€, dan hasilnya disimpan dalam variabel โ€œfilterdTextโ€.
  4. Hasilnya dicetak menggunakan โ€œprint()โ€.

Langkah 2) Di command prompt:

  • Arahkan ke lokasi tempat Anda menyimpan file tersebut.
  • Jalankan perintahnya python NLTKsample.py.

Jalankan Skrip NLTK

Outputnya adalah:

['Halo', 'Guru99', 'Anda', 'telah', 'membangun', 'sebuah', 'situs', 'yang', 'sangat', 'bagus', 'dan', 'saya', 'suka', 'mengunjungi', 'situs', 'Anda']

Pertanyaan Umum Demo Slot

Perintah pip menginstal pustaka itu sendiri, sedangkan nltk.download() mengambil korpus dan model terlatih seperti stopwords, punkt, dan wordnet. Kedua langkah ini diperlukan sebelum melakukan tokenisasi atau penandaan teks.

Ya. NLTK tetap populer untuk pra-pemrosesan teks yang menjadi masukan bagi LLM, termasuk tokenisasi, penghapusan kata-kata penghenti (stop-word), stemming, dan penandaan POS (Part-of-Speech). NLTK juga banyak digunakan dalam pengajaran dan penelitian berkat API-nya yang jelas dan korpus klasiknya.

NLTK paling cocok untuk mempelajari dasar-dasar NLP. spaCy lebih cepat untuk produksi, sedangkan Memeluk Transformer Wajah Menawarkan model pembelajaran mendalam yang telah dilatih sebelumnya. Banyak proyek AI menggabungkan pra-pemrosesan NLTK dengan inferensi transformer.

Ringkaslah postingan ini dengan: