Braincore-id / IndoTWEEST

Kumpulan dataset stopwords bahasa Indonesia untuk data pre-processing Twitter

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

IndoTWEEST

Indonesian Tweet Stopwords


Proyek ini di-inisialisasi oleh Braincore.id sebagai kontribusi dalam pengembangan dataset stopwords sosial media Twitter untuk memudahkan penelitian yang menggunakan dataset dari platform tersebut demi kemajuan NLP Indonesia.

Kontribusi

Tata cara kontribusi dapat dibaca pada dokumen berikut Ini

  1. Clone terlebih dahulu git ini menggunakan command git clone https://github.com/Braincore-id/IndoTWEES.git

  2. Bagi yang memang sudah memiliki kumpulan stopwords yang ingin ditambahkan dapat melewati tahap 2. Jalankan Colab berikut untuk dijadikan acuan stopwords apa saja yang ingin dimasukkan

  3. Setelah mendapatkan kumpulan stopwords, masukkan kumpulan stopwords tersebut kedalam file .txt dengan format sebagai berikut

<stopword A>
<stopword B>
<stopword C>
...
...

  1. Jalankan perintah python src/add_csv.py --new_stopwords <file.txt>. Untuk lebih jelas mengenai argparse apa saja yang dapat digunakan bisa menggunakan perintah python src/add_csv.py --help

  2. Lakukan pull request sehingga hasil stopwords akan ditambahkan kedalam final stopwords

Task List

  • Support csv dan format lain sebagai format file untuk menambahkan stopwords
  • Penghitung Stopwords otomatis di README.md
  • Pembaruan otomatis pada Terakhir diperbarui pada README.md

Contributors

contributors

About

Kumpulan dataset stopwords bahasa Indonesia untuk data pre-processing Twitter

License:MIT License


Languages

Language:Python 100.0%