NLTK لائبریری کو جملے میں الفاظ کو ٹوکنائز کرنے کے لیے کیسے استعمال کیا جا سکتا ہے؟
منگل، 08 اگست 2023 by ای آئی ٹی سی اے اکیڈمی
نیچرل لینگویج ٹول کٹ (NLTK) نیچرل لینگویج پروسیسنگ (NLP) کے شعبے میں ایک مشہور لائبریری ہے جو انسانی زبان کے ڈیٹا پر کارروائی کے لیے مختلف ٹولز اور وسائل مہیا کرتی ہے۔ NLP میں بنیادی کاموں میں سے ایک ٹوکنائزیشن ہے، جس میں متن کو انفرادی الفاظ یا ٹوکنز میں تقسیم کرنا شامل ہے۔ NLTK ٹوکنائز کرنے کے لیے کئی طریقے اور افعال پیش کرتا ہے۔
- میں شائع مصنوعی ذہانت, ای آئی ٹی سی/اے آئی/ڈی ایل ٹی ایف ڈیپ لرننگ ٹینسرفلو کے ساتھ, TensorFlow, پروسیسنگ ڈیٹا, امتحان کا جائزہ
ٹیگ کے تحت: مصنوعی ذہانت, این ایل ٹی کے, PunktLanguageVars, RegexpTokenizer, ٹوکن بنانا, Word_tokenize

