))
Tokenization in Natural Language Processing
Manage episode 311353554 series 3111581
المحتوى المقدم من Sarvesh Bhatnagar. يتم تحميل جميع محتويات البودكاست بما في ذلك الحلقات والرسومات وأوصاف البودكاست وتقديمها مباشرة بواسطة Sarvesh Bhatnagar أو شريك منصة البودكاست الخاص بهم. إذا كنت تعتقد أن شخصًا ما يستخدم عملك المحمي بحقوق الطبع والنشر دون إذنك، فيمكنك اتباع العملية الموضحة هنا https://ar.player.fm/legal.
In this episode we discuss about tokenization in Natural Language Processing. As discussed in previous episode, tokenisation is an important step in data cleaning and it entails dividing a large piece of text into smaller chunks. In this episode we discuss some of the basic tokenizers available from nltk.tokenize in nltk.
If you liked this episode, do follow and do connect with me on twitter @sarvesh0829
follow my blog at www.stacklearn.org.
If you sell something locally, do it using BagUp app available at play store, It would help a lot.
--- Send in a voice message: https://podcasters.spotify.com/pod/show/sarvesh-bhatnagar/message22 حلقات
مشاركة
