✂️tokenization (टोकेनाइजेशन)

noun
ˌtoʊ.kə.nɪˈzeɪ.ʃən
शब्दों, वाक्यांशों या प्रतीकों में टेक्स्ट को विभाजित करने की प्रक्रिया (tokenization)

मीनिंग

The process of breaking text into smaller units like words, phrases, or symbols for analysis.
मीनिंग ट्रांसलेशन
विश्लेषण के लिए टेक्स्ट को छोटे हिस्सों में तोड़ने की प्रक्रिया
vishleshan ke liye text ko chhote hisso mein todne ki prakriya

एक्जाम्पल सेंटेंसेस

NLP uses tokenization to break text into smaller units.

एनएलपी टेक्स्ट को छोटे हिस्सों में विभाजित करने के लिए टोकनाइजेशन का उपयोग करता है।
NLP text ko chhote hisso mein vibhajit karne ke liye tokenization ka upyog karta hai.

सिनोनिम्स

segmentation, fragmentation, parsing

एंटोनिम्स

aggregation, whole text, non-division

रिलेटेड वोकैबुलरीज

a person's name written by themselves, often as a form of identification or authorization
The quality of being open to more than one interpretation; having a double meaning or uncertainty.
a legal document that makes changes or additions to an existing will
a legal agreement where a person borrows money to buy property and pays it back over time
the conditions or facts that affect a situation
the degree of heat or cold in the atmosphere, body, or substance