englishing.app
Язык интерфейса
EN English BN বাংলা HI हिन्दी ES Español FR Français DE Deutsch RU Русский ZH 简体中文 JA 日本語
Язык контента
Как язык сайта EN Английский BN Бенгальский HI Хинди ES Испанский FR Французский DE Немецкий RU Русский ZH Китайский JA Японский
Войти
Главная Курсы Словари PDF Видео

✂️tokenization (токенизация)

noun
ˌtoʊ.kə.nɪˈzeɪ.ʃən
Процесс разбивки текста на меньшие единицы, такие как слова, фразы или символы, для анализа. (tokenization)
token Tolerable
tokenization definition card — visual illustration of the meaning tokenization synonyms and antonyms card — visual word comparison

Значение

The process of breaking text into smaller units like words, phrases, or symbols for analysis.
Перевод значения
Процесс разделения текста на меньшие части для анализа.
Protsess razdelyeniya tekst na men'shiye chasti dlya analiza.

Примеры предложений

NLP uses tokenization to break text into smaller units.

NLP использует токенизацию для разбиения текста на более мелкие единицы.
NLP ispol'zuyet tokenizatsiyu dlya razbieniya teksta na boleye melkiye yedinitsy.

Синонимы

segmentation, fragmentation, parsing

Антонимы

aggregation, whole text, non-division

Похожие статьи

Похожие слова

Black Salt (черная соль)

a type of rock salt with a distinctive sulfuric flavor, commonly used in Indian cuisine

schedule (расписание)

a plan for carrying out a process or task, showing the time and sequence of actions

exhaustion (истощение)

Extreme physical or mental tiredness.

optometrist (оптометрист)

A healthcare professional who examines eyes and prescribes corrective lenses.

Mongoose (мангуст)

a small carnivorous mammal known for its ability to kill venomous snakes

dinghy (шлюпка)

a small boat, often carried or towed by a larger vessel, used for short trips or as a lifeboat

Узнать больше

Все словари