Свойства объекта
| Дескриптор | |
| название | токен |
| язык | русский |
| релятор | информатика |
| определение 1 | последовательности символов в лексическом анализе в информатике, соответствующий лексеме |
| автор словарной статьи | Соколова Е.Г. |
Связи объекта |
|
| Ассоциируется с (RelatedTerm) | |
| Дескриптор | |
| словоформа | |
| Встречается дескриптор в (SourceDescriptor) | |
| Источник | частота |
| Коллекция текстов Диалог 2000-2010 | 7 |
| Дается определение в (SourceDef) | |
| Источник | определение |
| Интернет энциклопедия «Википедия» | 1 |
| Подобласть знаний(SubArea) | |
| Подобласть знаний | |
| 2.1.1. Сегментация текста – Text Segmentation | |
| Эквивалент на другом языке (Trans) | |
| Дескриптор | |
| token (informatics) | |