textová jednotka

Z STD
Verzia z 07:22, 12. júl 2016, ktorú vytvoril Unknown user (diskusia)$7

Prejsť na: navigácia, hľadanie

Odporúčaný termín [?]

Oblasť: lingvistika
Definícia: základná textová jednotka použitá v analýze alebo spracovaní textu, znak alebo súbor znakov formálne oddelených od iného znaku alebo súboru znakov
Zdroj: Šimková, M.: Výberový slovník termínov z korpusovej lingvistiky. 2006.

Synonymum: token
Cudzojazyčný ekvivalent: en: token
Poznámka: Formálne delenie sa môže urobiť napríklad medzerou (tvar slova v texte, interpunkčné znamienko, číslica a pod.)
URL: http://korpus.juls.savba.sk/