token³

Z STD
Prejsť na: navigácia, hľadanie

Odporúčaný termín [?]

Oblasť: lingvistika, strojový preklad
Definícia: najmenší segment textu v jazykovom korpuse
Zdroj: Slovník cudzích slov (akademický), SPN - Mladé letá, Bratislava, 2005

Príbuzné termíny: tokenizácia¹, tokenizácia²
Cudzojazyčný ekvivalent: cs: token, en: token
URL: https://sk.wikipedia.org/wiki/Token (text)