Termín:tokenizácia¹: Rozdiel medzi revíziami

Z STD
Prejsť na: navigácia, hľadanie
 
d (Ivor premiestnil stránku Termín:tokenizácia ¹ na Termín:tokenizácia¹, ale neponechal presmerovanie: Premenovanie stránok s indexom)
(Žiaden rozdiel)

Verzia zo dňa a času 17:09, 8. september 2017

Odporúčaný termín [?]

Oblasť: lingvistika
Definícia: výsledok automatizovaného členenia textu na tokeny
Zdroj: Šimková, M.: Výberový slovník termínov z korpusovej lingvistiky. 2006.

Cudzojazyčný ekvivalent: en-GB: tokenisation, en-US: tokenization
URL: http://korpus.juls.savba.sk/