Termín:tokenizácia¹: Rozdiel medzi revíziami
Z STD
d (Ivor premiestnil stránku Termín:tokenizácia ¹ na Termín:tokenizácia¹, ale neponechal presmerovanie: Premenovanie stránok s indexom) |
|
(Žiaden rozdiel)
| |
Verzia zo dňa a času 16:09, 8. september 2017
Odporúčaný termín [?]
| Oblasť: | lingvistika |
| Definícia: | výsledok automatizovaného členenia textu na tokeny |
| Zdroj: | Šimková, M.: Výberový slovník termínov z korpusovej lingvistiky. 2006. |
| Cudzojazyčný ekvivalent: | en-GB: tokenisation, en-US: tokenization |
| URL: | http://korpus.juls.savba.sk/ |
