Termín:tokenizácia¹: Rozdiel medzi revíziami

Z STD
Prejsť na: navigácia, hľadanie
 
 
(7 medziľahlých úprav od 4 ďalších používateľov nie je zobrazených)
Riadok 1: Riadok 1:
 
{{Term
 
{{Term
|Name=tokenizácia
+
|Name=tokenizácia¹
|Definition=výsledok automatizovaného členenia textu na tokeny
+
|Definition=výsledok automatizovaného členenia textu na [[Term:token³|tokeny]]
|Localized definitions=
+
|Field=lingvistika, informačná technológia a spracovanie údajov
|Field=lingvistika
+
|Related terms=token³, tokenizácia²
|Localized fields=
+
|Bibliography=PODĽA: Šimková, M.: Výberový slovník termínov a pojmov z korpusovej lingvistiky. In: Šimková, M. – Gajdošová, K. – Kmeťová, B. – Debnár, M.: Slovenský národný korpus. Texty, anotácie, vyhľadávania. Bratislava: Jazykovedný ústav Ľ. Štúra SAV – Vydavateľstvo Mikula 2017.
|Related terms=
+
|Translations={{Translation
|Synonyms=
+
|Language=en
|Bibliography=Šimková, M.: Výberový slovník termínov z korpusovej lingvistiky. 2006.
+
|Localized form=tokenisation
|Translations={{Translation|Language=en-GB|Localized form=tokenisation}}{{Translation|Language=en-US|Localized form=tokenization}}
+
}}{{Translation
 +
|Language=en
 +
|Localized form=tokenization
 +
}}
 
|Acceptability=Odporúčaný
 
|Acceptability=Odporúčaný
|Context=
 
|Context source=
 
|URL=http://korpus.juls.savba.sk/
 
|Localized URLs=
 
|Approved=
 
|Comment=
 
 
}}
 
}}
 
 
 
 
[[Category:Korpusová lingvistika]]
 
[[Category:Korpusová lingvistika]]
 +
[[Category:It]]

Aktuálna revízia z 22:31, 22. apríl 2021

Odporúčaný termín [?]

Oblasť: lingvistika, informačná technológia a spracovanie údajov
Definícia: výsledok automatizovaného členenia textu na tokeny
Zdroj: PODĽA: Šimková, M.: Výberový slovník termínov a pojmov z korpusovej lingvistiky. In: Šimková, M. – Gajdošová, K. – Kmeťová, B. – Debnár, M.: Slovenský národný korpus. Texty, anotácie, vyhľadávania. Bratislava: Jazykovedný ústav Ľ. Štúra SAV – Vydavateľstvo Mikula 2017.

Príbuzné termíny: token³, tokenizácia²
Cudzojazyčný ekvivalent: en: tokenisation, en: tokenization