Next revision | Previous revision |
en:cnk:syn:verze4 [2016/12/11 16:54] – created veronikapojarova | en:cnk:syn:verze4 [2017/04/25 18:23] (current) – [How to cite SYN version 4] michalkren |
---|
~~NOTOC~~ | ~~NOTOC~~ |
====== Korpus SYN verze 4 ====== | ====== Corpus SYN version 4 ====== |
| |
<WRAP right 35%> | <WRAP right 35%> |
^ <fs medium>Název</fs> ^^ <fs medium>SYN verze 4</fs> ^ | ^ <fs medium>Name</fs> ^^ <fs medium>SYN version 4</fs> ^ |
^ [[pojmy:atributy_pozicni|Pozice]] ^ Počet [[pojmy:token|pozic (tokenů)]] | 4 349 023 692 | | ^ [[pojmy:atributy_pozicni|Position]] ^ Number of tokens | 4 349 023 692 | |
^ ::: ^ Počet [[pojmy:token|pozic (tokenů) bez interpunkce ]] | 3 626 417 275 | | ^ ::: ^ Number of tokens without punctuation | 3 626 417 275 | |
^ ::: ^ Počet [[pojmy:word|slovních tvarů (wordů)]] | 10 506 034 | | ^ ::: ^ Number of [[en:pojmy:word|word forms]] | 10 506 034 | |
^ ::: ^ Počet [[pojmy:lemma|lemmat]] | 7 427 573 | | ^ ::: ^ Number of [[en:pojmy:lemma|lemmas]] | 7 427 573 | |
^ [[pojmy:atributy_strukturni|Struktury]] ^ Počet [[pojmy:doc|dokumentů]] | 87 653 | | ^ [[en:pojmy:atributy_strukturni|Structures]] ^ Number of [[en:pojmy:doc|documents]] | 87 653 | |
^ ::: ^ Počet [[pojmy:atributy_strukturni|textů]] | 14 097 711 | | ^ ::: ^ Number of [[en:pojmy:atributy_strukturni|texts]]| 14 097 711 | |
^ ::: ^ Počet vět | 275 182 453 | | ^ ::: ^ Number of sentences | 275 182 453 | |
^ Další informace ^ [[pojmy:referencni|Referenční]] | ANO | | ^ Other information ^ [[en:pojmy:referencni|Referential]] | YES | |
^ ::: ^ [[pojmy:reprezentativnost|Reprezentativní]] | NE (převažuje [[seznamy:txtype|publicistika]]) | | ^ ::: ^ [[en:pojmy:reprezentativnost|Representative]] | NO (predominantly journalism) | |
^ ::: ^ Rok zveřejnění | 2016 | | ^ ::: ^ Publication year | 2016 | |
</WRAP> | </WRAP> |
| |
Každý **korpus SYN** obsahuje vždy všechny [[pojmy:synchronni|synchronní]] [[pojmy:psany|psané]] korpusy řady [[cnk:syn|SYN]] zveřejněné do doby vzniku dané verze. Korpus SYN verze 4 tedy zahrnuje korpusy [[cnk:syn2000|SYN2000]], [[cnk:syn2005|SYN2005]], [[cnk:syn2006pub|SYN2006PUB]], [[cnk:syn2009pub|SYN2009PUB]], [[cnk:syn2010|SYN2010]], [[cnk:syn2013pub|SYN2013PUB]] a [[cnk:syn2015|SYN2015]]; kromě nich je však jeho součástí také **dosud nezveřejněná publicistika převážně z let 2010–2014** v ročních objemech přesahujících 200 mil. slov. | Every **SYN corpus** contains all the [[en:pojmy:synchronni|synchronic]] [[en:pojmy:psany|written]] corpora of the [[en:cnk:syn|SYN]] series published up until the time of the given version's publication. The corpus SYN version 3 therefore contains the corpora [[en:cnk:syn2000|SYN2000]], [[en:cnk:syn2005|SYN2005]], [[en:cnk:syn2006pub|SYN2006PUB]], [[en:cnk:syn2009pub|SYN2009PUB]], [[en:cnk:syn2010|SYN2010]],[[en:cnk:syn2013pub|SYN2013PUB]] and [[cnk:syn2015|SYN2015]]; it additionally contains an **as yet unpublished journalistic component predominantly from the years 2010–2014** in yearly volumes exceeding 200 mil. words. |
| |
Protože jsou všechny tyto složky navzájem **disjunktní** (tj. neobsahují stejné texty), je celková velikost korpusu SYN verze 4 dána součtem jejich velikostí, který činí 3,626 miliardy textových slov ([[[[pojmy:token|tokenů]] bez interpunkce). Korpus SYN není [[pojmy:reprezentativnost|reprezentativní]]; v jeho složení dominuje publicistika, což je důsledkem převahy rozsáhlých publicistických korpusů [[cnk:syn2006pub|SYN2006PUB]], [[cnk:syn2009pub|SYN2009PUB]], [[cnk:syn2013pub|SYN2013PUB]] a publicistické složky z let 2010–2014. | Because all of these corpora are **disjunctive** (i.e. they do not contain the same texts), the total size of the SYN version 4 is given by their sum, which makes 3,626 billion words ([[en:pojmy:token|tokens]] without punctuation). The SYN corpus is not [[en:pojmy:reprezentativnost|representative]]; the dominant component is journalism, which is the result of the predominance of journalistic corpora [[en:cnk:syn2006pub|SYN2006PUB]], [[en:cnk:syn2009pub|SYN2009PUB]], [[en:cnk:syn2013pub|SYN2013PUB]] and the journalistic component from the years 2010–2014. |
| |
Korpus SYN verze 4 je [[pojmy:referencni|referenční]], a zůstane tedy uživatelům neustále dostupný i po zveřejnění novějších verzí (je ovšem třeba upozornit na postupné zastarávání dodané lingvistické informace, které z referenčnosti zákonitě vyplývá). Jednotlivé verze korpusu SYN budou nadále zveřejňovány pravidelně každý rok s přírůstkem v podobě aktuálních publicistických dat, přičemž tento přírůstek bude označen hodnotou atributu ''<doc syn>'' rovnou verzi korpusu SYN, v níž se daný text objevil poprvé; například [[pojmy:subkorpus|subkorpus]] odpovídající výše zmíněné dosud nezveřejněné publicistice tak lze ze SYN verze 4 [[manualy:kontext:subkorpus#vytvoreni_noveho_subkorpusu|vytvořit]] zadáním podmínky ''syn=<nowiki>"</nowiki>v4<nowiki>"</nowiki>''. | The SYN version 4 corpus is [[en:pojmy:referencni|referential]],and will remain accessible to users even after newer versions have been published. It is however necessary to keep in mind that the linguistic information will become outdated, as a natural result of the referential nature of the corpus. Individual versions of the corpus SYN will continue to be published regularly every year with the addition of current journalistic data, and every new addition will be given the attribute value ''<doc syn>'' equal to the version of the SYN corpus in which the given text first appeared; for example a [[en:pojmy:subkorpus|subcorpus]] corresponding to the above mentioned (as yet unpublished) journalistic component can be [[en:manualy:kontext:subkorpus#vytvoreni_noveho_subkorpusu|created]] from the SYN version 4 with the help of the condition ''syn=<nowiki>"</nowiki>v4<nowiki>"</nowiki>''. |
| |
===== Composition of the corpus SYN version 4 ===== | ===== Composition of the corpus SYN version 4 ===== |
^ <fs medium>Referential written language corpora (synchronic and general) ordered by date of creation</fs> ^^^^^^ | ^ <fs medium>Referential written language corpora (synchronic and general) ordered by date of creation</fs> ^^^^^^ |
^ corpus ^ size (words) ^ [[en:pojmy:lemma|lemmatization]] ^ [[en:pojmy:tag|morphological tags]] ^ publication year ^ corpus description ^ | ^ corpus ^ size (words) ^ [[en:pojmy:lemma|lemmatization]] ^ [[en:pojmy:tag|morphological tags]] ^ publication year ^ corpus description ^ |
^ [[en:cnk:syn2015|SYN2015]] | 100 mil. | YES | YES | 2015 | representative corpus, mainly texts from the years 2010–2014| | ^ [[en:cnk:syn2015|SYN2015]] | 100M | ✓ | ✓ | 2015 | representative corpus, mainly texts from the years 2010–2014| |
^ [[en:cnk:syn2013PUB|SYN2013PUB]] | 935 mil. | YES | YES | 2013 | corpus of journalistic texts from the years 2005-2009 | | ^ [[en:cnk:syn2013PUB|SYN2013PUB]] | 935M | ✓ | ✓ | 2013 | corpus of journalistic texts from the years 2005-2009 | |
^ [[en:cnk:syn2010|SYN2010]] | 100 mil. | YES | YES | 2010 | representative corpus, mainly texts from the years 2005–2009| | ^ [[en:cnk:syn2010|SYN2010]] | 100M | ✓ | ✓ | 2010 | representative corpus, mainly texts from the years 2005–2009| |
^ [[en:cnk:syn2009PUB|SYN2009PUB]] | 700 mil. | YES | YES | 2010 | corpus of journalistic texts from the years 1995–2007 | | ^ [[en:cnk:syn2009PUB|SYN2009PUB]] | 700M | ✓ | ✓ | 2010 | corpus of journalistic texts from the years 1995–2007 | |
^ [[en:cnk:syn2006PUB|SYN2006PUB]] | 300 mil. | YES | YES | 2006 | corpus of journalistic texts from the years 1989–2004| | ^ [[en:cnk:syn2006PUB|SYN2006PUB]] | 300M | ✓ | ✓ | 2006 | corpus of journalistic texts from the years 1989–2004| |
^ [[en:cnk:syn2005|SYN2005]] | 100 mil. | YES | YES | 2005 | representative corpus, mainly texts from the years 2000–2004| | ^ [[en:cnk:syn2005|SYN2005]] | 100M | ✓ | ✓ | 2005 | representative corpus, mainly texts from the years 2000–2004| |
^ [[en:cnk:syn2000|SYN2000]] | 100 mil. | YES | YES | 2000 | representative corpus, mainly texts from the years 1990–1999| | ^ [[en:cnk:syn2000|SYN2000]] | 100M | ✓ | ✓ | 2000 | representative corpus, mainly texts from the years 1990–1999| |
| |
==== Journalism in SYN version 4 ==== | ==== Journalism in SYN version 4 ==== |
| |
| |
Složení publicistické části korpusu SYN verze 4 pokrývá produkci hlavních celostátních deníků (//Mladá fronta DNES, Lidové noviny, Právo, Hospodářské noviny, Blesk, Sport//), regionálních deníků (především //Deníky Bohemia// a //Moravia// z produkce nakladatelství Vltava Labe Media) a nespecializovaných časopisů (//Reflex, Respekt, Týden//) v letech 1998--2014; celkový počet publicistických titulů je 176. Následující grafy ukazují složení korpusu SYN podle [[pojmy:txtype_group|hlavních textových typů]] v jednotlivých letech a nabízejí bližší pohled na složení publicistické části. | The composition of the journalistic part of the corpus SYN version 3 covers the production of most of the national daily newspapers (//Mladá fronta DNES, Lidové noviny, Právo, Hospodářské noviny, Blesk, Sport//), regional daily newspapers (chiefly //Deníky Bohemia// and //Moravia// published by Vltava Labe Media) and non-specialized magazines (//Reflex, Respekt, Týden//) fron the years 1998--2014; the total number of journalistic titles is 176. The following graphs show the composition of the SYN corpus based on the [[en:pojmy:txtype_group|main text types]] over the years and offer a closer look at the composition of the journalistic section. |
| |
[{{:cnk:slozeni_syn_v4.png?400|Composition of the corpus SYN version 4}}] | [{{:cnk:slozeni_syn_v4.png?400|Composition of the corpus SYN version 4}}] |
====== Structure and annotation of the corpus SYN version 4 ====== | ====== Structure and annotation of the corpus SYN version 4 ====== |
| |
Korpus SYN verze 4 se od svého předchůdce, korpusu [[cnk:syn:verze3|SYN verze 3]], výrazně liší ve [[pojmy:atributy_strukturni|strukturaci]] a [[pojmy:anotace|anotaci]] textů, které odpovídají korpusu [[cnk:syn2015|SYN2015]]. Změny se projevují jak převzetím [[cnk:syn2015#struktura_korpusu_a_strukturni_znacky|hierarchie strukturních značek SYN2015]] (např. původní ''<opus>'' byl nahrazen ''<doc>'', nově byl zaveden odstavec ''<p>'' atd.) a jejich atributů (např. původní ''<opus název>'' byl nahrazen ''<doc title>''), tak i [[cnk:klasifikace_textu_syn2015|klasifikace textů SYN2015]], která byla zpětně aplikována na všechny texty obsažené v korpusu SYN verze 4. Jedním z důsledků tohoto rozhodnutí bylo také vyřazení textů (především internetových periodik), které nesplňují [[cnk:syn2015#pojeti_psanosti_v_syn2015|zúžené pojetí psanosti]]. | The corpus SYN version 4 significantly differs from its predecessor, [[en:cnk:syn:verze3|SYN version 3]], in its [[en:pojmy:atributy_strukturni|structuring]] and [[en:pojmy:anotace|annotation]] of texts which correspond with the corpus [[en:cnk:syn2015|SYN2015]]. The changes are manifested in the adoption of the [[en:cnk:syn2015#struktura_korpusu_a_strukturni_znacky|hierarchy of structural tags from SYN2015]] (e.g. ''<opus>'' was replaced by ''<doc>'', the paragraph ''<p>'' was newly introduced etc.) and their attributes (e.g. ''<opus name>'' was replaced by ''<doc title>''), and also the [[en:cnk:klasifikace_textu_syn2015|classification of SYN2015 texts]], which was retrospectively applied to all texts contained in the corpus SYN version 4. One of the results of this decision was also the exclusion of texts (predominantly online periodicals), which did not conform to the newly [[en:cnk:syn2015#pojeti_psanosti_v_syn2015|narrowed concept of written texts]]. |
| |
Tato shoda struktury a anotace s korpusem SYN2015 má pouze dvě výjimky: | This correspondance to the corpus SYN2015 in structure and annotation has only two exceptions: |
* korpus SYN verze 4 obsahuje navíc atribut ''<doc syn>'' pro [[cnk:syn#referencni_korpusy_jako_subkorpusy_v_syn|vytváření subkorpusů odpovídajících původním referenčním korpusům]]; | * the corpus SYN version 4 contains the additional attribute ''<doc syn>'' for the [[en:cnk:syn#referencni_korpusy_jako_subkorpusy_v_syn|creation of subcorpora corresponding to the original reference corpora]]; |
* podstatnou změnou je nahrazení [[pojmy:syntakticka_analyza|syntaktická anotace]] korpusu SYN2015 pilotní verzí **[[seznamy:frazemy|anotace frazémů]]**. | * a substantial change is the replacement of [[en:pojmy:syntakticka_analyza|syntactic annotation]] in the corpus SYN2015 with a pilot version of **[[en:seznamy:frazemy|phraseme annotation]]**. |
| |
====== How to cite SYN version 4 ====== | ====== How to cite SYN version 4 ====== |
| |
<WRAP round tip 70%> | <WRAP round tip 70%> |
Křen, M. – Cvrček, V. – Čapka, T. – Čermáková, A. – Hnátková, M. – Chlumská, L. – Jelínek, T. – Kováříková, D. – Petkevič, V. – Procházka, P. – Skoumalová, H. – Škrabal, M. – Truneček, P. – Vondřička, P. – Zasina, A.: Corpus SYN, verison 4 z 16. 9. 2016. Ústav Českého národního korpusu FF UK, Praha 2016. Available online: http://www.korpus.cz | Křen, M. – Cvrček, V. – Čapka, T. – Čermáková, A. – Hnátková, M. – Chlumská, L. – Jelínek, T. – Kováříková, D. – Petkevič, V. – Procházka, P. – Skoumalová, H. – Škrabal, M. – Truneček, P. – Vondřička, P. – Zasina, A.: //Corpus SYN, version 4 from 16. 9. 2016//. Ústav Českého národního korpusu FF UK, Praha 2016. Available online: http://www.korpus.cz |
| |
| |