This is an old revision of the document!
Corpus SYN version 4
Name | SYN version 4 | |
---|---|---|
Position | Number of tokens | 4 349 023 692 |
Number of tokens without punctuation | 3 626 417 275 | |
Number of word forms | 10 506 034 | |
Number of lemmas | 7 427 573 | |
Structures | Number of documents | 87 653 |
Number of texts | 14 097 711 | |
Number of sentences | 275 182 453 | |
Other information | Referential | YES |
Representative | NO (predominantly journalism) | |
Publication year | 2016 |
Every SYN corpus contains all the synchronic written corpora of the SYN series published up until the time of the given version's publication. The corpus SYN version 3 therefore contains the corpora SYN2000, SYN2005, SYN2006PUB, SYN2009PUB, SYN2010,SYN2013PUB and SYN2015; it additionally contains an as yet unpublished journalistic component predominantly from the years 2010–2014 in yearly volumes exceeding 200 mil. words.
Because all of these corpora are disjunctive (i.e. they do not contain the same texts), the total size of the SYN version 4 is given by their sum, which makes 3,626 billion words (tokens without punctuation). The SYN corpus is not representative; the dominant component is journalism, which is the result of the predominance of journalistic corpora SYN2006PUB, SYN2009PUB, SYN2013PUB and the journalistic component from the years 2010–2014.
The SYN version 4 corpus is referential,and will remain accessible to users even after newer versions have been published. It is however necessary to keep in mind that the linguistic information will become outdated, as a natural result of the referential nature of the corpus. Individual versions of the corpus SYN will continue to be published regularly every year with the addition of current journalistic data, přičemž tento přírůstek bude labelled with the attribute value <doc syn>
rovnou verzi korpusu SYN, v níž se daný text objevil poprvé; například subkorpus odpovídající výše zmíněné dosud nezveřejněné publicistice tak lze ze SYN verze 4 vytvořit zadáním podmínky syn="v4"
.
Composition of the corpus SYN version 4
Referential written language corpora (synchronic and general) ordered by date of creation | |||||
---|---|---|---|---|---|
corpus | size (words) | lemmatization | morphological tags | publication year | corpus description |
SYN2015 | 100 mil. | YES | YES | 2015 | representative corpus, mainly texts from the years 2010–2014 |
SYN2013PUB | 935 mil. | YES | YES | 2013 | corpus of journalistic texts from the years 2005-2009 |
SYN2010 | 100 mil. | YES | YES | 2010 | representative corpus, mainly texts from the years 2005–2009 |
SYN2009PUB | 700 mil. | YES | YES | 2010 | corpus of journalistic texts from the years 1995–2007 |
SYN2006PUB | 300 mil. | YES | YES | 2006 | corpus of journalistic texts from the years 1989–2004 |
SYN2005 | 100 mil. | YES | YES | 2005 | representative corpus, mainly texts from the years 2000–2004 |
SYN2000 | 100 mil. | YES | YES | 2000 | representative corpus, mainly texts from the years 1990–1999 |
Journalism in SYN version 4
Složení publicistické části korpusu SYN verze 4 pokrývá produkci hlavních celostátních deníků (Mladá fronta DNES, Lidové noviny, Právo, Hospodářské noviny, Blesk, Sport), regionálních deníků (především Deníky Bohemia a Moravia z produkce nakladatelství Vltava Labe Media) a nespecializovaných časopisů (Reflex, Respekt, Týden) v letech 1998–2014; celkový počet publicistických titulů je 176. Následující grafy ukazují složení korpusu SYN podle hlavních textových typů v jednotlivých letech a nabízejí bližší pohled na složení publicistické části.
Structure and annotation of the corpus SYN version 4
Korpus SYN verze 4 se od svého předchůdce, korpusu SYN verze 3, výrazně liší ve strukturaci a anotaci textů, které odpovídají korpusu SYN2015. Změny se projevují jak převzetím hierarchie strukturních značek SYN2015 (např. původní <opus>
byl nahrazen <doc>
, nově byl zaveden odstavec <p>
atd.) a jejich atributů (např. původní <opus název>
byl nahrazen <doc title>
), tak i klasifikace textů SYN2015, která byla zpětně aplikována na všechny texty obsažené v korpusu SYN verze 4. Jedním z důsledků tohoto rozhodnutí bylo také vyřazení textů (především internetových periodik), které nesplňují zúžené pojetí psanosti.
Tato shoda struktury a anotace s korpusem SYN2015 má pouze dvě výjimky:
- korpus SYN verze 4 obsahuje navíc atribut
<doc syn>
pro vytváření subkorpusů odpovídajících původním referenčním korpusům; - podstatnou změnou je nahrazení syntaktická anotace korpusu SYN2015 pilotní verzí anotace frazémů.
How to cite SYN version 4
Křen, M. – Cvrček, V. – Čapka, T. – Čermáková, A. – Hnátková, M. – Chlumská, L. – Jelínek, T. – Kováříková, D. – Petkevič, V. – Procházka, P. – Skoumalová, H. – Škrabal, M. – Truneček, P. – Vondřička, P. – Zasina, A.: Corpus SYN, verison 4 z 16. 9. 2016. Ústav Českého národního korpusu FF UK, Praha 2016. Available online: http://www.korpus.cz
Hnátková, M. – Křen, M. – Procházka, P. – Skoumalová, H. (2014): The SYN-series corpora of written Czech. In Proceedings of the Ninth International Conference on Language Resources and Evaluation (LREC'14), 160–164. Reykjavík: ELRA. ISBN 978-2-9517408-8-4.
— Michal Křen, Olga Richterová
Related links
SYN • SYN version 3 • SYN2000 • SYN2005 • SYN2006PUB • SYN2009PUB • SYN2010 • SYN2013PUB • SYN2015