Psycholinguistic Descriptives
View resource name in all available languages
Psykolingvistiset tunnusluvut
psychlingdesc
Persistent Identifier of this resource:
http://urn.fi/urn:nbn:fi:lb-2018081601
Access location:
The material is available at the Language Bank of Finland (Kielipankki) download service, access location http://urn.fi/urn:nbn:fi:lb-2018081602.
This material comprises a dataset and a query tool for acquiring commonly used psycholinguistic descriptives for Finnish words. The dataset is based on six large corpora from sources such as magazines, newspapers, movie and tv-series subtitles, encyclopedia topics and Internet discussions.
The material includes word surface form frequencies, lemma frequencies, syllable frequencies and letter n-gram frequencies. In addition the query tool can be used to acquire descriptives such as orthographic neighbors for lists of words. More information on the datasets and the query tool can be found in the readme file.
Descriptives:
Word lemma and surface forms tokens: 2500 million
Unique lemmas: 0.7 million
Unique surface forms: 1.5 million
The corpora used:
The Suomi24 Corpus: http://urn.fi/urn:nbn:fi:lb-2017021630
Newspaper and Periodical Corpus of the National Library of Finland, Kielipankki Version (KLK,
only from 1980 onwards): http://urn.fi/urn:nbn:fi:lb-2016050302
Finnish Magazines and Newspapers from the 1990s and 2000s, , Version 2:
http://urn.fi/urn:nbn:fi:lb-2017091901
Finnish Wikipedia 2017: http://urn.fi/urn:nbn:fi:lb-2018060401
Finnish Opensubtitles 2017: http://urn.fi/urn:nbn:fi:lb-2018060403
Unpublished corpus source:
Comments made to the Finnish discussions of the Reddit forum https://old.reddit.com/r/Suomi/ between January 2012 and December 2017
Change log:
This description was replaced on December 12, 2018
View resource description in all available languagesTämä aineisto on saatavilla Kielipankin latauspalvelussa, sijaintipaikka http://urn.fi/urn:nbn:fi:lb-2018081602.
Aineisto käsittää kuudesta eri tekstikorpuksesta kerättyjen sanojen frekvenssit sekä yksinkertaisen hakutyökalun, jolla sanoille voidaan laskea usein käytettyjä psykolingvistisiä tunnuslukuja. Sanafrekvenssitaulukoita on suodatettu, jotta ne vastaisivat paremmin sanojen todellisia taajuuksia. Tarkemmat tiedot suodatuksesta ja hakutyökalusta löytyvät readme-tiedostosta.
Lemmojen (perusmuotojen) ja pintamuotojen aineistot yhdessä kattavat noin 2500 miljoonaa sanetta/lemmaa, 1,5 miljoonaa uniikkia sanaa ja 0,7 miljoonaa uniikkia lemmaa.
Aineistot, joihin sanafrekvenssitaulukot perustuvat:
Suomi 24 -korpus: http://urn.fi/urn:nbn:fi:lb-2017021630
Kansalliskirjaston sanoma- ja aikakauslehtikokoelman suomenkielinen osakorpus, Kielipankki-versio (KLK, vain vuodesta 1980 eteenpäin):
http://urn.fi/urn:nbn:fi:lb-2016050302
1990- ja 2000-luvun suomalaisia aikakaus- ja sanomalehtiä -korpus, versio 2: http://urn.fi/urn:nbn:fi:lb-2017091901
Suomenkielinen Wikipedia 2017: http://urn.fi/urn:nbn:fi:lb-2018060401
Suomenkielinen Opensubtitles 2017: http://urn.fi/urn:nbn:fi:lb-2018060403
Lisäksi sanafrekvenssitaulukoiden tekemistä varten on haettu data seuraavalta verkkosivustolta:
Suomenkieliseen Reddit-palveluun https://old.reddit.com/r/Suomi/ lähetetyt kommentit (tammikuu 2012 – joulukuu 2017)
This material comprises a dataset and a query tool for acquiring commonly used psycholinguistic descriptives for Finnish words. The dataset is based on six large corpora from sources such as magazines, newspapers, movie and tv-series subtitles, encyclopedia topics and Internet discussions.
The material includes word surface form frequencies, lemma frequencies, syllable frequencies and letter n-gram frequencies. In addition the query tool can be used to acquire descriptives such as orthographic neighbors for lists of words. More information on the datasets and the query tool can be found in the readme file.
Descriptives:
Word lemma and surface forms tokens: 2500 million
Unique lemmas: 0.7 million
Unique surface forms: 1.5 million
The corpora used:
The Suomi24 Corpus: http://urn.fi/urn:nbn:fi:lb-2017021630
Newspaper and Periodical Corpus of the National Library of Finland, Kielipankki Version (KLK,
only from 1980 onwards): http://urn.fi/urn:nbn:fi:lb-2016050302
Finnish Magazines and Newspapers from the 1990s and 2000s, , Version 2:
http://urn.fi/urn:nbn:fi:lb-2017091901
Finnish Wikipedia 2017: http://urn.fi/urn:nbn:fi:lb-2018060401
Finnish Opensubtitles 2017: http://urn.fi/urn:nbn:fi:lb-2018060403
Unpublished corpus source:
Comments made to the Finnish discussions of the Reddit forum https://old.reddit.com/r/Suomi/ between January 2012 and December 2017
Change log:
This description was replaced on December 12, 2018
Tämä aineisto on saatavilla Kielipankin latauspalvelussa, sijaintipaikka http://urn.fi/urn:nbn:fi:lb-2018081602.
Aineisto käsittää kuudesta eri tekstikorpuksesta kerättyjen sanojen frekvenssit sekä yksinkertaisen hakutyökalun, jolla sanoille voidaan laskea usein käytettyjä psykolingvistisiä tunnuslukuja. Sanafrekvenssitaulukoita on suodatettu, jotta ne vastaisivat paremmin sanojen todellisia taajuuksia. Tarkemmat tiedot suodatuksesta ja hakutyökalusta löytyvät readme-tiedostosta.
Lemmojen (perusmuotojen) ja pintamuotojen aineistot yhdessä kattavat noin 2500 miljoonaa sanetta/lemmaa, 1,5 miljoonaa uniikkia sanaa ja 0,7 miljoonaa uniikkia lemmaa.
Aineistot, joihin sanafrekvenssitaulukot perustuvat:
Suomi 24 -korpus: http://urn.fi/urn:nbn:fi:lb-2017021630
Kansalliskirjaston sanoma- ja aikakauslehtikokoelman suomenkielinen osakorpus, Kielipankki-versio (KLK, vain vuodesta 1980 eteenpäin):
http://urn.fi/urn:nbn:fi:lb-2016050302
1990- ja 2000-luvun suomalaisia aikakaus- ja sanomalehtiä -korpus, versio 2: http://urn.fi/urn:nbn:fi:lb-2017091901
Suomenkielinen Wikipedia 2017: http://urn.fi/urn:nbn:fi:lb-2018060401
Suomenkielinen Opensubtitles 2017: http://urn.fi/urn:nbn:fi:lb-2018060403
Lisäksi sanafrekvenssitaulukoiden tekemistä varten on haettu data seuraavalta verkkosivustolta:
Suomenkieliseen Reddit-palveluun https://old.reddit.com/r/Suomi/ lähetetyt kommentit (tammikuu 2012 – joulukuu 2017)
People who looked at this resource also viewed the following: