Ajaleheartiklite eraldaja

DIGAR-i Eesti artiklite portaalis on mitmeid ajalehti, mis ei ole artikliteks jagatud ehk segmenteeritud. RaRa-siseselt toimub segmenteerimine spetsiaalse programmiga, kasutades visuaalset informatsiooni. Uurijatele on sellised lahendused sageli aga kättesaamatud. TalTechi informaatikatudengite Greteli Mittali ja Maria Kristina Andranikyana bakalaureusetöö käigus peenhäälestati eestikeelne BERT-mudel EstBERT tuvastama ajaleheartiklite piire, kasutades sisendina vaid lehekülje teksti. Eesmärgiks oli eelkõige katsetada, kas sellist lähenemisviisi on võimalik artiklite tuvastamiseks kasutada. Mudel saavutas testimisel F1-skoorid 0,65 ja 0,74. Mudeli usaldusväärsust saab tõsta treeningandmestiku laiendamise ja mitmekesistamisega.

Mudel ja repositoorium:

Liitu Eesti Rahvusraamatukogu uudiskirjaga

[contact-form-7 id="42" title="Uudiskiri"]
AVATUD
RaRa saatkond Solarises
E–L 10—19
P suletud

Hoiuraamatukogu
E–R 9—16.30
L,P suletud
KONTAKT

Eesti Rahvusraamatukogu
Tõnismägi 2, 10122 Tallinn
+372 630 7100
info@rara.ee
rara.ee

linkedin facebook pinterest youtube rss twitter instagram facebook-blank rss-blank linkedin-blank pinterest youtube twitter instagram