{"id":849,"date":"2023-06-26T21:25:01","date_gmt":"2023-06-26T19:25:01","guid":{"rendered":"https:\/\/kie.ue.poznan.pl\/pl\/?p=849"},"modified":"2024-07-09T20:06:46","modified_gmt":"2024-07-09T18:06:46","slug":"pierwsze-miejsce-w-miedzynarodowym-konkursie-clef-2023-checkthat-lab","status":"publish","type":"post","link":"https:\/\/kie.ue.poznan.pl\/pl\/wiadomosci\/pierwsze-miejsce-w-miedzynarodowym-konkursie-clef-2023-checkthat-lab\/","title":{"rendered":"Pierwsze miejsce w mi\u0119dzynarodowym konkursie CLEF-2023 CheckThat! Lab"},"content":{"rendered":"<p>Zesp\u00f3\u0142 projektu <a href=\"https:\/\/kie.ue.poznan.pl\/pl\/openfact\/\" rel=\"noopener\">OpenFact<\/a> wzi\u0105\u0142 udzia\u0142 w konkursie <a href=\"https:\/\/checkthat.gitlab.io\/\" target=\"_blank\" rel=\"noopener noreferrer\">CheckThat!<\/a> organizowanym w ramach mi\u0119dzynarodowej konferencji CLEF 2023 (Conference and Labs of the Evaluation Forum). Zaproponowana przez naszych naukowc\u00f3w metoda zaj\u0119\u0142a pierwsze miejsce. Ta metoda pozwala wykrywa\u0107 zdania w j\u0119zyku angielskim, kt\u00f3re wymagaj\u0105 sprawdzenia ze wzgl\u0119du na mo\u017cliwo\u015b\u0107 wprowadzania w b\u0142\u0105d.<!--more--><\/p>\n<p>G\u0142\u00f3wna metoda zespo\u0142u OpenFact uzyska\u0142a najwy\u017cszy wynik F1 (\u015bredni\u0105 harmoniczn\u0105 precyzji i pe\u0142no\u015bci odpowiedzi), daj\u0105c pierwsze miejsce w rankingu, przed metodami opracowanymi przez 10 innych zespo\u0142\u00f3w, w tym przez Instytut Fraunhofera i firm\u0119 Accenture. Lepsza od konkurencji okaza\u0142a si\u0119 r\u00f3wnie\u017c druga metoda naszych naukowc\u00f3w (mimo \u017ce do oceny mo\u017cna by\u0142o zg\u0142osi\u0107 wi\u0119cej modeli, to oficjalnie w klasyfikacji mo\u017cna wskaza\u0107 tylko jeden). Zwyci\u0119ska metoda polega\u0142a na wykorzystaniu du\u017cego modelu j\u0119zykowego GPT o wielko\u015bci 13 miliard\u00f3w parametr\u00f3w wst\u0119pnie wytrenowanym na og\u00f3lnym korpusie tekstu o wielko\u015bci 800GB a nast\u0119pnie dotrenowaniu go do zadania klasyfikacji na specjalnie dobranym zestawie ucz\u0105cym. Drugie najlepsze rozwi\u0105zanie polega\u0142o na dotrenowaniu lokalnego modelu DeBERTa. Szczeg\u00f3\u0142ow\u0105 informacje na temat implementacji zwyci\u0119skiej metody mo\u017cna znale\u017a\u0107 w pracy pt. &#8222;<em><a href=\"https:\/\/ceur-ws.org\/Vol-3497\/paper-040.pdf\" target=\"_blank\" rel=\"noopener noreferrer\">OpenFact at CheckThat! 2023: Head-to-Head GPT vs. BERT &#8211; A Comparative Study of Transformers Language Models for the Detection of Check-worthy Claims<\/a><\/em>&#8221; .<\/p>\n<p>Wykrywanie zda\u0144, kt\u00f3re wymagaj\u0105 sprawdzenia, jest niezwykle istotne w procesie fact-checkingu, poniewa\u017c pozwala filtrowa\u0107 strumie\u0144 wiadomo\u015bci i kierowa\u0107 uwag\u0119 profesjonalnego fact-checkera lub algorytmu automatycznej weryfikacji. CLEF CheckThat! Lab jest organizowany od 2018 roku, a jego celem jest rozw\u00f3j metod automatycznej identyfikacji i weryfikacji stwierdze\u0144 pojawiaj\u0105cych si\u0119 w wypowiedziach polityk\u00f3w. Mi\u0119dzynarodowa konferencja odbywa\u0142a si\u0119 w Bolonii, Bukareszcie, Lugano, Avignon a wyniki tegorocznej edycji zostan\u0105 zaprezentowane we wrze\u015bniu na konferencji w Salonikach w Grecji. CLEF CheckThat! Lab oraz FEVER to najwa\u017cniejsze \u015bwiatowe wydarzenia po\u015bwi\u0119cone wy\u0142\u0105cznie zagadnienia automatycznej weryfikacji fake news.<\/p>\n<p>Warto wspomnie\u0107, \u017ce w marcu 2023 roku wyniki zespo\u0142u OpenFact dotycz\u0105ce wykrywania fa\u0142szywych informacji z u\u017cyciem sztucznej inteligencji dla j\u0119zyka polskiego zosta\u0142y ocenione przez NCBiR jako <a href=\"https:\/\/kie.ue.poznan.pl\/pl\/wiadomosci\/najwyzsza-liczba-punktow-dla-projektu-openfact\/\">najlepsze w Polsce<\/a>. Zwyci\u0119stwo w tym presti\u017cowym konkursie potwierdza, \u017ce dokonania zespo\u0142u projektu OpenFact s\u0105 istotne w skali \u015bwiatowej oraz \u017ce metody opracowane przez zesp\u00f3\u0142 OpenFact osi\u0105gaj\u0105 r\u00f3wnie wysok\u0105 skuteczno\u015b\u0107 w innych j\u0119zykach.<\/p>\n<p>Sk\u0142ad zespo\u0142u projektu OpenFact: <a href=\"https:\/\/kie.ue.poznan.pl\/pl\/witold-abramowicz\/\">prof. Witold Abramowicz<\/a>, <a href=\"https:\/\/kie.ue.poznan.pl\/pl\/krzysztof-wecel\/\">dr hab. Krzysztof W\u0119cel, prof. UEP<\/a>, <a href=\"https:\/\/kie.ue.poznan.pl\/pl\/wlodzimierz-lewoniewski\/\">dr W\u0142odzimierz Lewoniewski<\/a>, <a href=\"https:\/\/kie.ue.poznan.pl\/pl\/piotr-stolarski\/\">dr Piotr Stolarski<\/a>, <a href=\"https:\/\/kie.ue.poznan.pl\/pl\/milena-strozyna\/\">dr Milena Str\u00f3\u017cyna<\/a>, <a href=\"https:\/\/kie.ue.poznan.pl\/pl\/ewelina-ksiezniak\/\">mgr Ewelina Ksi\u0119\u017cniak<\/a>, <a href=\"https:\/\/kie.ue.poznan.pl\/pl\/marcin-sawinski\/\">mgr Marcin Sawi\u0144ski<\/a>.<\/p>\n<p>Projekt OpenFact jest finansowany przez Narodowe Centrum Bada\u0144 i Rozwoju w ramach programu INFOSTRATEG I \u201eZaawansowane technologie informacyjne, telekomunikacyjne i mechatroniczne\u201d.<\/p>\n","protected":false},"excerpt":{"rendered":"<p>Zesp\u00f3\u0142 projektu OpenFact wzi\u0105\u0142 udzia\u0142 w konkursie CheckThat! organizowanym w ramach mi\u0119dzynarodowej konferencji CLEF 2023 (Conference and Labs of the Evaluation Forum). Zaproponowana przez naszych naukowc\u00f3w metoda zaj\u0119\u0142a pierwsze miejsce. Ta metoda pozwala wykrywa\u0107 zdania w j\u0119zyku angielskim, kt\u00f3re wymagaj\u0105 sprawdzenia ze wzgl\u0119du na mo\u017cliwo\u015b\u0107 wprowadzania w b\u0142\u0105d.<\/p>\n","protected":false},"author":1,"featured_media":850,"comment_status":"closed","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[1],"tags":[273,312,230,272,223,270,7,231,26,271,224,18,284,203,21,6],"class_list":["post-849","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-wiadomosci","tag-bert","tag-clef","tag-ewelina-ksiezniak","tag-fact-checking","tag-fake-news","tag-gpt","tag-krzysztof-wecel","tag-marcin-sawinski","tag-milena-strozyna","tag-modele-jezykowe","tag-openfact","tag-piotr-stolarski","tag-przetwarzanie-jezyka-naturalnego","tag-sztuczna-inteligencja","tag-witold-abramowicz","tag-wlodzimierz-lewoniewski"],"_links":{"self":[{"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/posts\/849","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/comments?post=849"}],"version-history":[{"count":0,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/posts\/849\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/media\/850"}],"wp:attachment":[{"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/media?parent=849"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/categories?post=849"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/tags?post=849"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}