{"id":1102,"date":"2024-09-20T20:38:44","date_gmt":"2024-09-20T18:38:44","guid":{"rendered":"https:\/\/kie.ue.poznan.pl\/pl\/?p=1102"},"modified":"2024-09-25T22:13:51","modified_gmt":"2024-09-25T20:13:51","slug":"openfact-na-konferencji-clef-2024","status":"publish","type":"post","link":"https:\/\/kie.ue.poznan.pl\/pl\/wiadomosci\/openfact-na-konferencji-clef-2024\/","title":{"rendered":"OpenFact na konferencji CLEF 2024"},"content":{"rendered":"

W dniach 9-12 wrze\u015bnia 2024 roku naukowcy z Katedry Informatyki Ekonomicznej przedstawili swoje prace podczas konferencji CLEF 2024, kt\u00f3ra si\u0119 odby\u0142a w Grenoble (Francja). To by\u0142a 25. edycja konferencji CLEF (Conference and Labs of the Evaluation Forum), kt\u00f3ra jest kluczowym wydarzeniem w dziedzinie informacji oraz technologii j\u0119zykowych, skupiaj\u0105cym si\u0119 na ocenie system\u00f3w informacyjnych. Dzi\u0119ki r\u00f3\u017cnorodnym zadaniom testowym, uczestnicy mog\u0105 por\u00f3wnywa\u0107 i doskonali\u0107 swoje algorytmy, co sprzyja post\u0119powi w naukach o informacji. Strona konferencji: clef2024.imag.fr<\/a>.<\/p>\n

Przedstawione przez naszych naukowc\u00f3w prace dotyczy\u0142y r\u00f3\u017cnych metod, kt\u00f3re zosta\u0142y opracowane w ramach konkurs\u00f3w w obszarze wiarygodno\u015bci informacji, oceny weryfikowalno\u015bci tekst\u00f3w, analizy wieloautorskiego stylu pisania oraz wykrywania zagro\u017ce\u0144 w Internecie. Metody te mog\u0105 si\u0119 przyczyni\u0107 do rozwoju narz\u0119dzi do automatycznej oceny jako\u015bci informacji oraz wykrywania fake news.<\/p>\n

W konkursie dotycz\u0105cym wiarygodno\u015bci informacji metoda naszych naukowc\u00f3w zaj\u0119\u0142a pierwsze miejsce. Celem konkursu by\u0142a weryfikacja odporno\u015bci popularnych podej\u015b\u0107 do klasyfikacji tekstu stosowanych do problem\u00f3w oceny wiarygodno\u015bci. W ramach zadania nale\u017ca\u0142o opracowa\u0107 metod\u0119, kt\u00f3ra najskuteczniej zmodyfikuje teksty w taki spos\u00f3b, aby r\u00f3\u017cne algorytmy klasyfikacyjne zmieni\u0142y swoj\u0105 decyzj\u0119 na przeciwn\u0105. Teksty te by\u0142y zwi\u0105zane z 5 obszarami problematycznymi: ocena stronniczo\u015bci wiadomo\u015bci, wykrywanie propagandy, sprawdzanie fakt\u00f3w, wykrywanie plotek oraz dezinformacji zwi\u0105zanej z COVID-19. Spo\u015br\u00f3d wszystkich zespo\u0142\u00f3w, kt\u00f3re zg\u0142osi\u0142y swoje wyniki, metoda naszych naukowc\u00f3w uzyska\u0142a najwy\u017cszy wynik kt\u00f3ry uwzgl\u0119dnia\u0142 miary zwi\u0105zane z poziomem skuteczno\u015bci zmian w tekstach, semantycznego podobie\u0144stwa oraz odleg\u0142o\u015bci edycyjnej Levenshteina. Najwi\u0119ksza liczba punkt\u00f3w pozwoli\u0142a zaj\u0105\u0107 pierwsze miejsce w rankingu, wyprzedaj\u0105c metody opracowane m.in. przez Uniwersytet w Zurychu (UZH). Zwyci\u0119ska metoda zosta\u0142a opracowana przez zesp\u00f3\u0142 w sk\u0142adzie: dr W\u0142odzimierz Lewoniewski<\/a>, dr Piotr Stolarski<\/a>, dr Milena Str\u00f3\u017cyna<\/a>, dr El\u017cbieta Lewa\u0144ska<\/a>, mgr in\u017c. Aleksandra Wojewoda<\/a>, mgr Ewelina Ksi\u0119\u017cniak<\/a>, mgr Marcin Sawi\u0144ski<\/a>. Szczeg\u00f3\u0142y na temat opracowanej metody mo\u017cna znale\u017a\u0107 w artykule pt. „OpenFact at CheckThat! 2024: Combining multiple attack methods for effective adversarial text generation”<\/a>. <\/p>\n

W ramach konkursu dotycz\u0105cym oceny weryfikowalno\u015bci tekst\u00f3w w r\u00f3\u017cnych j\u0119zykach nasi naukowcy zaj\u0119li drugie miejsce w rankingach – dla j\u0119zyka angielskiego i arabskiego. Celem konkursu by\u0142o wykrywanie tekst\u00f3w wartych sprawdzenia (z ang. \u201echeck-worthy\u201d). Zastosowanie modeli j\u0119zykowych opartych na transformerach oraz technik mi\u0119dzyj\u0119zykowego uczenia transferowego pozwoli\u0142o zdoby\u0107 dwa drugie miejsca w rankingach. W konkursie brali udzia\u0142 26 zespo\u0142\u00f3w z o\u015brodk\u00f3w z ca\u0142ego \u015bwiata, w tym z Queen Mary University of London, Sorbonne Universit\u00e9, University of Montr\u00e9al, Airbus Defence and Space. Nasz zesp\u00f3\u0142 zaj\u0105\u0142 drugie miejsce pod k\u0105tem warto\u015bci miary F1 w ramach analizy tekst\u00f3w. Miara F1 jest powszechnie stosowan\u0105 miar\u0105 do oceny modeli uczenia maszynowego, szczeg\u00f3lnie w przypadku nier\u00f3wnowagi klas. Metoda zosta\u0142a opracowana przez zesp\u00f3\u0142 OpenFact w sk\u0142adzie: mgr Marcin Sawi\u0144ski<\/a>, dr hab. Krzysztof W\u0119cel, prof. UEP<\/a>, mgr Ewelina Ksi\u0119\u017cniak<\/a>. Wi\u0119cej informacji na temat opracowanej metody mo\u017cna znale\u017a\u0107 w artykule pt. „OpenFact at CheckThat! 2024: Cross-Lingual Transfer Learning for Check-Worthiness Detection”<\/a>. Warto wspomnie\u0107, \u017ce w roku 2023 zesp\u00f3\u0142 projektu OpenFact zaj\u0105\u0142 pierwsze miejsce<\/a> w konkursie \u201eCLEF-2023 CheckThat! Lab\u201d \u2013 najlepsza metoda pozwalaj\u0105ca wykrywa\u0107 zdania w j\u0119zyku angielskim, kt\u00f3re wymagaj\u0105 sprawdzenia ze wzgl\u0119du na mo\u017cliwo\u015b\u0107 wprowadzania w b\u0142\u0105d.<\/p>\n

Zesp\u00f3\u0142 OpenFact wzi\u0105\u0142 r\u00f3wnie\u017c udzia\u0142 w konkursie dotycz\u0105cego analizy wieloautorskiego stylu pisania. Zadanie konkursowe polega\u0142o na wykrywaniu miejsc, w kt\u00f3rych nast\u0119puje zmiana autora w tek\u015bcie napisanym przez kilku autor\u00f3w. Kluczow\u0105 kwesti\u0105 by\u0142o sprawdzenie, czy mo\u017cliwe jest rozpoznanie r\u00f3\u017cnic w stylu pisania. W efekcie prac powsta\u0142 artyku\u0142 pt. „Team OpenFact at PAN 2024: Fine-Tuning BERT Models with Stylometric Enhancements”<\/a>, opisuj\u0105cy zastosowane podej\u015bcie. Autorzy publikacji: mgr Ewelina Ksi\u0119\u017cniak<\/a>, dr hab. Krzysztof W\u0119cel, prof. UEP<\/a>, mgr Marcin Sawi\u0144ski<\/a>.<\/p>\n

Katedra Informatyki Ekonomicznej realizuje obecnie projekt badawczy OpenFact<\/a>, kierowany przez prof. dra hab. Witolda Abramowicza<\/a>. W ramach tego projektu opracowywane s\u0105 narz\u0119dzia do automatycznego wykrywania fake news w j\u0119zyku polskim. W lipcu 2024 roku wyniki projektu OpenFact drugi rok z rz\u0119du zosta\u0142y ocenione przez NCBiR jako najlepsze w Polsce<\/a>. Zwyci\u0119stwo w presti\u017cowych konkursach potwierdza, \u017ce dokonania naszego zespo\u0142u s\u0105 istotne w skali \u015bwiatowej oraz \u017ce metody opracowane przez zesp\u00f3\u0142 OpenFact osi\u0105gaj\u0105 r\u00f3wnie wysok\u0105 skuteczno\u015b\u0107 w innych j\u0119zykach.<\/p>\n

Projekt OpenFact jest finansowany przez Narodowe Centrum Bada\u0144 i Rozwoju w ramach programu INFOSTRATEG I \u201eZaawansowane technologie informacyjne, telekomunikacyjne i mechatroniczne\u201d.<\/p>\n

Poza projektem OpenFact, naukowcy z Katedry Informatyki Ekonomicznej uzyskali r\u00f3wnie\u017c najlepszy wynik w konkursie w zakresie wczesnego wykrywania zagro\u017ce\u0144 w Internecie. Celem konkursu by\u0142o opracowanie systemu wczesnego rozpoznawania os\u00f3b z anoreksj\u0105 na podstawie ich aktywno\u015bci na platformach spo\u0142eczno\u015bciowych. Spo\u015br\u00f3d licznych zespo\u0142\u00f3w, kt\u00f3re zg\u0142osi\u0142y swoje rozwi\u0105zania, metoda opracowana przez naszych naukowc\u00f3w osi\u0105gn\u0119\u0142a najlepszy wynik wed\u0142ug metryki ERDE (Early Risk Detection Error). Metryka ta uwzgl\u0119dnia zar\u00f3wno precyzj\u0119 wynik\u00f3w, jak i czas potrzebny do zaalarmowania o mo\u017cliwo\u015bci, \u017ce dana osoba mo\u017ce cierpie\u0107 na anoreksj\u0119. Aspekt ten stanowi\u0142 kluczowy element konkursu oraz ma realny wp\u0142yw przy zastosowaniu system\u00f3w wczesnego ostrzegania. Autorzy metody: mgr Oskar Riewe-Per\u0142a<\/a> oraz dr hab. Agata Filipowska, prof. UEP<\/a>. Autorskie rozwi\u0105zanie jest opisane w artykule pt. „Combining Recommender Systems and Language Models in Early Detection of Signs of Anorexia”<\/a>.<\/p>\n","protected":false},"excerpt":{"rendered":"

W dniach 9-12 wrze\u015bnia 2024 roku naukowcy z Katedry Informatyki Ekonomicznej przedstawili swoje prace podczas konferencji CLEF 2024, kt\u00f3ra si\u0119 odby\u0142a w Grenoble (Francja). To by\u0142a 25. edycja konferencji CLEF (Conference and Labs of the Evaluation Forum), kt\u00f3ra jest kluczowym wydarzeniem w dziedzinie informacji oraz technologii j\u0119zykowych, skupiaj\u0105cym si\u0119 na ocenie system\u00f3w informacyjnych. Dzi\u0119ki r\u00f3\u017cnorodnym zadaniom testowym, uczestnicy mog\u0105 por\u00f3wnywa\u0107 i doskonali\u0107 swoje algorytmy, co sprzyja post\u0119powi w naukach o … Wi\u0119cej informacji<\/a><\/p>\n","protected":false},"author":1,"featured_media":1103,"comment_status":"closed","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[1],"tags":[46,249,312,108,230,89,42,7,231,26,224,34,18,21,6],"class_list":["post-1102","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-wiadomosci","tag-agata-filipowska","tag-aleksandra-wojewoda","tag-clef","tag-elzbieta-lewanska","tag-ewelina-ksiezniak","tag-francja","tag-konferencje","tag-krzysztof-wecel","tag-marcin-sawinski","tag-milena-strozyna","tag-openfact","tag-oskar-riewe-perla","tag-piotr-stolarski","tag-witold-abramowicz","tag-wlodzimierz-lewoniewski"],"_links":{"self":[{"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/posts\/1102","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/comments?post=1102"}],"version-history":[{"count":0,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/posts\/1102\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/media\/1103"}],"wp:attachment":[{"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/media?parent=1102"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/categories?post=1102"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/tags?post=1102"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}