{"id":1499,"date":"2026-11-12T11:05:27","date_gmt":"2026-11-12T10:05:27","guid":{"rendered":"https:\/\/kie.ue.poznan.pl\/pl\/?p=1499"},"modified":"2026-11-12T11:58:42","modified_gmt":"2026-11-12T10:58:42","slug":"czy-duze-modele-jezykowe-moga-zastapic-ludzkich-anotatorow-badania-naszych-naukowcow-na-konferencji-emnlp-2026","status":"publish","type":"post","link":"https:\/\/kie.ue.poznan.pl\/pl\/wiadomosci\/czy-duze-modele-jezykowe-moga-zastapic-ludzkich-anotatorow-badania-naszych-naukowcow-na-konferencji-emnlp-2026\/","title":{"rendered":"Czy du\u017ce modele j\u0119zykowe mog\u0105 zast\u0105pi\u0107 ludzkich anotator\u00f3w? Badania naszych naukowc\u00f3w na konferencji EMNLP 2026"},"content":{"rendered":"

W dniach 24\u201329 pa\u017adziernika 2026 r. w Budapeszcie odby\u0142a si\u0119 konferencja EMNLP 2026 (Conference on Empirical Methods in Natural Language Processing). Jest to jedno z najwa\u017cniejszych mi\u0119dzynarodowych wydarze\u0144 naukowych po\u015bwi\u0119conych przetwarzaniu j\u0119zyka naturalnego. Podczas konferenceji dr Milena Str\u00f3\u017cyna<\/a> przedstawi\u0142a artyku\u0142 pt. \u201eMulti-Model Framework for Sentiment Annotation: A Use Case of Multilingual Wikipedia<\/a>\u201d. Praca prezentuje podej\u015bcie wykorzystuj\u0105ce kilka modeli sztucznej inteligencji jako niezale\u017cnych anotator\u00f3w, kt\u00f3rych zgodno\u015b\u0107 pozwala wyznacza\u0107 wiarygodne etykiety wyd\u017awi\u0119ku tekstu.<\/p>\n

R\u0119czne oznaczanie danych tekstowych jest kosztowne i czasoch\u0142onne, dlatego coraz cz\u0119\u015bciej wykorzystuje si\u0119 do tego du\u017ce modele j\u0119zykowe (LLM). Ich odpowiedzi bywaj\u0105 jednak niestabilne i zale\u017cne od konkretnego modelu. Autorzy zaproponowali podej\u015bcie, w kt\u00f3rym kilka modeli pe\u0142ni rol\u0119 niezale\u017cnych anotator\u00f3w. W badaniu ka\u017cdy z trzech modeli (GPT-5.2, Gemini 3.1 Pro, Claude Opus 4.6) ocenia\u0142 wyd\u017awi\u0119k zda\u0144 trzykrotnie. Etykieta by\u0142a uznawana za wiarygodn\u0105 tylko wtedy, gdy wszystkie dziewi\u0119\u0107 ocen by\u0142o zgodnych. Metod\u0119 sprawdzono na zdaniach pochodz\u0105cych z abstrakt\u00f3w artyku\u0142\u00f3w Wikipedii w pi\u0119ciu j\u0119zykach: angielskim, niemieckim, hiszpa\u0144skim, polskim i rosyjskim.<\/p>\n

\"\"<\/a>Pe\u0142na zgodno\u015b\u0107 wszystkich przebieg\u00f3w dotyczy\u0142a od 71% do 76% zda\u0144, w zale\u017cno\u015bci od j\u0119zyka. Wsp\u00f3\u0142czynnik Fleissa \u03ba wyni\u00f3s\u0142 od 0,72 do 0,76. W przypadku zda\u0144, co do kt\u00f3rych modele osi\u0105gn\u0119\u0142y konsensus, etykiety w pe\u0142ni pokry\u0142y si\u0119 z ocenami ludzkich anotator\u00f3w. Analiza pokaza\u0142a te\u017c ograniczenia: modele wyra\u017anie gorzej radz\u0105 sobie z rozpoznawaniem wyd\u017awi\u0119ku negatywnego. W efekcie powsta\u0142 wieloj\u0119zyczny zbi\u00f3r ok. 75 tys. zda\u0144 z etykietami wyd\u017awi\u0119ku. Zosta\u0142 on udost\u0119pniony publicznie w serwisie Hugging Face<\/a>, aby wspiera\u0107 skalowalne i powtarzalne adnotowanie danych.<\/p>\n

Autorzy publikacji: dr W\u0142odzimierz Lewoniewski<\/a>, dr Milena Str\u00f3\u017cyna<\/a> oraz mgr Izabela Czuma\u0142owska<\/a>. Pe\u0142ny tekst artyku\u0142u jest dost\u0119pny na stronie ACL Anthology. DOI: 10.18653\/2026.findings-emnlp.1830<\/a><\/p>\n

EMNLP to coroczna konferencja organizowana przez SIGDAT, grup\u0119 tematyczn\u0105 ACL (Association for Computational Linguistics). Nale\u017cy do najbardziej presti\u017cowych konferencji w dziedzinie przetwarzania j\u0119zyka naturalnego i ma najwy\u017csz\u0105 kategori\u0119 A* w rankingu CORE. Tegoroczna edycja odby\u0142a si\u0119 w centrum kongresowo-wystawienniczym Hungexpo w Budapeszcie.<\/p>\n","protected":false},"excerpt":{"rendered":"

W dniach 24\u201329 pa\u017adziernika 2026 r. w Budapeszcie odby\u0142a si\u0119 konferencja EMNLP 2026 (Conference on Empirical Methods in Natural Language Processing). Jest to jedno z najwa\u017cniejszych mi\u0119dzynarodowych wydarze\u0144 naukowych po\u015bwi\u0119conych przetwarzaniu j\u0119zyka naturalnego. Podczas konferenceji dr Milena Str\u00f3\u017cyna przedstawi\u0142a artyku\u0142 pt. \u201eMulti-Model Framework for Sentiment Annotation: A Use Case of Multilingual Wikipedia\u201d. Praca prezentuje podej\u015bcie wykorzystuj\u0105ce kilka modeli sztucznej inteligencji jako niezale\u017cnych anotator\u00f3w, kt\u00f3rych zgodno\u015b\u0107 pozwala wyznacza\u0107 wiarygodne etykiety wyd\u017awi\u0119ku … Wi\u0119cej informacji<\/a><\/p>\n","protected":false},"author":1,"featured_media":1502,"comment_status":"closed","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[1],"tags":[386,445,292,459,444,270,340,42,26,284,460,6],"class_list":["post-1499","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-wiadomosci","tag-analiza-wydzwieku","tag-claude-opus","tag-duze-modele-jezykowe","tag-emnlp","tag-google-gemini","tag-gpt","tag-izabela-czumalowska","tag-konferencje","tag-milena-strozyna","tag-przetwarzanie-jezyka-naturalnego","tag-wegry","tag-wlodzimierz-lewoniewski"],"_links":{"self":[{"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/posts\/1499","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/comments?post=1499"}],"version-history":[{"count":0,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/posts\/1499\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/media\/1502"}],"wp:attachment":[{"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/media?parent=1499"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/categories?post=1499"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/kie.ue.poznan.pl\/pl\/wp-json\/wp\/v2\/tags?post=1499"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}