a18099d8973ca88be1f48a8dd6a05e9fde261b6f
Sanity check - v3
- challenge
- Abbreviation disambiguation
- submitter
- Marek
- submitted
- 2023-03-15 19:04:31.415955 UTC
- file basename
- out
test-B / f7e5501f5463a5da97379096ca48926c26997cb6
| Metric | Score |
|---|---|
| WeightedAccuracy | 88.73 |
test-A / f1fd540bdc686db20bc880290ffe09c9fe219fa0
| Metric | Score |
|---|---|
| WeightedAccuracy | 86.90 |
dev-0 / 21197e085d66fd7aa031fa2217a97e929e98d263
| Metric | Score |
|---|---|
| WeightedAccuracy | 90.41 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-B WeightedAccuracy |
|---|---|---|---|---|
| 1 | m. 897) dk 77 m. Trześń - Gorzyce w km 24+000 do 27+900 dk 73 m. Kamienica Dolna dk 28 <mask> Jasło -Trzcinica dk 77 m. Sandomierz (odc.… | miasto miasto | miejscowość miejscowość | 0.00 |
| 2 | n. w odpowiedni moment. Warto jednak pamiętać, że zbyt intensywne uprawianie seksu (<mask> kilkukrotnie w ciągu dnia) może negatywnie odbić … | nawet nawet | na przykład na przykład | 0.00 |
| 3 | j. stosowanych w ramach terapeutycznych programów zdrowotnych i dotyczących zakresu <mask> w. | jak jak | języka język | 0.00 |
| 4 | w. Wewnątrz świątyni zobaczyć można m.in. rokokową ambonę, barokową chrzcielnicę czy XVIII <mask> marmurowe epitafium św. Jana Nepomucena. O… | wieczne wieczny | wieku wiek | 0.00 |
| 5 | ma. Ks. problem. Ale ponieważ odnosi się do spraw polsko-żydowskich, to dla mnie problemu nie <mask> Michał Czajkowski, archeolog i biblista… | ma. ksiądz ma. ksiądz | ma. ksiądz ma. ksiądz | 0.00 |
| 6 | s. Tajemnicy, przygotowanym przez Kongregację Nauki Wiary, powiedział: „Chociaż to <mask> Łucji dana była wizja, to jednak interpre tacja s… | świętej święty | siostra siostra | 0.00 |
| 7 | zam. Aluminium Sp. z o.o. S.K.A. z siedzibą w Janikowie, oraz Marek Ignacy Michalski <mask> w Nowym Dworze. | zamieszkały zamieszkały | zamieszkanie zamieszkanie | 0.00 |
| 8 | kat. B. Art. decyzję w mocy. W jego ocenie starosta nie mógł wydać Kazimierzowi T. prawa jazdy <mask> 12 ust. 2 pkt 1 ustawy z 2011 r. o kie… | kategorii b. artykuł kategoria b. artykuł | kategorii b. artykuł kategoria b. artykuł | 0.00 |
| 9 | wik. par. Zduńskiej Woli; 10. Ks. Robert Kaczmarek – z wik. par. św. Pawła Ap. w Zduńskiej Woli, <mask> Podwyższenia Krzyża Świętego w Kole;… | wikary parafii wikary parafia | wieku parafii wiek parafia | 0.00 |
| 10 | p. n. e. Na przykład w 1995 roku „Uluburun” – replika statku, który zatonął około 1300 lat <mask> u wybrzeży Turcji w pobliżu miejscowości o… | przed nasza erą przed nasza erą | przed naszą erą przed naszą erą | 0.00 |
| 11 | p. zeznania. Jest to niezgodne z zasadami ustalonymi przez Trybunał w sprawie Salduz <mask> Turcji (wyrok z 27 listopada 2008 r., skarga nr … | przeciw; przeciwko przeciw; przeciwko | przeciw przeciw | 0.00 |
| 12 | p. św. Piotra Apostoła Wtorek / 27 XII / Zawadka cz. I / od 9.00 / od p. Grzyb – <mask> Gacur / Ks. Artur / Środa / 28 XII / Gorzeń Dolny … | pana pan | pani pani | 0.00 |
| 13 | p. TVN24 lub TOK FM uda się druga strona konfliktu, czyli p. Szydło, p. Hofman lub <mask> Błaszczak i opowiadają, na czym polega konflikt w … | pan pan | pani pani | 0.00 |
| 14 | bbl. powyżej poziomu 110 USD/bbl. Ropa WTI w Nowym Jorku zdrożała z kolei do poziomu 99 USD/<mask> Decyzja Fed o ograniczaniu programu skupu… | baryłkę ropy naftowej baryłka ropy naftowej | baryłkę baryłka | 0.00 |
| 15 | dot. ul. informował Jan Machowski, rzecznik ZIM. Tymczasem wtedy tworzony był już projekt <mask> Kocmyrzowskiej. W GDDKiA przekonywali z kol… | dotyczący ulicy dotyczący ulica | dotyczącej ulicy dotyczyć ulica | 0.00 |
| 16 | p. Stream 2, powiedział: Na pewno będzie to główny temat rozmowy p. Morawieckiego z <mask> Merkel. (…) Po tym, co się wydarzyło w Salisbury… | panią pani | pana pan | 0.00 |
| 17 | p. o braku zdecydowanych działań ze strony Starostwa Powiatowgo w Bydgoszczy przez <mask> Mirosławę i Zenona Kuśmierzaków - napisał. - Wielo… | panią pani | panów pan | 0.00 |
| 18 | ryc. wzrasta z powodu małej zasobności gleb uprawnych w ten składnik. Jak przedstawiono na <mask> 1, największy udział mają gleby o średniej… | rycinie rycina | rysunku rysunek | 0.00 |
| 19 | B. mec. Katarzyna Chlebicka-Skowronek. CZYTAJ WIĘCEJ Szkody nie było, czy była? Obrońca <mask> Alexander Stan-Otasevici stanowczo odpierał z… | b. mecenas b. mecenas | b. mecenas b. mecenas | 0.00 |
| 20 | w. udziałów niemych oraz wymóg podpisu notarialnie poświadczonego przy sprzedaży udziałó<mask> Faktem jest, że ww. problemy nie dotyczą s… | w. w. | wymienione wymieniony | 0.00 |
| 21 | g. każdego z nominowanych. Najważniejsze jest to, by na nagraniu pojawiło się 300 <mask> Trzeba je przedstawić w jakiś symboliczny s… | gramów gram | g. g. | 0.00 |
| 22 | st. C. możliwe słabe przelotne opady deszczu. Temperatura maksymalna od 16 st. C do 18 <mask> Natomiast w centrum kraju zachmurzenie duże z … | stopni celsjusza stopień celsjusz | stopni celsiusza stopień celsiusz | 0.00 |
| 23 | p. pozostawia wiele do życzenia o czym powiadomiliśmy zarówno p. Branickiego, jak i <mask> Lemańską. Jakkolwiek nie dziwi nas fakt, że p. Le… | panią pani | pana pan | 0.00 |
| 24 | m.in. dyr. kończyła się krzykiem i zastraszaniem” - piszą ratownicy. Nagrania, które przedstawili <mask> Popławskiej, otrzymał również adwok… | między innymi dyrektorce między innymi dyrektorka | między innymi dyrektor między innymi dyrektor | 0.00 |
| 25 | nr. tel. kom. ich transportu. Każdy, kto chciałby pomóc, może się kontaktować z szefem PKPS pod <mask> 508490700. | numerem telefonu komórkowego numer telefon komórkowy | numerem telefonu komórkowego numer telefonu komórkowy | 25.00 |
| 26 | s. prof. prof. Jacek Zaremba i prof. Jerzy Umiastowski. Wśród etyków i teologów znaleźli się <mask> Barbara Chyrowicz, prof. Jacek Hołówka, … | siostra profesorka siostra profesor | siostra profesor siostra profesor | 75.00 |
| 27 | nr. kom. tam bezpośrednio. Posiadacze komórek muszą jednak bezpłatnie zarejestrować się pod <mask> 503 503 733 lub wysłać SMS-a na nr 34222 … | numerem komórkowym numer komórkowy | numerem komórkowy numer komórkowy | 75.00 |
| 28 | s. 26; o niewolnictwie czytaj szczególnie s. 170-172. [28] ks. Stanisław Jóźwiak, <mask> 69. [31] św. Tomasz z Akwinu, O królowaniu – król… | strona strona | strony strona | 75.00 |
| 29 | s. 26; o niewolnictwie czytaj szczególnie s. 170-172. [28] ks. Stanisław Jóźwiak, <mask> 69. [31] św. Tomasz z Akwinu, O królowaniu – król… | strona strona | strony strona | 75.00 |
| 30 | lm. niebieskiego 89 lm, dla zielonego 214 lm, dla czerwonego 229 lm, dla koloru białego 272 <mask> Temperatura barwowa dla diod koloru białe… | lumeny lumen | lumenów lumen | 75.00 |
| 31 | w. Potwierdziła natomiast, że w dokumentacji finansowej firmy została dokonana korekta i w/<mask> faktura nie została zapłacona. Prokuratur… | wymieniona wymieniony | wymienione wymieniony | 75.00 |
| 32 | Inf. dla wspólnot wierzących oraz odbudowanie hierarchii kościelnej. Źródło sprawdzone, <mask> wiarygodna" – brzmiała konkluzja relacji z ro… | informacja informacja | informacje informacja | 75.00 |
| 33 | m. metry, natomiast najwyższą budowlą w mieście jest komin elektrociepłowni w Łęgu - 262 <mask> 'Błękitek' przy rondzie Grzegórzeckim ma 105… | metrowy metr | metrów metr | 75.00 |
| 34 | m. Austriak Gregor Schlierenzauer skoczył był 5., tuż za Małyszem, który skoczył 135 <mask> Ammann w o trzy metry poprawił rekord skoczni na… | metra metr | metrów metr | 75.00 |
| 35 | dn. sejmowych oraz poddane pod głosowanie całej Izby podczas najbliższego posiedzenia w <mask> 9-11 września 2015 r Jakie największe zagroże… | dniu dzień | dniach dzień | 75.00 |
| 36 | b. się na rozmowę z b. ważnym, kluczowym dla służb ówczesnych, generałem' - dodała <mask> wicepremier. Według doniesień mediów, to właśnie … | była były | byłym były | 75.00 |
| 37 | j. brano pod uwagę następujące kryteria: Programy studiów prowadzone całkowicie w <mask> obcych w roku akad. 2008/09 (4%) Studiujący w jęz… | językach język | języku język | 75.00 |
| 38 | d. ponad 1,2 mld zł za sprzedane resztówki akcji firmy Vattenfall Distribution Poland (<mask> Górnośląski Zakład Energetyczny) i firmy Vatte… | dawny dawny | dawniej dawny | 75.00 |
| 39 | m. - 134 m. Słoweniec jest drugi. Prowadzi Marius Lindvik. Jewgienij Klimow - 132 <mask> Rosjanin jest 3. Robert Johansson -130,5 m. Dwóch… | metry metr | metra metr | 75.00 |
| 40 | s. Czy państwo wiedzą, jaki był koniec zdrajcy Judasza? Obwiesił się! 5. Bury Jan <mask> Antoniego | syn syn | syna syn | 75.00 |