b898e685766688908f4939ba6f44b82e922b3a01
test2
- challenge
- Passage Retrieval
- submitter
- Maciej
- submitted
- 2022-11-15 19:46:46.482669 UTC
- file basename
- out
test-A / 128013862272d9ff58fa8c0423757d680430db61
| Metric | Score |
|---|---|
| NDCG@10 | 48.70 |
dev-0 / 92e38d172ae880e3514bef9010ad184c733336aa
| Metric | Score |
|---|---|
| NDCG@10 | 23.86 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-B NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 1895497-0 2734948-1 2734991-1 2377444-0 3963580-0 1339527-2 531352-2 4690657-3 1284905-9 886820-2 | 0.00 |
| 2 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 2005270-0 49762-0 3572733-0 49767-0 3584220-0 1288875-9 552904-0 1131567-3 140871-1 109175-0 | 0.00 |
| 3 | wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? | 27859-0 799893-7 799893-14 4518252-4 | 54733-2 145643-3 55688-19 4518252-14 2631259-6 2984799-1 3120275-11 5082924-1 146627-0 799841-3 | 0.00 |
| 4 | wiki-trivia W którym dniu tygodnia Robinson Crusoe spotkał Piętaszka? | 118590-4 2592188-2 | 1590509-0 118590-0 377886-0 2592188-0 1802864-7 1814605-0 1515321-1 118590-13 1590509-5 1515321-0 | 0.00 |
| 5 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 4978480-17 4805651-1 1599022-0 1680868-2 1680869-2 5164089-0 4929365-0 1340884-1 1799769-22 1058932-17 | 0.00 |
| 6 | wiki-trivia Z którego państwa pochodzi twórca Gadu-Gadu? | 1930-0 435065-0 1885378-1 | 1401357-1 1500704-1 672091-4 4499636-2 2995080-4 9629-5 130371-0 14659-2 1218804-0 1049296-0 | 0.00 |
| 7 | wiki-trivia Jak z łaciny nazywa się zmętnienie soczewki oka? | 49463-0 | 1835554-0 37242-4 144165-2 37240-0 457851-0 49463-27 1813046-4 493615-0 9313-7 100011-4 | 0.00 |
| 8 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 181282-7 181284-0 941032-0 162129-4 11289-3 1683720-52 51116-0 4608972-0 3710137-7 37916-2 | 0.00 |
| 9 | wiki-trivia Jakiego obrazu dotyczy akcja filmu Vinci? | 159017-5 89983-8 170281-11 764160-22 | 1005097-0 1005699-0 1005712-0 489854-11 779791-2 1004592-0 3121677-1 2342647-4 960880-4 2357909-7 | 0.00 |
| 10 | wiki-trivia Jak nazywał się twórca Polskiej Akcji Humanitarnej? | 2733-0 437349-12 4306798-3 4211917-8 | 765923-8 4399166-2 1042823-1 1522064-8 27660-4 46203-23 27660-2 4217106-7 1000009-30 27660-8 | 0.00 |
| 11 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 3256060-0 28808-10 21188-9 461101-1 600284-15 745046-15 3334003-0 121015-8 2739552-1 692461-0 | 0.00 |
| 12 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 1840674-1 1300575-25 116359-10 1757451-0 547665-0 1757290-0 987393-0 356694-0 89112-0 1277934-0 | 0.00 |
| 13 | wiki-trivia W którym starożytnym mieście budowano wieżę Babel? | 10168-12 13187-9 1861864-1 | 557961-1 10168-5 471537-1 658-14 5113986-2 1836031-13 1475629-2 15960-1 1569206-1 1096419-35 | 0.00 |
| 14 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 354435-4 4476880-0 4710309-0 73042-0 5199359-5 1049830-0 1217169-0 170606-0 1258696-0 16098-2 | 0.00 |
| 15 | wiki-trivia Z którego państwa pochodzi Stieg Larsson, autor trylogii kryminalnej „Millennium”? | 4446190-0 5018537-0 461434-5 | 2044201-2 1442177-0 3612653-0 4102741-0 623975-0 4081812-6 1442177-1 1442177-6 138165-11 1442177-18 | 0.00 |
| 16 | wiki-trivia Sahara Zachodnia posiada duże złoża miedzi, fosforytów czy uranu? | 220899-2 1300844-0 | 1834-101 1707589-10 10256-47 79200-7 2195336-6 21926-37 1629966-23 1827785-30 414925-70 1724189-7 | 0.00 |
| 17 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 24742-3 24742-7 113882-4 136382-4 1910813-0 169168-13 1047778-1 147137-2 113867-4 320257-1 | 0.00 |
| 18 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 917904-18 96488-10 30332-19 3277-9 29-36 4428906-3 12158-14 1730364-24 513522-0 27951-28 | 0.00 |
| 19 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 4201896-1 1461623-55 1461623-5 1848206-24 692416-5 1461623-10 186776-43 2837475-1 138493-16 4704805-0 | 0.00 |
| 20 | wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? | 471697-0 490372-6 18084-11 142774-5 | 1143976-3 3678011-6 954783-1 7417-8 23992-398 1063248-6 32943-47 956091-1 115743-1 48631-5 | 0.00 |
| 21 | wiki-trivia W którym roku odbyła się pierwsza próba jądrowa? | 2312943-3 274961-0 1937784-0 1756259-2 4057-3 | 2399186-3 4070119-0 2894425-0 3026773-3 15434-85 2771033-1 2809380-0 14325-0 129691-93 192453-38 | 0.00 |
| 22 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 1271388-0 318249-12 978017-33 93420-0 765307-0 449955-0 529069-43 318249-0 503721-12 2995162-1 | 0.00 |
| 23 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 31868-11 3088422-0 113451-9 171302-0 86139-1 513348-0 3543302-1 1005884-9 52390-0 94454-0 | 0.00 |
| 24 | wiki-trivia Który car rosyjski wprowadził grażdankę? | 129904-0 908-2 22313-16 2854198-24 2705-7 | 752470-7 2510536-0 2080114-41 121977-3 2792260-3 3327356-0 489959-0 45252-0 333635-17 2216861-8 | 0.00 |
| 25 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 1543990-4 524475-5 623622-3 1919191-28 400930-2 4297167-6 3185428-10 698175-3 316692-1 3385785-0 | 0.00 |
| 26 | wiki-trivia Jak z francuskiego określamy okulary, które trzymają się tylko na nosie? | 1202545-0 | 4115201-51 185768-12 1419330-21 1599961-2 145706-1 296925-4 472699-113 332590-46 777737-1 764920-19 | 0.00 |
| 27 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 1658867-146 363695-7 209672-12 1048048-3 552783-2 1765337-4 30378-9 243442-5 3267240-5 828197-4 | 0.00 |
| 28 | wiki-trivia Z iloma państwami graniczy San Marino? | 5531-17 44915-14 | 1874026-0 2034735-0 1456227-0 2028372-13 1219119-0 1209122-0 2028372-0 5531-0 2027875-8 1193751-0 | 0.00 |
| 29 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 1418508-339 2048728-5 4413539-2 1809833-3 2003627-187 4411105-4 2549074-2 189959-1 1655928-3 106247-3 | 0.00 |
| 30 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 2311468-1 43683-7 43683-6 1460654-0 43683-10 8807-0 3136885-4 126631-9 6567-1 984901-6 | 0.00 |
| 31 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 685822-2 3995399-1 1108611-1 4905635-13 434394-136 3538138-40 181944-2 185547-5 2835627-12 1572977-10 | 0.00 |
| 32 | wiki-trivia Czy w Polsce panował król o imieniu Ludwik? | 18470-0 11289-2 489028-1 650042-0 1227360-0 | 39613-0 32410-0 974345-0 33267-0 1367257-8 941032-0 6502-3 183185-22 37916-0 37694-0 | 0.00 |
| 33 | wiki-trivia Funkcjonariusz państwowy który ściga przestępców i oskarża ich w sądzie to...? | 152150-0 152150-14 2194475-2 537444-1 | 1525907-0 4582830-0 4379515-0 5131340-0 3584290-1 7859-71 1810145-8 1822497-3 3713387-0 4372477-0 | 0.00 |
| 34 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 5060493-2 403192-4 4181943-6 7774-1 1003257-1 3327409-15 165529-32 2022936-6 3243471-12 1235252-3 | 0.00 |
| 35 | wiki-trivia Symbolem którego pierwiastka jest Cr? | 825-0 1676212-0 | 24742-9 30330-19 30333-0 30332-1 896285-6 74545-62 3968911-2 10783-3 2079167-0 182850-2 | 0.00 |
| 36 | wiki-trivia Jak nazywała się dawna rezydencja cesarska w Pekinie? | 74254-0 95568-1 | 5047935-0 2070144-0 904989-6 1906305-0 840139-0 1309650-6 2165527-10 2847383-0 2003201-7 2521418-0 | 0.00 |
| 37 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 391783-28 391783-7 391783-4 391783-18 2909498-11 4674879-8 1322911-1 4570607-2 3299821-51 2848803-175 | 0.00 |
| 38 | wiki-trivia Kto jest autorem wiersza o Słoniu Trąbalskim? | 23626-20 1757856-4 4439842-4 | 191002-5 5128431-61 68774-113 316377-9 2828147-5 3144098-1 428616-7 4369874-32 2735278-7 42400-11 | 0.00 |
| 39 | wiki-trivia Jak nazywa się jadalnia dla załogi na statku? | 16828-0 | 391783-0 391783-45 4356-2 4183460-0 1280758-20 1575402-9 837036-7 1568420-10 4974149-0 24929-0 | 0.00 |
| 40 | wiki-trivia W którym roku Otton III i Bolesław Chrobry spotkali się na zjeździe gnieźnieńskim? | 2048803-0 1930212-0 8196-0 44843-1 411720-13 | 10559-0 1876386-10 2150371-1 1643289-4 44843-2 626730-43 20984-5 1643632-8 3178522-6 913829-7 | 0.00 |