ff2332d8f784964d11229040582322d1f14499a5
BM25+none_category_filtering
- challenge
- Passage Retrieval
- submitter
- Marek
- submitted
- 2022-09-16 18:36:56.064017 UTC
- file basename
- out
test-A / 67a6c2ae4f81f98f4fe74092e81be0db23dc2cce
| Metric | Score |
|---|---|
| NDCG@10 | 44.70 |
dev-0 / cc0523f2e9d7ce1f121b1e1622ca23c9aaf9c99d
| Metric | Score |
|---|---|
| NDCG@10 | 27.68 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-B NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 1860317-0 1860317-1 1860317-2 3524832-0 3366912-0 2377444-1 4031319-0 3366918-0 2377444-0 1324360-0 | 0.00 |
| 2 | wiki-trivia Co budował w Egipcie inżynier Tarkowski, ojciec Stasia z powieści „W pustyni i w puszczy”? | 934126-1 88267-17 | 934126-0 934126-4 2279030-0 664688-3 162084-10 1775405-2 427787-0 88267-3 750315-0 42266-5 | 0.00 |
| 3 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 49762-4 552904-0 49762-12 4882462-0 109175-0 101527-1 2005270-0 49762-0 3572733-0 1131567-3 | 0.00 |
| 4 | wiki-trivia W którym dniu tygodnia Robinson Crusoe spotkał Piętaszka? | 118590-4 2592188-2 | 1515321-0 1590509-0 1515296-1 1515321-1 1801959-2 4823515-5 1590509-5 1590509-8 377886-0 118590-0 | 0.00 |
| 5 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 306982-0 2917419-0 1488895-0 222547-0 2304-274 3083018-1 4843686-47 1799769-22 2085194-0 3880648-1 | 0.00 |
| 6 | wiki-trivia Z którego państwa pochodzi twórca Gadu-Gadu? | 1930-0 435065-0 1885378-1 | 201215-1 201215-0 3105747-3 1722311-0 3105747-0 3906020-0 3906021-0 3906022-0 3906024-0 3906027-0 | 0.00 |
| 7 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 941032-0 181284-0 2077252-2 37916-0 3710137-7 1697353-1 4208494-0 3710137-4 162129-6 1073425-1 | 0.00 |
| 8 | wiki-trivia Jakiego obrazu dotyczy akcja filmu Vinci? | 159017-5 89983-8 170281-11 764160-22 | 1004592-0 225555-0 734566-0 764160-15 779791-2 1152851-0 805064-0 2956260-0 811598-0 764160-25 | 0.00 |
| 9 | wiki-trivia Jak nazywał się twórca Polskiej Akcji Humanitarnej? | 2733-0 437349-12 4306798-3 4211917-8 | 27660-12 27660-4 27660-2 27660-0 27660-8 27660-10 27660-9 3183225-2 27660-5 1000009-30 | 0.00 |
| 10 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 87255-2 461101-1 762402-0 1351515-1 7084-1 1589274-4 1965911-0 1956520-0 1099475-0 1099475-2 | 0.00 |
| 11 | wiki-trivia Co brzmi w trzcinie w bajce Jana Brzechwy? | 1131585-0 80790-2 | 74216-0 3618658-0 36056-0 1062709-0 1061454-0 1589431-4 36056-1 3264058-0 2245517-0 36056-13 | 0.00 |
| 12 | wiki-trivia Jaki stopień wojskowy miał Henryk Dobrzański, ps. Hubal? | 37931-0 1152562-0 3861237-0 2294984-0 407279-0 | 37931-55 37931-51 37931-54 37931-48 104865-0 37931-53 37931-47 37931-67 37931-56 37931-50 | 0.00 |
| 13 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 5465-10 5465-0 988157-0 986327-0 1136343-0 108372-0 987393-0 74539-0 453381-20 456997-0 | 0.00 |
| 14 | wiki-trivia W którym starożytnym mieście budowano wieżę Babel? | 10168-12 13187-9 1861864-1 | 10168-5 10168-29 10168-27 10168-0 10168-17 557961-1 10168-26 1868343-5 1399798-0 10168-15 | 0.00 |
| 15 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 1216081-0 354435-4 3317324-0 1261888-0 937406-0 4625746-5 1227588-0 14419-11 73042-0 2920865-0 | 0.00 |
| 16 | wiki-trivia Z którego państwa pochodzi Stieg Larsson, autor trylogii kryminalnej „Millennium”? | 4446190-0 5018537-0 461434-5 | 1442177-18 1065320-19 1442177-0 2044201-0 2130804-0 4081812-6 5018537-22 4102741-0 2044201-2 6608-7 | 0.00 |
| 17 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 21099-0 10037-0 2294176-0 45499-0 5377-0 2294176-14 2294176-1 2294176-16 34187-0 2294176-12 | 0.00 |
| 18 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 889941-51 9828-0 3533-0 513522-0 896399-13 3289-61 1856051-1 896399-3 3277-7 710042-1 | 0.00 |
| 19 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 474561-0 4201896-1 89359-0 7431-75 7431-0 4319444-0 474561-2 682650-2 2728125-2 7431-94 | 0.00 |
| 20 | wiki-trivia W którym roku odbyła się pierwsza próba jądrowa? | 2312943-3 274961-0 1937784-0 1756259-2 4057-3 | 1696493-8 1696493-5 129691-93 2894425-1 1826203-36 1614614-3 80936-12 7751-25 3513259-0 3452372-3 | 0.00 |
| 21 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 3820485-9 3820485-25 35994-24 2339394-1 45735-9 3820485-4 1264345-0 3820485-10 802949-47 1271388-25 | 0.00 |
| 22 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 1676730-0 1263801-3 1834305-0 456762-2 172738-0 2789510-3 1835943-0 2174186-2 743905-1 796633-2 | 0.00 |
| 23 | wiki-trivia Kto napisał „Ziemię obiecaną” oraz „Chłopów”? | 491777-0 503711-0 6624-9 503711-67 | 89155-0 2052685-20 503711-1 503714-0 746926-74 746926-34 503711-3 1779092-0 746926-23 830631-0 | 0.00 |
| 24 | wiki-trivia Jak nazywała się akcja przesiedlenia Ukraińców z 1947 r.? | 20338-0 785771-2 20297-4 929707-2 968749-0 | 20338-18 1244780-20 875057-0 2314724-9 2314724-26 20338-19 2146169-7 1548298-1 706804-21 381998-21 | 0.00 |
| 25 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 108880-8 316692-1 4997266-5 175305-4 1919191-28 2239844-21 1249108-5 222726-8 558716-62 515970-0 | 0.00 |
| 26 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 390349-0 1658867-146 677311-5 314765-5 676901-3 1760137-1 568164-1 363695-7 651438-1 395316-1 | 0.00 |
| 27 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 1996923-0 984901-6 43683-7 43683-10 43683-2 984901-17 43683-6 7-49 2311468-5 7-72 | 0.00 |
| 28 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 4509295-0 4364380-0 1516578-7 4364380-9 4242871-0 1501755-0 15766-0 4388155-0 1217680-4 1516578-0 | 0.00 |
| 29 | wiki-trivia Z którego kontynentu pochodzą papużki nierozłączki? | 1507283-2 | 1507283-10 1320346-12 1507283-0 3823880-12 3823880-1 4887687-8 1320346-3 1320346-1 4498545-0 1243697-0 | 0.00 |
| 30 | wiki-trivia Czy w Polsce panował król o imieniu Ludwik? | 18470-0 11289-2 489028-1 650042-0 1227360-0 | 1173579-0 199569-2 6461-3 4187966-10 35201-1 2366981-3 33267-4 2582104-0 879135-0 18470-3 | 0.00 |
| 31 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 184952-0 3674136-0 3243471-12 2123923-5 2706007-2 2437652-0 1529019-5 233530-1 2815816-2 134786-10 | 0.00 |
| 32 | wiki-trivia Jak nazywała się dawna rezydencja cesarska w Pekinie? | 74254-0 95568-1 | 2847383-0 1940895-0 2070144-0 5122102-4 1309650-6 1906305-0 4873163-1 2521418-0 1309650-20 1689363-13 | 0.00 |
| 33 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 9445-1 2462290-7 2352430-0 8653-3 2055595-20 5754-14 1484856-9 2844076-2 59425-0 2462290-0 | 0.00 |
| 34 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 1469359-2 3316041-0 1689363-0 3183225-0 3316041-1 1689363-13 3183225-2 1689363-9 4677234-0 1469359-0 | 0.00 |
| 35 | wiki-trivia Co według piosenki puka w rytmie cha-cha? | 389424-0 1274995-6 781704-2 | 2274691-9 623012-0 263786-0 16583-2 16583-0 42103-0 16583-1 16583-4 1743186-0 2638510-1 | 0.00 |
| 36 | wiki-trivia Co po łacinie oznacza słowo „lupus”? | 330559-0 622969-2 63166-0 63166-49 63166-9 | 48275-46 23951-9 385282-32 1056753-49 7431-13 7431-53 3177089-2 5219832-5 242799-5 529973-1 | 0.00 |
| 37 | wiki-trivia Jak nazywał się pancernik, który rozpoczął II wojnę światową? | 14103-0 1815538-17 2304-13 89007-6 3241-119 | 828552-5 15343-0 1467956-0 133030-0 40426-0 1721360-0 5105-65 3734981-0 1593381-0 2304-6 | 0.00 |
| 38 | wiki-trivia Jak miała na imię żona Heraklesa? | 3136602-0 39725-0 11468-0 11468-22 39725-2 | 553468-0 2821297-0 11468-17 11468-9 11468-23 2821297-1 11468-27 204427-0 11758-0 204427-2 | 0.00 |
| 39 | wiki-trivia Która dyscyplinę sportu uprawiał zawodowo Mariusz Czerkawski? | 201577-0 118655-38 2733996-19 935701-2 | 201577-69 1615349-0 201577-67 123954-0 3582461-0 201577-7 201577-3 10061-0 201577-21 196887-0 | 0.00 |
| 40 | wiki-trivia Jakie zwierzę widnieje w godle Wenecji? | 3517-75 517835-1 996055-5 | 2502-2 806771-0 2378349-2 925742-1 584965-6 2135890-2 754081-4 752899-0 602381-3 456263-0 | 0.00 |