3fcad719a4d703d04cb010162ae7f48a1cc5fa06
esce
- challenge
- Passage Retrieval
- submitter
- Maciej
- submitted
- 2022-11-21 00:55:37.286961 UTC
- file basename
- out
test-A / 088f84bd0d97e0911f8e4c30879dba4be18d8d3c
| Metric | Score |
|---|---|
| NDCG@10 | 56.40 |
dev-0 / af369e5478e4bd64d2da8d14ef122a5ffb0b00de
| Metric | Score |
|---|---|
| NDCG@10 | 27.36 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-B NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 162911-6 2377444-0 1284905-9 2242519-0 2421-3 3752473-0 531352-2 3184604-2 2734991-1 2202450-1 | 0.00 |
| 2 | wiki-trivia Co budował w Egipcie inżynier Tarkowski, ojciec Stasia z powieści „W pustyni i w puszczy”? | 934126-1 88267-17 | 934126-0 162084-10 21753-5 493645-4 493645-2 934126-4 589037-3 589037-0 664688-3 1775405-2 | 0.00 |
| 3 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 165120-2 49762-11 79082-11 1288875-9 49767-0 3584220-0 1310759-0 4882462-0 653690-0 623570-0 | 0.00 |
| 4 | wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? | 27859-0 799893-7 799893-14 4518252-4 | 799841-3 2397753-0 3976505-10 799833-34 1562546-1 146627-0 35848-12 55688-19 1694292-1 2631259-6 | 0.00 |
| 5 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 572271-0 3514321-2 2033016-2 1488895-0 2402011-1 4978480-17 1589379-8 1586714-10 1586007-9 4622353-1 | 0.00 |
| 6 | wiki-trivia Z którego państwa pochodzi twórca Gadu-Gadu? | 1930-0 435065-0 1885378-1 | 366849-1 2194-124 1143082-0 1103608-0 1853565-0 1780062-0 1019665-6 435369-0 23950-0 3653547-8 | 0.00 |
| 7 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 181282-7 37916-3 1683720-52 118422-6 51116-0 4141706-8 7854-8 3710137-7 37694-1 4099106-0 | 0.00 |
| 8 | wiki-trivia Kto powołuje prezesa NIK? | 100304-0 615610-2 189807-110 2797003-26 | 33653-31 185631-9 110371-3 4554232-2 285087-5 178235-3 977725-3 106336-0 285763-3 94348-4 | 0.00 |
| 9 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 3334003-0 281160-0 1956520-0 2736151-0 534661-6 2283199-0 183444-1 3304124-6 3311571-3 3445549-4 | 0.00 |
| 10 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 2198008-0 1590294-26 8148-0 336749-0 547665-0 1695226-0 725097-0 202382-5 1756836-0 1791436-0 | 0.00 |
| 11 | wiki-trivia W którym starożytnym mieście budowano wieżę Babel? | 10168-12 13187-9 1861864-1 | 658-14 1868343-0 10168-0 471537-1 10168-28 1367024-10 557961-1 10168-5 2033017-3 965576-0 | 0.00 |
| 12 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 4809817-0 4438329-0 354435-4 3387308-0 2314236-4 2885146-0 2834469-0 4710309-0 4795017-0 2481517-0 | 0.00 |
| 13 | wiki-trivia Z którego państwa pochodzi Stieg Larsson, autor trylogii kryminalnej „Millennium”? | 4446190-0 5018537-0 461434-5 | 2130804-0 3612653-0 2044201-0 4102741-0 2210821-0 4081812-6 623975-0 4227499-15 138165-11 6608-7 | 0.00 |
| 14 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 210259-2 610227-2 141030-10 399136-2 4355939-3 403565-1 1423676-5 147137-2 5098842-2 113867-4 | 0.00 |
| 15 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 1856051-0 917904-18 513522-0 96488-10 3289-16 9830-0 1769-5 3289-26 12158-14 902545-10 | 0.00 |
| 16 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 562243-1 526076-0 4704805-0 4329879-0 498311-0 186776-43 1697842-2 4201896-1 4319444-0 89359-0 | 0.00 |
| 17 | wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? | 471697-0 490372-6 18084-11 142774-5 | 3678011-6 1569670-3 7417-8 1518180-23 51936-2 320869-10 3069011-1 152039-1 2912574-6 143139-69 | 0.00 |
| 18 | wiki-trivia W którym roku odbyła się pierwsza próba jądrowa? | 2312943-3 274961-0 1937784-0 1756259-2 4057-3 | 2399186-3 44822-28 129691-93 15434-58 239825-1 3163059-5 1280945-6 1877629-1 3026773-3 74264-7 | 0.00 |
| 19 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 802949-47 2453634-0 2262651-2 1064517-24 46922-8 4635429-0 500532-0 5118056-1 2747855-2 1797224-0 | 0.00 |
| 20 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 2174186-2 2789510-3 332358-12 1834162-0 123722-1 1071082-1 82189-8 170139-0 6137-8 1001421-1 | 0.00 |
| 21 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 104191-1 535257-0 180179-0 245782-0 513291-0 2831054-12 113451-45 521357-0 158884-13 1691255-7 | 0.00 |
| 22 | wiki-trivia Jak chciał dać swojej córce na imię węglarz z filmu „Miś”? | 138277-7 | 125656-0 729028-0 5052017-7 552200-0 2625832-22 1160317-3 4771802-0 138277-17 5052017-2 5201172-0 | 0.00 |
| 23 | wiki-trivia Jak nazywała się akcja przesiedlenia Ukraińców z 1947 r.? | 20338-0 785771-2 20297-4 929707-2 968749-0 | 651828-56 8174-53 20338-18 651828-55 76561-23 706804-25 75278-15 381998-21 2314724-26 2314724-22 | 0.00 |
| 24 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 1689104-2 3501817-15 1352589-26 4369132-4 3551416-133 443919-0 5977-73 362200-48 1919191-28 4691536-0 | 0.00 |
| 25 | wiki-trivia Jak z francuskiego określamy okulary, które trzymają się tylko na nosie? | 1202545-0 | 185768-12 4115201-51 1905187-4 1419330-21 2169299-1 1255736-1 1012338-1 777737-1 2426983-65 1298226-66 | 0.00 |
| 26 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 1658867-146 390349-0 209672-12 314765-5 1245061-38 3081651-6 30378-9 557177-4 552783-1 2244537-10 | 0.00 |
| 27 | wiki-trivia Z iloma państwami graniczy San Marino? | 5531-17 44915-14 | 1193751-0 1209122-0 2028372-0 2027875-9 1874026-0 2027875-8 115440-0 638010-0 2034735-0 3163473-0 | 0.00 |
| 28 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 2048728-5 193584-2 5143683-0 4413539-2 516032-0 1418508-339 7104-0 4363574-5 4752230-1 114912-0 | 0.00 |
| 29 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 984901-17 2311468-1 2318382-1 2311468-5 984901-0 984901-6 6567-1 43683-7 43683-10 112870-3 | 0.00 |
| 30 | wiki-trivia Z którego kontynentu pochodzą papużki nierozłączki? | 1507283-2 | 1507283-0 4498545-0 1507283-10 1507283-5 235094-8 1243697-0 4749422-8 1938663-0 287812-1 2372292-13 | 0.00 |
| 31 | wiki-trivia Funkcjonariusz państwowy który ściga przestępców i oskarża ich w sądzie to...? | 152150-0 152150-14 2194475-2 537444-1 | 3294002-0 1056975-5 661639-8 598417-7 499869-5 4711553-0 1730558-18 822145-2 4274622-6 3717816-1 | 0.00 |
| 32 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 824743-3 403192-4 1827042-13 4478120-3 2123923-5 3674136-0 604478-6 223291-0 1473826-0 6699-31 | 0.00 |
| 33 | wiki-trivia Symbolem którego pierwiastka jest Cr? | 825-0 1676212-0 | 139796-3 462645-5 10783-3 2137224-29 896285-6 292236-3 149499-4 2154818-6 1130111-6 503713-1 | 0.00 |
| 34 | wiki-trivia Jak nazywała się dawna rezydencja cesarska w Pekinie? | 74254-0 95568-1 | 2070144-0 2521418-0 1930869-0 5047935-0 1906305-0 2975809-0 5047935-16 9576-11 3241388-4 187346-3 | 0.00 |
| 35 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 3514566-1 189807-29 189807-31 2797003-0 115492-7 4681008-1 3058-8 6242-63 2462290-0 2055595-20 | 0.00 |
| 36 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 1269055-11 523654-0 274668-4 3258146-0 4277-20 788873-3 391783-7 3005652-3 59420-5 904414-61 | 0.00 |
| 37 | wiki-trivia Kto jest autorem wiersza o Słoniu Trąbalskim? | 23626-20 1757856-4 4439842-4 | 2783340-0 540491-1 27555-49 2735278-2 87354-2 87280-36 316377-9 12750-13 4369874-32 424903-0 | 0.00 |
| 38 | wiki-trivia W którym roku Otton III i Bolesław Chrobry spotkali się na zjeździe gnieźnieńskim? | 2048803-0 1930212-0 8196-0 44843-1 411720-13 | 20984-5 1876386-10 913829-7 1930212-3 2150371-1 276455-1 1918-22 438857-4 626730-43 591810-6 | 0.00 |
| 39 | wiki-trivia Z repertuaru którego zespołu pochodzi utwór „Jestem z miasta”? | 1642348-0 741949-0 204472-3 3208891-8 | 1642348-2 1159288-1 4320610-0 3547002-0 1543428-1 1642348-3 3542862-0 1642348-6 2517604-0 2477003-2 | 0.00 |
| 40 | wiki-trivia Jak nazywa się pisarz, autora „Dziennika pisanego nocą”? | 152861-6 3449-50 84545-6 | 3449-34 4575552-8 2346425-9 4882419-4 4117762-2 620584-7 6360-6 23326-11 2346425-7 1354325-13 | 0.00 |