5cf540e436da7283ee655c83d318493439dda9aa
test bcesc
- challenge
- Passage Retrieval
- submitter
- Maciej
- submitted
- 2022-11-24 13:13:46.649082 UTC
- file basename
- out
test-A / b2b5578f416d83b2c685fed2533b27b0e60c28d2
| Metric | Score |
|---|---|
| NDCG@10 | 58.93 |
dev-0 / 93ac99ba25d9db97c48e2a6b6ee113f02a544372
| Metric | Score |
|---|---|
| NDCG@10 | 31.27 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-B NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia Co budował w Egipcie inżynier Tarkowski, ojciec Stasia z powieści „W pustyni i w puszczy”? | 934126-1 88267-17 | 934126-0 664688-3 1775405-2 42266-5 41896-2 162084-10 934126-4 26170-16 3561031-14 2853289-2 | 0.00 |
| 2 | wiki-trivia Jak nazywa się trucizna przyrządzona z korzenia szaleju? | 25098-0 141316-6 5423-11 | 4075548-0 928922-0 465821-9 465730-8 466365-7 199855-0 30185-0 443365-9 3094293-7 1143302-0 | 0.00 |
| 3 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 693739-0 3540664-3 3950580-2 50859-0 483021-1 79082-11 552904-0 261751-0 1288875-9 2005270-0 | 0.00 |
| 4 | wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? | 27859-0 799893-7 799893-14 4518252-4 | 27859-9 148882-18 3878938-5 799841-3 1529164-13 3976505-10 4518252-14 2397753-0 145643-3 187229-2 | 0.00 |
| 5 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 1189940-48 681372-15 57393-1 3180509-4 1492531-1 4622353-1 3514321-2 572271-0 1137218-0 2402011-1 | 0.00 |
| 6 | wiki-trivia Z którego państwa pochodzi twórca Gadu-Gadu? | 1930-0 435065-0 1885378-1 | 1622118-1 4517958-0 2154345-0 3041578-7 42260-43 1853565-0 1819412-29 1143082-0 1103608-0 5362-3 | 0.00 |
| 7 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 5250011-1 3304124-6 45709-17 1806809-0 263568-20 183444-1 1568453-0 461101-1 3311571-3 5037543-10 | 0.00 |
| 8 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 9536-2 90478-1 2198008-0 108372-0 1510253-2 8148-0 1590294-26 547665-0 336749-0 725097-0 | 0.00 |
| 9 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 354435-4 937406-0 44903-17 76591-0 4450781-14 3505140-0 170606-0 1258696-0 73042-0 1203402-0 | 0.00 |
| 10 | wiki-trivia Z którego państwa pochodzi Stieg Larsson, autor trylogii kryminalnej „Millennium”? | 4446190-0 5018537-0 461434-5 | 3612653-0 4102741-0 2130804-0 2130804-1 4081812-6 2044201-0 2210821-0 6608-7 623975-0 815271-8 | 0.00 |
| 11 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 18516-2 917904-14 1469459-12 18156-10 1469459-0 30332-19 917904-18 12158-14 1856051-0 1769-5 | 0.00 |
| 12 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 7431-94 1289927-2 5208521-2 4461671-2 1893058-26 498311-0 4704805-0 562243-1 186776-43 696567-0 | 0.00 |
| 13 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 45745-0 332539-3 65924-0 987483-18 1271388-0 1797224-0 802949-47 500532-0 449955-0 5118056-1 | 0.00 |
| 14 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 2789510-3 1206148-0 2174186-2 1477370-1 1676730-0 1071082-1 332358-12 293325-8 123722-1 1970120-20 | 0.00 |
| 15 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 685383-4 1363848-4 641798-51 2900593-1 3847280-0 104191-1 563600-11 1005884-9 245782-0 113451-9 | 0.00 |
| 16 | wiki-trivia Jak chciał dać swojej córce na imię węglarz z filmu „Miś”? | 138277-7 | 3079708-0 421203-2 3584624-0 395629-2 296282-26 6501-1 1160317-3 65847-2 729028-0 4139926-14 | 0.00 |
| 17 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 863134-4 525276-0 2426983-39 461018-0 1730427-4 443919-0 3501817-15 1689104-2 1249108-5 362200-48 | 0.00 |
| 18 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 425167-7 1658867-146 390349-0 425167-5 423792-21 314765-5 209672-12 3081651-6 1245061-38 557177-4 | 0.00 |
| 19 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 2048728-5 266127-2 4412810-9 2064648-3 3996883-5 7104-0 134896-1 193584-2 5143683-0 1418508-339 | 0.00 |
| 20 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 984901-6 984901-17 62452-2 2311468-1 121572-19 6567-1 984901-7 43683-10 2311468-5 1460654-0 | 0.00 |
| 21 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 173835-2 1602497-8 2274-112 117389-44 107300-5 3538138-40 911595-6 75133-6 14610-28 35040-24 | 0.00 |
| 22 | wiki-trivia Jak miał na imię Makuszyński? | 49827-0 49827-8 49827-14 1509748-0 12060-7 | 11119-0 4267564-0 1470769-0 1232257-0 1174492-1 1833337-3 138033-9 556940-1 2799183-1 3954267-3 | 0.00 |
| 23 | wiki-trivia Z którego kontynentu pochodzą papużki nierozłączki? | 1507283-2 | 295901-14 30013-2 4144552-4 3098993-5 4934714-6 1507283-0 1507283-10 1507283-5 2372292-13 235094-8 | 0.00 |
| 24 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 3514566-1 2797003-0 88838-2 16653-2 2462290-0 115521-7 5246661-3 88901-1 189807-31 2844076-2 | 0.00 |
| 25 | wiki-trivia Jak nazywa się jadalnia dla załogi na statku? | 16828-0 | 1960249-159 1942948-34 789944-0 4342-216 20754-1 845028-17 2790-0 1157112-13 3500862-0 299808-7 | 0.00 |
| 26 | wiki-trivia Z repertuaru którego zespołu pochodzi utwór „Jestem z miasta”? | 1642348-0 741949-0 204472-3 3208891-8 | 1642348-2 1642348-6 803306-1 1642348-3 4253073-2 1159288-1 1938222-7 4320610-0 3547002-0 1543428-1 | 0.00 |
| 27 | wiki-trivia Jak nazywa się pisarz, autora „Dziennika pisanego nocą”? | 152861-6 3449-50 84545-6 | 18283-2 4117762-2 4897752-2 3087727-2 3443584-3 3449-34 4575552-8 620584-7 4882419-4 6360-6 | 0.00 |
| 28 | wiki-trivia Jak miała na imię żona Heraklesa? | 3136602-0 39725-0 11468-0 11468-22 39725-2 | 4729555-6 92927-14 953930-2 2947077-7 122064-2 2788551-8 4421888-13 12500-0 27899-48 181210-1 | 0.00 |
| 29 | wiki-trivia Która dyscyplinę sportu uprawiał zawodowo Mariusz Czerkawski? | 201577-0 118655-38 2733996-19 935701-2 | 4653875-2 22121-61 2194840-0 510871-3 1401674-1 4187568-12 86677-155 3582461-0 449423-3 6260-95 | 0.00 |
| 30 | wiki-trivia Jakie zwierzę widnieje w godle Wenecji? | 3517-75 517835-1 996055-5 | 4967-191 3661722-5 417722-22 2502-2 2796278-2 1813007-3 1354802-0 63732-14 562507-0 2193124-40 | 0.00 |
| 31 | wiki-trivia Jak nazywa się instrument muzyczny i ogon cietrzewia? | 445920-18 | 1690760-1 1097446-2 3087049-9 26124-2 727276-0 3612917-0 3335953-0 228163-0 2209201-0 88576-0 | 0.00 |
| 32 | wiki-trivia Jedna z mitycznych gorgon oraz jamochłon morski mają wspólną nazwę? | 108851-0 108851-2 108851-4 27899-19 1877199-2 | 953156-1 4262750-1 107821-0 1156134-1 193385-0 98588-1 227878-0 2025784-0 73378-11 3517-72 | 0.00 |
| 33 | wiki-trivia W którym mieście stoi hala widowiskowo-sportowa zwana Spodkiem? | 184536-0 3246-159 508741-35 139071-0 | 184337-0 4479676-19 4094891-0 410124-8 1740829-1 920501-0 5231489-5 3259299-0 3173837-0 117626-4 | 0.00 |
| 34 | wiki-trivia Kto był ojcem Pegaza? | 108851-11 269351-0 16435-1 | 1623300-54 1404149-14 96186-1 618851-4 3259420-9 2035557-2 101773-2 711611-25 4679862-1 589949-5 | 0.00 |
| 35 | wiki-trivia Na jaką chorobą zapadła Nel, bohaterka „W pustyni i w puszczy”? | 88267-8 | 435160-0 769832-4 774506-7 774506-1 625977-1 2482609-0 2279030-0 162084-10 198471-1 282823-0 | 0.00 |
| 36 | wiki-trivia Jak z francuskiego nazywa się pomieszczenie w teatrze, w którym widownia przebywa w trakcie przerwy? | 736692-0 | 46823-0 24876-34 1529340-5 641789-28 335903-19 3557895-8 345163-9 71449-5 4642052-13 2485642-5 | 0.00 |
| 37 | wiki-trivia Jak nazywa się elastyczna deska umożliwiająca wybicie przy skokach do wody? | 90738-0 2996100-0 2996414-0 2066472-0 4112844-1 | 4595660-2 2109744-1 2517374-12 1764852-5 605523-1 5142353-1 1427011-0 3107705-0 3530739-1 3765142-0 | 0.00 |
| 38 | wiki-trivia Jakiego koloru jest pojęcie którego się nie ma? | 179111-7 1870244-3 1915957-24 6811-175 4638002-1 | 176516-2 54626-31 1885383-1 49477-6 1873983-2 859236-35 371015-1 37108-29 74766-4 3689110-1 | 0.00 |
| 39 | wiki-trivia Czy knock down to to samo co knock out? | 1380727-1 | 2720595-42 2721697-16 30403-6 2723235-7 801916-18 74999-59 5031957-0 2064472-12 1054850-0 2149733-0 | 0.00 |
| 40 | wiki-trivia Czy kiedykolwiek na banknotach obiegowych w Polsce znajdował się wizerunek Henryka Sienkiewicza? | 2067-47 | 1418508-406 2067-46 1898909-0 1418508-355 781576-6 1934725-4 568803-0 644895-2 357076-0 2008049-0 | 0.00 |