5b105bbbe012ddaff23ddf3e2a9761b4b844fbd8
esce
- challenge
- Passage Retrieval
- submitter
- Maciej
- submitted
- 2022-11-21 16:08:54.349105 UTC
- file basename
- out
test-A / caa3677380fb5b8d3a7762f6c82c01b9cbf0b75f
| Metric | Score |
|---|---|
| NDCG@10 | 56.56 |
dev-0 / 5c4c9efa62b3eddde9711c32031c2a5c3c8de8b2
| Metric | Score |
|---|---|
| NDCG@10 | 27.86 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-B NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 2242519-0 162911-6 1284905-9 3752473-0 3184604-2 4944404-1 3831536-1 1693306-24 2352324-14 3719598-8 | 0.00 |
| 2 | wiki-trivia Co budował w Egipcie inżynier Tarkowski, ojciec Stasia z powieści „W pustyni i w puszczy”? | 934126-1 88267-17 | 934126-0 26170-16 162084-10 664688-3 1775405-2 934126-4 2279030-0 11729-16 3561031-14 493645-4 | 0.00 |
| 3 | wiki-trivia Jak nazywa się trucizna przyrządzona z korzenia szaleju? | 25098-0 141316-6 5423-11 | 673029-1 30185-0 28893-2 30176-77 3094293-7 2727353-6 303096-3 4710387-1 35219-8 1228548-1 | 0.00 |
| 4 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 79082-11 49767-0 552904-0 3584220-0 1929638-1 172822-0 2071590-30 842394-12 2005270-0 2533825-53 | 0.00 |
| 5 | wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? | 27859-0 799893-7 799893-14 4518252-4 | 799841-3 145643-3 2397753-0 155786-3 187229-2 4706926-27 471664-70 2915955-23 2915955-38 54733-2 | 0.00 |
| 6 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 572271-0 2033016-2 1586714-10 1589379-8 1586007-9 2033016-3 1786237-17 1508288-0 566324-0 2400947-0 | 0.00 |
| 7 | wiki-trivia Z którego państwa pochodzi twórca Gadu-Gadu? | 1930-0 435065-0 1885378-1 | 1103608-0 4099164-1 1143082-0 2194-124 1853565-0 922195-3 3983311-1 2352324-14 1176380-19 63189-26 | 0.00 |
| 8 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 37916-3 1683720-52 51116-0 118422-6 4141706-8 7854-8 162129-0 3710137-7 181284-0 641179-7 | 0.00 |
| 9 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 2736151-0 183444-1 2909939-11 2739552-1 4469367-0 15311-35 303096-3 2739552-0 2535404-0 2533379-21 | 0.00 |
| 10 | wiki-trivia Sublimat to chlorek którego metalu? | 653476-0 5149678-1 653474-0 5151-8 | 806-25 3298-47 509135-1 981779-0 2072667-0 653482-5 3482131-1 211583-0 2907828-3 503618-1 | 0.00 |
| 11 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 2198008-0 1590294-26 8148-0 336749-0 725097-0 314920-8 5064156-1 2019764-4 2021840-4 2198008-2 | 0.00 |
| 12 | wiki-trivia W którym starożytnym mieście budowano wieżę Babel? | 10168-12 13187-9 1861864-1 | 1868343-0 10168-0 557961-1 10168-28 658-14 2750446-6 1399798-0 1079280-11 2200511-11 2527559-1 | 0.00 |
| 13 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 354435-4 1258696-0 76591-0 1203402-0 1049830-0 1497493-0 1207512-0 5199359-5 1202227-0 1469099-0 | 0.00 |
| 14 | wiki-trivia Z którego państwa pochodzi Stieg Larsson, autor trylogii kryminalnej „Millennium”? | 4446190-0 5018537-0 461434-5 | 3612653-0 2130804-0 2044201-0 2210821-0 4081812-6 6608-7 2130804-12 1442177-0 201626-5 2027626-0 | 0.00 |
| 15 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 1423676-5 210259-2 141030-10 4355939-3 610227-2 210259-3 100534-26 4692877-8 1423676-2 100534-25 | 0.00 |
| 16 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 917904-18 1856051-0 96488-10 30332-19 1769-5 1856051-1 205393-4 3277-36 9830-0 3798727-3 | 0.00 |
| 17 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 1461623-60 4704805-0 498311-0 186776-43 4329879-0 1461623-10 19183-151 100534-25 100534-26 2727353-6 | 0.00 |
| 18 | wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? | 471697-0 490372-6 18084-11 142774-5 | 3678011-6 1569670-3 7417-8 51936-2 3069011-1 234770-2 1828697-9 499869-5 3753216-3 2352324-14 | 0.00 |
| 19 | wiki-trivia Po śmierci jakiego władcy diadochowie podzielili jego królestwo? | 14426-3 16357-0 12797-103 | 53062-2 30378-28 53070-3 30262-4 7747-6 30253-0 518905-8 2727353-6 1003677-2 35119-21 | 0.00 |
| 20 | wiki-trivia W którym roku odbyła się pierwsza próba jądrowa? | 2312943-3 274961-0 1937784-0 1756259-2 4057-3 | 44822-28 3026773-3 129691-93 1877629-1 1987029-23 3996855-1 2005559-12 1779200-2 4761980-3 3753216-3 | 0.00 |
| 21 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 500532-0 802949-47 1797224-0 449955-0 485013-65 3753216-3 3972503-1 1139156-0 453224-0 2352324-14 | 0.00 |
| 22 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 332358-12 2789510-3 1288875-11 2174186-2 1071082-1 482383-1 292015-21 240941-10 1300575-2 2158184-4 | 0.00 |
| 23 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 104191-1 563600-11 1005884-9 535257-0 659122-0 1662061-3 306960-47 563600-10 245782-0 563600-0 | 0.00 |
| 24 | wiki-trivia Jak chciał dać swojej córce na imię węglarz z filmu „Miś”? | 138277-7 | 6501-1 1160317-3 729028-0 5052017-2 552200-0 125656-0 5052017-7 90189-0 1776713-6 5111499-0 | 0.00 |
| 25 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 3501817-15 4369132-4 3551416-133 1689104-2 1352589-26 2727353-6 3950868-1 3095833-0 3946335-3 100534-26 | 0.00 |
| 26 | wiki-trivia Jak z francuskiego określamy okulary, które trzymają się tylko na nosie? | 1202545-0 | 4115201-51 185768-12 1012338-1 1905187-4 2169299-1 3753216-3 100534-26 100534-25 2727353-6 2005559-12 | 0.00 |
| 27 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 1658867-146 314765-5 209672-12 1245061-38 3081651-6 7812-14 7767-14 209672-11 4205601-2 1282058-1 | 0.00 |
| 28 | wiki-trivia Z iloma państwami graniczy San Marino? | 5531-17 44915-14 | 1193751-0 1874026-0 1209122-0 1209122-1 1219119-0 2027875-9 2022498-0 115440-0 2027875-5 642555-0 | 0.00 |
| 29 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 2048728-5 7104-0 193584-2 1418508-339 516032-0 518905-8 134896-1 459922-5 2048728-0 2837093-1 | 0.00 |
| 30 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 984901-17 2311468-1 984901-6 43683-10 6567-1 984901-0 1324757-51 2318382-1 43683-7 200-2 | 0.00 |
| 31 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 3538138-40 1108611-1 911595-6 1602497-8 17348-87 762236-57 35219-8 518905-8 2727353-6 4015555-31 | 0.00 |
| 32 | wiki-trivia Jak miał na imię Makuszyński? | 49827-0 49827-8 49827-14 1509748-0 12060-7 | 1833337-3 2186014-1 3499316-0 556940-1 141463-3 156465-17 2186014-0 206589-0 2727353-6 63189-26 | 0.00 |
| 33 | wiki-trivia Z którego kontynentu pochodzą papużki nierozłączki? | 1507283-2 | 1507283-0 1507283-10 294104-17 1507283-5 2372292-13 287812-1 4749422-12 2352324-14 4498545-1 1507283-7 | 0.00 |
| 34 | wiki-trivia Funkcjonariusz państwowy który ściga przestępców i oskarża ich w sądzie to...? | 152150-0 152150-14 2194475-2 537444-1 | 1730558-18 4711553-0 4064684-0 4412310-8 598417-7 4015555-31 2727353-6 3702358-10 2352324-14 3217148-32 | 0.00 |
| 35 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 824743-3 1827042-13 2123923-5 2910023-1 1882165-0 3735127-3 2889-40 832937-0 7757-0 165529-32 | 0.00 |
| 36 | wiki-trivia Symbolem którego pierwiastka jest Cr? | 825-0 1676212-0 | 462645-5 10783-3 2137224-29 503713-1 139796-3 2079167-0 303096-3 3719598-8 518905-8 1741200-0 | 0.00 |
| 37 | wiki-trivia Jak nazywała się dawna rezydencja cesarska w Pekinie? | 74254-0 95568-1 | 2070144-0 2521418-0 1930869-0 5047935-0 1906305-0 1906468-0 2528115-0 1930924-0 2242809-0 1924948-0 | 0.00 |
| 38 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 189807-31 5131383-16 2844076-2 115492-7 88901-1 115521-7 5246661-3 2772363-0 2462290-7 1170561-4 | 0.00 |
| 39 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 523654-0 1515075-9 3258146-0 391783-28 1214644-3 302733-30 524505-0 837405-1 3753216-3 3719598-8 | 0.00 |
| 40 | wiki-trivia Kto jest autorem wiersza o Słoniu Trąbalskim? | 23626-20 1757856-4 4439842-4 | 1564207-2 540491-1 655344-2 2783340-0 394707-2 3319070-2 3744937-1 3994954-3 2790874-3 4011063-2 | 0.00 |