bcd6632e7050379caa36d82e726f13ea360aba4b
v14
- challenge
- Passage Retrieval
- submitter
- Anna
- submitted
- 2023-01-25 17:39:46.251916 UTC
- file basename
- out
test-A / df6db83d1bb0996886a970fa3900bcde2872d18d
| Metric | Score |
|---|---|
| NDCG@10 | 56.01 |
dev-0 / 342fa8d9a8459f0a31bfcc7f9256c084baae6f07
| Metric | Score |
|---|---|
| NDCG@10 | 31.12 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-B NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 3366912-0 110626-0 561684-5 2215805-0 2005842-2 640307-0 1831071-0 255996-0 75124-22 905341-0 | 0.00 |
| 2 | wiki-trivia Co budował w Egipcie inżynier Tarkowski, ojciec Stasia z powieści „W pustyni i w puszczy”? | 934126-1 88267-17 | 664688-3 1775405-2 750315-0 934126-0 21753-5 934126-4 162084-10 41896-2 26170-16 589037-0 | 0.00 |
| 3 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 101527-1 109175-0 552904-0 2005270-0 4304342-6 3584220-0 3572733-0 49762-0 3962344-0 1929638-1 | 0.00 |
| 4 | wiki-trivia Na którym kontynencie leży Gabon? | 74511-0 74511-42 74511-71 74511-93 | 148742-1 110626-0 156-4 508786-1 297216-8 169557-5 169557-2 726092-1 416391-1 1712719-3 | 0.00 |
| 5 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 1492531-1 4978480-17 289910-0 3839179-0 14103-0 1799769-22 2400947-0 1142726-37 3643784-0 3481971-1 | 0.00 |
| 6 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 181284-0 181282-7 2077252-2 51116-0 4096279-0 4083243-0 776438-2 162129-4 11289-3 3710137-7 | 0.00 |
| 7 | wiki-trivia Jakiego obrazu dotyczy akcja filmu Vinci? | 159017-5 89983-8 170281-11 764160-22 | 1004592-1 1004592-0 764160-15 3128880-1 489854-0 225555-0 1152851-0 764160-25 779791-2 1159344-0 | 0.00 |
| 8 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 3311571-3 1589274-4 294998-0 8914-1 299223-2 450522-3 23224-18 1395601-0 1259492-9 1048369-6 | 0.00 |
| 9 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 108372-0 5465-10 547665-0 453381-20 5465-0 1277934-0 11569-0 5465-8 90478-1 4267890-31 | 0.00 |
| 10 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 354435-4 73042-0 3317324-0 937406-0 76591-0 2784587-0 3505140-0 2616342-0 1027767-0 1948222-0 | 0.00 |
| 11 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 113882-4 113874-4 27673-3 113879-4 3954813-23 136382-5 1893165-2 4872-1 1383160-2 45859-2 | 0.00 |
| 12 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 917904-18 30332-19 6171-18 513522-0 6084-2 1856051-1 41147-0 3289-16 984042-5 902545-10 | 0.00 |
| 13 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 18446-32 3990518-1 5190029-481 4700256-2 21547-14 221655-6 102637-1 2396985-2 1848206-24 4329879-0 | 0.00 |
| 14 | wiki-trivia W którym roku odbyła się pierwsza próba jądrowa? | 2312943-3 274961-0 1937784-0 1756259-2 4057-3 | 129691-93 638279-3 80936-12 2399186-3 1937854-0 2454429-1 896549-2 7751-25 3873232-0 7293-30 | 0.00 |
| 15 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 4635429-0 45745-0 802949-47 65401-1 1797224-0 448569-12 35994-24 289416-0 1271388-25 1271388-0 | 0.00 |
| 16 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 2174186-2 456762-2 2789510-3 1263801-3 1263801-7 1676730-0 1834305-0 743905-1 1970120-20 158645-2 | 0.00 |
| 17 | wiki-trivia W którym wieku żył Karol Darwin? | 44869-0 1142-4 7395-26 7828-34 | 1495894-7 26966-4 332877-0 1023740-0 1103313-5 878358-0 1673955-1 58853-2 44869-147 1475987-3 | 0.00 |
| 18 | wiki-trivia Kto napisał „Ziemię obiecaną” oraz „Chłopów”? | 491777-0 503711-0 6624-9 503711-67 | 2599243-1 1779092-0 746926-74 6624-14 6624-11 89155-0 503711-1 503711-3 291-112 746926-34 | 0.00 |
| 19 | wiki-trivia Który car rosyjski wprowadził grażdankę? | 129904-0 908-2 22313-16 2854198-24 2705-7 | 603627-2 692-26 997380-0 8786-6 7380-1 2064866-14 8786-9 63618-0 39897-9 221525-9 | 0.00 |
| 20 | wiki-trivia Jak nazywała się akcja przesiedlenia Ukraińców z 1947 r.? | 20338-0 785771-2 20297-4 929707-2 968749-0 | 1326878-16 76561-23 20338-18 381998-21 1552826-228 91329-159 875057-0 371969-11 1244780-20 76561-21 | 0.00 |
| 21 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 1919191-28 1249108-5 2239844-21 4450256-0 644625-23 316692-1 172733-38 6090-21 3385785-0 108880-8 | 0.00 |
| 22 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 390349-0 1658867-146 425167-7 1818942-5 425167-1 314765-5 423792-21 2807644-19 433613-0 363695-7 | 0.00 |
| 23 | wiki-trivia Czy wśród dwunastu apostołów był uczeń o imieniu Bartłomiej? | 121881-0 121881-2 16801-7 32283-1 3332578-2 | 210537-0 66832-15 113993-1 2189500-0 193056-0 66832-16 2304166-2 2286357-32 1855968-0 102405-0 | 0.00 |
| 24 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 2048728-5 4099215-4 4498934-4 1497709-2 1695909-3 1163879-5 2656430-4 2978797-10 3998572-13 2461641-29 | 0.00 |
| 25 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 984901-17 2311468-1 1996923-0 44393-9 6567-1 43683-10 1324757-51 43683-6 143094-19 8807-0 | 0.00 |
| 26 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 1197116-6 1219607-4 10381-13 87671-19 275539-0 3538138-40 317788-1 308840-5 1108611-1 177381-117 | 0.00 |
| 27 | wiki-trivia Jak miał na imię Makuszyński? | 49827-0 49827-8 49827-14 1509748-0 12060-7 | 3491498-17 755721-27 878306-2 431500-8 1290019-7 1912083-3 2097770-1 5125450-15 415829-2 4138349-1 | 0.00 |
| 28 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 2706007-2 288207-10 2605129-9 3243471-12 2077-13 4478120-3 184952-0 2320553-11 2283748-3 34201-19 | 0.00 |
| 29 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 59425-0 8653-3 9445-1 189807-29 2797003-0 25362-89 115492-7 5246661-3 3065167-8 5754-14 | 0.00 |
| 30 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 391783-28 1322911-1 470606-7 17414-0 523776-3 3124459-2 4570607-2 2371997-0 25039-69 560272-10 | 0.00 |
| 31 | wiki-trivia W którym roku Otton III i Bolesław Chrobry spotkali się na zjeździe gnieźnieńskim? | 2048803-0 1930212-0 8196-0 44843-1 411720-13 | 438857-4 1930212-3 1918-22 913829-7 178262-4 1643289-4 276455-1 923581-16 1876386-10 626730-43 | 0.00 |
| 32 | wiki-trivia Z repertuaru którego zespołu pochodzi utwór „Jestem z miasta”? | 1642348-0 741949-0 204472-3 3208891-8 | 1642348-2 1543428-1 3704391-8 1159288-1 1892721-1 2533878-0 3264724-2 974175-3 1010645-0 556327-8 | 0.00 |
| 33 | wiki-trivia Jak miała na imię żona Heraklesa? | 3136602-0 39725-0 11468-0 11468-22 39725-2 | 12500-0 553468-0 1006997-1 1457802-2 4528710-0 4075888-1 12500-15 163063-1 4528681-0 1237251-0 | 0.00 |
| 34 | wiki-trivia Jakie zwierzę widnieje w godle Wenecji? | 3517-75 517835-1 996055-5 | 2378349-2 2319571-3 163423-4 170281-3 76262-5 562507-0 925742-1 3118886-36 602381-3 711024-2 | 0.00 |
| 35 | wiki-trivia Jak nazywa się instrument muzyczny i ogon cietrzewia? | 445920-18 | 51223-9 2385416-2 51223-8 51223-10 129761-0 116386-0 3469201-8 17012-1 17770-0 17671-0 | 0.00 |
| 36 | wiki-trivia Jedna z mitycznych gorgon oraz jamochłon morski mają wspólną nazwę? | 108851-0 108851-2 108851-4 27899-19 1877199-2 | 2025784-0 1877199-0 1156134-1 3247744-0 4262750-1 227878-0 2727288-6 129350-0 683880-0 4381153-1 | 0.00 |
| 37 | wiki-trivia Na jaką chorobą zapadła Nel, bohaterka „W pustyni i w puszczy”? | 88267-8 | 41896-2 435160-0 774506-7 5067513-5 3009874-7 4294485-0 5016947-0 2482609-0 88267-19 3308639-0 | 0.00 |
| 38 | wiki-trivia Jak z francuskiego nazywa się pomieszczenie w teatrze, w którym widownia przebywa w trakcie przerwy? | 736692-0 | 46823-0 524484-5 3273694-8 63477-0 4185956-4 1340382-0 1666564-16 990086-5 171373-3 1597304-1 | 0.00 |
| 39 | wiki-trivia Jak nazywa się elastyczna deska umożliwiająca wybicie przy skokach do wody? | 90738-0 2996100-0 2996414-0 2066472-0 4112844-1 | 4595660-2 306214-4 1055624-3 2330285-0 536667-0 117311-0 90738-2 893903-1 321629-5 1366277-7 | 0.00 |
| 40 | wiki-trivia Jak nazywa się dwuosobowy zespół instrumentalny albo śpiewacki? | 17331-0 261983-0 989290-0 3544681-0 | 17333-0 428316-0 1432846-0 104615-12 44855-82 3719-17 669331-7 1288144-0 1666428-7 2216866-2 | 0.00 |