72ec2c427069dee73cb0b3511d5a54fa9b22ba88
dbmc1e + cs yaa
- challenge
- Passage Retrieval
- submitter
- Maciej
- submitted
- 2022-11-15 18:37:34.867949 UTC
- file basename
- out
test-A / 98e4c1cafa1dfe9b18b37b99db2096ec10cebb17
| Metric | Score |
|---|---|
| NDCG@10 | 48.46 |
dev-0 / 8c0be44fbbcb9afb5c2ecfddc8a4254eb80a26f1
| Metric | Score |
|---|---|
| NDCG@10 | 22.87 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-B NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 531352-2 1104939-1 548648-3 886820-2 993616-2 886820-3 881198-1 2734991-1 1785080-1 1158331-1 | 0.00 |
| 2 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 2108017-1 165122-2 3572733-0 101527-1 552904-0 510881-6 1929638-1 2005270-0 49767-0 1131567-3 | 0.00 |
| 3 | wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? | 27859-0 799893-7 799893-14 4518252-4 | 54733-2 55688-19 2944226-4 4518252-14 799773-4 1442438-1 800519-6 146627-0 3119842-10 187229-2 | 0.00 |
| 4 | wiki-trivia W którym dniu tygodnia Robinson Crusoe spotkał Piętaszka? | 118590-4 2592188-2 | 1590509-0 118590-0 3541134-1 377886-0 1814605-0 1515321-1 118590-13 1515321-0 1523832-0 1523831-0 | 0.00 |
| 5 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 4978480-17 5164089-0 1340884-1 5105-68 1892622-40 681454-5 1892622-31 1058932-17 2090427-1 1589379-8 | 0.00 |
| 6 | wiki-trivia Jak z łaciny nazywa się zmętnienie soczewki oka? | 49463-0 | 1835554-0 37242-4 144165-2 37242-15 4420383-3 186946-2 1041962-2 744327-2 1308285-14 42938-0 | 0.00 |
| 7 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 181282-7 181284-0 941032-0 11289-3 4608972-0 3710137-7 4083243-0 162129-4 37916-0 3710137-4 | 0.00 |
| 8 | wiki-trivia Jakiego obrazu dotyczy akcja filmu Vinci? | 159017-5 89983-8 170281-11 764160-22 | 1005097-0 225555-0 1005699-0 1005385-1 1005712-0 1004592-0 960880-4 779791-2 3121677-1 764160-15 | 0.00 |
| 9 | wiki-trivia Jak nazywał się twórca Polskiej Akcji Humanitarnej? | 2733-0 437349-12 4306798-3 4211917-8 | 765923-8 27660-4 27660-2 1000009-30 344406-0 2807595-7 111542-63 1011192-2 1536273-2 4097942-6 | 0.00 |
| 10 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 3256060-0 2758819-0 1965911-0 1121005-2 461101-1 692461-0 4438524-0 121015-8 2739552-1 1956520-0 | 0.00 |
| 11 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 8148-0 3205239-8 3205051-9 424605-4 1757857-0 1756843-0 1497109-0 1757451-0 547665-0 1758557-0 | 0.00 |
| 12 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 354435-4 4476880-0 4710309-0 73042-0 1217169-0 1258696-0 1886616-0 5199359-5 1263150-0 1695117-0 | 0.00 |
| 13 | wiki-trivia Sahara Zachodnia posiada duże złoża miedzi, fosforytów czy uranu? | 220899-2 1300844-0 | 1834-101 1707589-10 10256-47 1827785-30 44828-120 320462-98 98498-18 12237-54 795-41 851203-7 | 0.00 |
| 14 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 169168-13 2295876-1 2198747-0 1823321-1 862660-0 3534465-0 1895169-0 24742-3 24742-7 136382-4 | 0.00 |
| 15 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 3277-9 30332-1 4898470-14 4428906-3 30332-10 513522-0 27951-28 30332-19 9830-0 44772-6 | 0.00 |
| 16 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 4201896-1 1461623-5 4201896-0 1848206-24 44659-1 89359-0 88970-3 102637-1 111119-7 1115392-0 | 0.00 |
| 17 | wiki-trivia Który półwysep Azji jest największy? | 105934-0 | 251-11 45272-15 251-10 3129387-0 305246-0 3129380-5 41076-11 22585-0 1281635-1 727699-4 | 0.00 |
| 18 | wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? | 471697-0 490372-6 18084-11 142774-5 | 1063248-6 1063349-1 26438-15 3078615-15 4205679-2 4350593-2 668600-5 1143976-3 3678011-6 954783-1 | 0.00 |
| 19 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 2930630-26 318249-12 93420-0 765307-0 318249-0 538630-2 318249-1 732801-0 1797224-0 802949-47 | 0.00 |
| 20 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 2789510-3 1263801-9 170271-1 1263801-7 3018290-4 82189-7 1263801-10 170271-2 2174186-2 796633-2 | 0.00 |
| 21 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 3088422-0 3555843-0 113451-9 171302-0 1515517-17 3543302-1 52390-0 94454-0 1432548-19 98592-0 | 0.00 |
| 22 | wiki-trivia W którym roku odbył się po raz pierwszy festiwal na Woodstock? | 6857-0 61567-58 32954-0 2376129-0 1160069-0 | 61567-6 61567-5 6857-13 2770287-0 449468-11 4707906-2 2592628-1 6857-11 61567-20 897826-1 | 0.00 |
| 23 | wiki-trivia Kto napisał „Ziemię obiecaną” oraz „Chłopów”? | 491777-0 503711-0 6624-9 503711-67 | 89155-0 746926-0 746926-53 983999-6 503711-70 249800-4 2011374-5 620440-3 746926-78 746926-59 | 0.00 |
| 24 | wiki-trivia Jak chciał dać swojej córce na imię węglarz z filmu „Miś”? | 138277-7 | 90189-0 811817-27 1191642-5 980124-2 5052021-0 125656-1 140234-19 65847-2 849168-2 11638-1 | 0.00 |
| 25 | wiki-trivia Jak nazywała się akcja przesiedlenia Ukraińców z 1947 r.? | 20338-0 785771-2 20297-4 929707-2 968749-0 | 1326878-16 91329-156 1326878-15 1055666-8 2009481-1 1376857-0 1200959-0 20338-18 1599890-1 75278-15 | 0.00 |
| 26 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 153205-0 1919191-28 547468-0 1283142-0 2054599-0 792050-5 792050-6 524475-5 1002955-29 2239844-21 | 0.00 |
| 27 | wiki-trivia Jak z francuskiego określamy okulary, które trzymają się tylko na nosie? | 1202545-0 | 4115201-51 1599961-0 1419330-21 1599961-2 117349-12 478195-1 59601-5 145706-0 1012338-1 500485-360 | 0.00 |
| 28 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 1658867-146 363695-7 1048048-3 552783-2 910924-5 297056-3 584698-7 243442-5 314765-5 1856156-3 | 0.00 |
| 29 | wiki-trivia Z iloma państwami graniczy San Marino? | 5531-17 44915-14 | 1874026-0 2034735-0 1456227-0 2028372-13 1219119-0 998335-0 597206-1 2027875-8 1193751-0 1209122-1 | 0.00 |
| 30 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 2048728-5 106247-3 4363574-5 193584-2 3988455-5 1418508-456 1418508-296 1418508-339 4413539-2 1809833-3 | 0.00 |
| 31 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 2311468-1 43683-7 43683-6 1460654-0 43683-10 126631-9 984901-6 2311468-5 15195-9 7-74 | 0.00 |
| 32 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 4540392-7 722831-4 185547-5 17348-87 1756676-3 4102479-0 7569-23 1108611-1 35040-24 331182-4 | 0.00 |
| 33 | wiki-trivia Czy w Polsce panował król o imieniu Ludwik? | 18470-0 11289-2 489028-1 650042-0 1227360-0 | 32410-0 33267-0 35201-1 1367257-8 231809-18 174123-2 2582104-0 174123-6 1898964-16 11218-2 | 0.00 |
| 34 | wiki-trivia Funkcjonariusz państwowy który ściga przestępców i oskarża ich w sądzie to...? | 152150-0 152150-14 2194475-2 537444-1 | 1525907-0 4379515-0 7859-71 4948901-0 2326487-0 1673523-11 4798405-25 1810145-8 3713387-0 4711553-0 | 0.00 |
| 35 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 7774-1 165529-32 2022936-6 2081539-17 2605129-9 1588593-3 1588593-1 3243471-12 134786-10 1824624-8 | 0.00 |
| 36 | wiki-trivia Symbolem którego pierwiastka jest Cr? | 825-0 1676212-0 | 30332-1 74545-62 121015-8 2079167-0 6149-42 77079-14 6149-17 1133291-0 136382-4 874135-0 | 0.00 |
| 37 | wiki-trivia Jak nazywała się dawna rezydencja cesarska w Pekinie? | 74254-0 95568-1 | 5047935-0 2070144-0 1309650-1 1906305-0 2847383-0 2003201-7 5016891-4 2521418-0 2130812-4 6780-28 | 0.00 |
| 38 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 3039370-0 3514566-1 3514566-2 2383108-0 2462290-0 52406-29 1863525-0 514238-11 2462290-7 189807-31 | 0.00 |
| 39 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 4674879-8 4570607-2 130317-0 39134-1 285008-0 2755296-0 1796728-3 302733-30 274668-4 1160587-16 | 0.00 |
| 40 | wiki-trivia Kto jest autorem wiersza o Słoniu Trąbalskim? | 23626-20 1757856-4 4439842-4 | 316377-9 2828147-5 27837-58 764397-21 2828147-7 968329-34 3074-31 191002-5 3144098-1 2735278-7 | 0.00 |