2938b9b97f374b0ca8bdb71092157816084921ed
yaa
- challenge
- Passage Retrieval
- submitter
- Maciej
- submitted
- 2022-11-15 12:47:16.736544 UTC
- file basename
- out
test-A / cf493d0daa6423edaa42ff27cff5865c7c4618f8
| Metric | Score |
|---|---|
| NDCG@10 | 47.62 |
dev-0 / db530e88308ce7ed919643a85e0922215b2e2c15
| Metric | Score |
|---|---|
| NDCG@10 | 21.83 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-B NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 2734948-1 1895497-0 2734991-1 2377444-0 162911-6 2421-3 1898089-3 881198-1 886820-2 993616-2 | 0.00 |
| 2 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 4334-9 49762-0 2005270-0 1895483-36 1288875-9 43876-1 842394-12 510881-6 1276613-0 1929638-1 | 0.00 |
| 3 | wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? | 27859-0 799893-7 799893-14 4518252-4 | 146627-0 54733-2 4518252-14 3120956-9 2944674-4 3120394-13 3120275-11 4935081-4 892919-2 799773-4 | 0.00 |
| 4 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 4805651-1 4978480-17 2375662-1 2992056-3 1680868-2 1680869-2 1680395-2 671109-20 681454-35 681454-34 | 0.00 |
| 5 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 941032-0 162129-4 181284-0 4096279-0 4086255-1 4083243-0 3264968-1 11289-3 4608972-0 2419068-3 | 0.00 |
| 6 | wiki-trivia Jakiego obrazu dotyczy akcja filmu Vinci? | 159017-5 89983-8 170281-11 764160-22 | 1602139-5 551294-2 1004592-1 151787-4 150129-3 2357909-7 3121677-1 489854-0 1005699-0 488587-0 | 0.00 |
| 7 | wiki-trivia Jak nazywał się twórca Polskiej Akcji Humanitarnej? | 2733-0 437349-12 4306798-3 4211917-8 | 765923-8 4399166-2 1042823-1 4377117-2 1514238-4 46203-23 3229893-6 27660-2 2943391-26 2807595-7 | 0.00 |
| 8 | wiki-trivia Kto powołuje prezesa NIK? | 100304-0 615610-2 189807-110 2797003-26 | 100304-13 868554-14 152150-8 977725-3 100304-14 1025492-2 1026445-4 10392-71 2417040-43 4317277-26 | 0.00 |
| 9 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 3256060-0 1956520-0 90802-2 121015-8 2801925-135 3683882-13 975388-2 461101-1 60143-214 5164327-13 | 0.00 |
| 10 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 2198008-0 1792-0 116359-10 1840674-1 2194128-0 1300575-25 547665-0 1756843-0 323850-0 1757857-0 | 0.00 |
| 11 | wiki-trivia W którym starożytnym mieście budowano wieżę Babel? | 10168-12 13187-9 1861864-1 | 658-14 10168-0 471537-1 557961-1 10168-5 10168-28 1836031-13 2040230-3 965576-0 1870077-3 | 0.00 |
| 12 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 354435-4 4710309-0 4476880-0 1576655-0 1487142-0 73042-0 5108799-0 1258696-0 1216081-0 1263150-0 | 0.00 |
| 13 | wiki-trivia Sahara Zachodnia posiada duże złoża miedzi, fosforytów czy uranu? | 220899-2 1300844-0 | 2195336-6 1834-101 1827785-30 32925-6 1629966-23 422661-2 3337160-1 1101834-2 422587-4 4573633-2 | 0.00 |
| 14 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 5098842-2 24742-3 27673-3 610227-2 24742-7 2279580-16 329343-2 862660-0 1895169-0 151567-16 | 0.00 |
| 15 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 30332-19 96488-10 1769-5 917904-18 3289-10 28839-1 29-36 30332-10 30332-18 2596884-3 | 0.00 |
| 16 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 1461623-5 4201896-1 1461623-10 562243-1 186776-43 4704805-0 3548728-0 88970-3 89359-0 1115392-0 | 0.00 |
| 17 | wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? | 471697-0 490372-6 18084-11 142774-5 | 1130465-6 1143976-3 954783-1 143139-38 1063248-6 48631-5 3678011-6 4350593-2 4205679-2 487517-4 | 0.00 |
| 18 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 1064517-24 2995162-1 5033166-2 2053943-3 3820485-0 318249-12 65401-1 1215076-11 318249-0 76752-14 | 0.00 |
| 19 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 1547524-3 1263801-12 2789510-3 170271-2 172832-2 2174186-2 44854-22 82189-7 170271-1 172294-0 | 0.00 |
| 20 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 3543302-1 1484457-1 641798-47 3088422-0 5103420-8 113451-9 513348-0 52390-0 98592-0 94454-0 | 0.00 |
| 21 | wiki-trivia Który car rosyjski wprowadził grażdankę? | 129904-0 908-2 22313-16 2854198-24 2705-7 | 752470-7 22313-18 2510536-0 3557025-0 121977-3 2792260-3 17869-4 33701-113 2838772-7 601566-19 | 0.00 |
| 22 | wiki-trivia W którym roku wystrzelono pierwszego sztucznego satelitę ziemskiego? | 21622-0 7299-31 504860-13 198755-0 4839-2 | 4354161-2 67372-16 7816-29 64914-2 7798-25 30329-35 4492057-24 672785-12 2816490-1 155389-0 | 0.00 |
| 23 | wiki-trivia Jak nazywała się akcja przesiedlenia Ukraińców z 1947 r.? | 20338-0 785771-2 20297-4 929707-2 968749-0 | 360609-19 1326878-16 1826361-10 1552826-228 706804-25 91329-159 1657997-6 1123112-1 1376857-0 1326878-0 | 0.00 |
| 24 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 1919191-28 3185428-10 2239844-21 698175-3 3385785-0 3168454-1 644625-23 153205-0 547468-0 249985-0 | 0.00 |
| 25 | wiki-trivia Jak z francuskiego określamy okulary, które trzymają się tylko na nosie? | 1202545-0 | 4115201-51 1541774-6 3718611-10 4571129-23 764920-19 185768-12 472699-113 117349-12 59601-5 1553694-1 | 0.00 |
| 26 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 1658867-146 243442-5 363695-7 1048048-3 1765337-4 30378-9 209672-12 297056-3 3589396-10 3589396-1 | 0.00 |
| 27 | wiki-trivia Z iloma państwami graniczy San Marino? | 5531-17 44915-14 | 1874026-0 2028372-13 1219119-0 1209122-0 1230661-0 4177338-0 2028372-0 998335-0 1209122-8 597206-1 | 0.00 |
| 28 | wiki-trivia Czy wśród dwunastu apostołów był uczeń o imieniu Bartłomiej? | 121881-0 121881-2 16801-7 32283-1 3332578-2 | 187142-6 295086-1 2067658-1 16801-3 2189500-0 66832-15 4212170-72 395225-0 1869869-0 1862057-0 | 0.00 |
| 29 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 1418508-339 2048728-5 1809833-3 266127-3 4413539-2 2549074-2 4413578-6 193584-2 3988455-5 879635-12 | 0.00 |
| 30 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 2311468-1 43683-7 4541971-5 43683-6 6567-1 43681-3 984901-6 875-19 121572-18 43683-5 | 0.00 |
| 31 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 685822-2 2274-112 58590-17 1108611-1 308840-5 7663-36 2733663-98 1756676-3 365030-13 7242-33 | 0.00 |
| 32 | wiki-trivia Czy w Polsce panował król o imieniu Ludwik? | 18470-0 11289-2 489028-1 650042-0 1227360-0 | 630875-93 32410-0 941032-0 39613-0 6502-3 11289-3 1367257-8 2582104-0 2172744-0 2545005-0 | 0.00 |
| 33 | wiki-trivia Funkcjonariusz państwowy który ściga przestępców i oskarża ich w sądzie to...? | 152150-0 152150-14 2194475-2 537444-1 | 4376936-5 636018-6 6959-15 2138569-3 824345-6 5131340-0 4412310-8 1809008-0 2326487-0 4798405-24 | 0.00 |
| 34 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 824743-3 5060493-2 4181943-6 3243471-11 2910023-1 1827042-13 403192-4 2050780-21 2605129-9 7526-0 | 0.00 |
| 35 | wiki-trivia Symbolem którego pierwiastka jest Cr? | 825-0 1676212-0 | 5422-2 24742-9 182850-2 30330-19 30333-0 1130520-3 30332-1 1584-25 6149-17 207562-2 | 0.00 |
| 36 | wiki-trivia Jak nazywała się dawna rezydencja cesarska w Pekinie? | 74254-0 95568-1 | 2070144-0 5047935-16 5047935-0 904989-6 1906305-0 6780-27 2165527-10 2003201-7 5016891-4 3241388-4 | 0.00 |
| 37 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 2461754-10 3574207-12 8653-3 115492-7 655213-1 2433825-14 2462290-7 2462290-0 59462-1 52406-29 | 0.00 |
| 38 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 391783-28 523654-0 391783-4 2909498-11 524505-0 32036-35 391783-7 1796728-3 285008-0 4306018-18 | 0.00 |
| 39 | wiki-trivia Kto jest autorem wiersza o Słoniu Trąbalskim? | 23626-20 1757856-4 4439842-4 | 1148354-2 191002-5 68774-113 428616-7 1541044-10 18737-30 141945-2 968329-34 2828147-7 1956-32 | 0.00 |
| 40 | wiki-trivia Co według piosenki puka w rytmie cha-cha? | 389424-0 1274995-6 781704-2 | 2638510-1 594670-6 4573458-2 1440830-1 16583-2 771940-1 2258527-8 692965-12 1523295-9 32425-7 | 0.00 |