d1c6baa4d0dca36459d3175cdefbd0fe019c5d6e
es + ce 3
- challenge
- Passage Retrieval
- submitter
- Maciej
- submitted
- 2023-03-15 21:18:12.23352 UTC
- file basename
- out
test-B / aef9e76ef123bb942f180c3f05cafd96f439a24a
| Metric | Score |
|---|---|
| NDCG@10 | 51.72 |
test-A / f05d54f0813049eb76ea731c2aa5b2cd83edbf7c
| Metric | Score |
|---|---|
| NDCG@10 | 60.69 |
dev-0 / 1bde977666f1b83b326de0a23365d75134558263
| Metric | Score |
|---|---|
| NDCG@10 | 33.02 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-B NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 1895497-0 162911-6 2242519-0 2734991-1 4690657-3 2421-3 933008-1 1894795-0 3366912-0 2549019-4 | 0.00 |
| 2 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 552904-0 3584220-0 109175-0 49762-0 79082-11 3572733-0 1805254-3 891384-0 101527-1 4304342-6 | 0.00 |
| 3 | wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? | 27859-0 799893-7 799893-14 4518252-4 | 799841-3 2397753-0 187229-2 4518252-14 145643-3 2631259-6 134677-0 799373-0 1921556-6 2919562-1 | 0.00 |
| 4 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 4978480-17 572271-0 1586714-10 1589379-8 4622353-1 298457-2 2033016-3 566324-0 3124203-0 2212300-0 | 0.00 |
| 5 | wiki-trivia Z którego państwa pochodzi twórca Gadu-Gadu? | 1930-0 435065-0 1885378-1 | 1143082-0 4099164-1 1780062-0 1103608-0 1218804-0 672091-4 1464833-0 1522722-0 1625689-0 1786871-1 | 0.00 |
| 6 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 37916-0 51116-0 37694-1 162129-4 37916-3 2998627-6 181282-7 162129-0 181284-0 7533-94 | 0.00 |
| 7 | wiki-trivia Jakiego obrazu dotyczy akcja filmu Vinci? | 159017-5 89983-8 170281-11 764160-22 | 1004592-1 1004592-0 779791-2 781039-0 3128880-1 805064-0 292264-0 764160-15 779795-4 2054586-1 | 0.00 |
| 8 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 183444-1 461101-1 2856932-2 534661-6 1568453-0 21188-9 2533379-53 7025-45 178125-0 3304124-6 | 0.00 |
| 9 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 8148-0 547665-0 1590294-26 47564-0 1756836-0 2198008-0 4522-0 9536-3 510674-1 948595-9 | 0.00 |
| 10 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 354435-4 4795017-0 73042-0 76591-0 3317324-0 1216081-0 2885146-0 4715364-0 4710309-0 964354-0 | 0.00 |
| 11 | wiki-trivia Z którego państwa pochodzi Stieg Larsson, autor trylogii kryminalnej „Millennium”? | 4446190-0 5018537-0 461434-5 | 2130804-0 2210821-0 3612653-0 2044201-0 4081812-6 815271-8 201626-5 1065320-19 4102741-1 5018537-22 | 0.00 |
| 12 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 113882-4 610227-2 1698424-1 210259-2 4355939-3 24742-3 3051096-0 3513102-1 113882-0 1319884-0 | 0.00 |
| 13 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 1769-5 30332-19 917904-18 1856051-0 902545-10 3277-36 2328840-3 10289-0 93361-0 1121-9 | 0.00 |
| 14 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 498311-0 562243-1 5067717-6 186776-43 4704805-0 138493-16 539496-0 996497-1 4829526-11 3543061-11 | 0.00 |
| 15 | wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? | 471697-0 490372-6 18084-11 142774-5 | 3678011-6 7417-8 143139-38 64891-5 282920-9 44698-4 5144746-1 1532861-2 1711630-0 543583-69 | 0.00 |
| 16 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 1797224-0 449955-0 1271388-0 4635429-0 500532-0 802949-47 1797224-1 1793511-2 2329761-2 2283473-0 | 0.00 |
| 17 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 104191-1 5103420-8 245782-0 563600-11 535257-0 98592-0 4695792-411 4707650-197 5050253-6 173835-8 | 0.00 |
| 18 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 1689104-2 4023730-5 3501817-15 443919-0 1919191-28 3551416-133 100529-3 2281243-5 1667737-2 5107218-0 | 0.00 |
| 19 | wiki-trivia Jak z francuskiego określamy okulary, które trzymają się tylko na nosie? | 1202545-0 | 972216-0 4115201-51 40804-5 1905187-4 1012338-1 2169299-1 1798866-5 112490-0 4636070-2 4345838-2 | 0.00 |
| 20 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 1658867-146 314765-5 3081651-6 363695-7 209672-12 1245061-38 2087-72 778937-1 3977318-4 3979192-4 | 0.00 |
| 21 | wiki-trivia Z iloma państwami graniczy San Marino? | 5531-17 44915-14 | 1193751-0 1874026-0 1219119-0 1209122-1 1209122-0 5531-0 5531-19 2022498-4 115440-0 1874042-0 | 0.00 |
| 22 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 2048728-5 4719091-8 5143683-0 7104-0 1036565-0 134896-1 2849041-7 2048728-0 1300490-0 194317-2 | 0.00 |
| 23 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 984901-6 984901-17 2311468-1 984901-8 6567-1 43683-10 984901-0 4078492-64 158844-24 984901-7 | 0.00 |
| 24 | wiki-trivia Z którego kontynentu pochodzą papużki nierozłączki? | 1507283-2 | 1507283-0 1507283-10 294104-17 2372292-13 294104-10 1507283-5 4916088-0 4504996-0 1320346-0 1938663-0 | 0.00 |
| 25 | wiki-trivia Funkcjonariusz państwowy który ściga przestępców i oskarża ich w sądzie to...? | 152150-0 152150-14 2194475-2 537444-1 | 1876171-1 4202395-0 661639-8 1823613-28 4266141-0 973365-0 5222428-1 348992-0 620201-0 1858808-1 | 0.00 |
| 26 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 824743-3 1827042-13 2910023-1 403192-4 1145569-0 1003257-1 824743-0 7833-1 2889-40 3735127-3 | 0.00 |
| 27 | wiki-trivia Jak nazywała się dawna rezydencja cesarska w Pekinie? | 74254-0 95568-1 | 1906305-0 2521418-0 5047935-0 2070144-0 5047935-16 1930869-0 2847383-0 9576-11 904989-6 2003201-7 | 0.00 |
| 28 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 420125-11 2462290-7 2844076-2 5131383-16 8653-3 155529-0 2797003-0 3514566-1 5650-0 132074-9 | 0.00 |
| 29 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 391783-28 523654-0 4999816-10 3258190-0 1214644-3 39134-1 1490754-8 1498091-6 4713569-14 524505-0 | 0.00 |
| 30 | wiki-trivia Kto jest autorem wiersza o Słoniu Trąbalskim? | 23626-20 1757856-4 4439842-4 | 4403981-12 191002-5 3520259-2 12750-13 1685661-1 42400-11 1157968-72 2557297-7 2216517-0 3545333-6 | 0.00 |
| 31 | wiki-trivia Jak nazywa się pisarz, autora „Dziennika pisanego nocą”? | 152861-6 3449-50 84545-6 | 3449-34 4575552-8 23326-11 4117762-2 2346425-7 620584-7 741757-0 2229022-87 1115267-2 894178-4 | 0.00 |
| 32 | wiki-trivia Która dyscyplinę sportu uprawiał zawodowo Mariusz Czerkawski? | 201577-0 118655-38 2733996-19 935701-2 | 4187568-12 22121-61 449423-3 1112207-2 3777483-6 201577-7 455955-0 629530-2 1903388-0 6921-218 | 0.00 |
| 33 | wiki-trivia Jakie zwierzę widnieje w godle Wenecji? | 3517-75 517835-1 996055-5 | 2502-2 562507-0 1354802-0 3683834-83 2378349-2 2353359-2 1305932-4 72604-11 79011-3 4030712-24 | 0.00 |
| 34 | wiki-trivia Jak nazywa się instrument muzyczny i ogon cietrzewia? | 445920-18 | 17570-0 4286593-0 51223-9 196479-2 172094-0 19342-0 17569-0 19844-0 895007-0 4830506-0 | 0.00 |
| 35 | wiki-trivia Jedna z mitycznych gorgon oraz jamochłon morski mają wspólną nazwę? | 108851-0 108851-2 108851-4 27899-19 1877199-2 | 2025784-0 3247744-0 2727288-6 16435-0 697926-23 3356275-6 4262750-1 1156134-1 129361-0 2249436-1 | 0.00 |
| 36 | wiki-trivia Kto był ojcem Pegaza? | 108851-11 269351-0 16435-1 | 2035557-2 139763-11 101773-2 4679862-1 3193840-1 3587097-1 1801637-2 3537325-4 3879315-1 2057652-3 | 0.00 |
| 37 | wiki-trivia Na jaką chorobą zapadła Nel, bohaterka „W pustyni i w puszczy”? | 88267-8 | 162084-10 5067513-5 198471-1 198471-3 435160-0 41896-2 2217956-1 3710634-3 4193021-2 2235938-0 | 0.00 |
| 38 | wiki-trivia Jak z francuskiego nazywa się pomieszczenie w teatrze, w którym widownia przebywa w trakcie przerwy? | 736692-0 | 71449-5 3557895-8 41680-0 1340382-0 539739-1 401404-31 71449-0 3526338-3 2450245-0 6186-0 | 0.00 |
| 39 | wiki-trivia Jak nazywa się elastyczna deska umożliwiająca wybicie przy skokach do wody? | 90738-0 2996100-0 2996414-0 2066472-0 4112844-1 | 4595660-2 2851012-0 4728669-4 4225094-0 695540-2 3107705-0 2989397-0 132244-1 696758-0 850593-0 | 0.00 |
| 40 | wiki-trivia Jak nazywa się dwuosobowy zespół instrumentalny albo śpiewacki? | 17331-0 261983-0 989290-0 3544681-0 | 17333-0 3229003-6 1434942-0 2848387-0 873661-0 17326-0 17331-1 4865459-8 17326-2 16875-3 | 0.00 |