7b83135795308b83f99e9ad902f3a6d91bc0358c
further improvements with ce + cs
- challenge
- Passage Retrieval
- submitter
- Maciej
- submitted
- 2022-11-20 17:47:00.206573 UTC
- file basename
- out
test-A / fad27437559ce9e6fcdc196bed0e6cac119a3556
| Metric | Score |
|---|---|
| NDCG@10 | 55.30 |
dev-0 / d224f79022e12aa2e635b70a07590ebd972b8e23
| Metric | Score |
|---|---|
| NDCG@10 | 25.70 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-B NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 2242519-0 1284905-9 2377444-0 162911-6 558531-5 957095-0 2421-3 3184604-2 3752473-0 2202450-1 | 0.00 |
| 2 | wiki-trivia Co budował w Egipcie inżynier Tarkowski, ojciec Stasia z powieści „W pustyni i w puszczy”? | 934126-1 88267-17 | 934126-0 493645-4 162084-10 26170-16 934126-4 589037-3 493645-2 589037-0 3561031-14 664688-3 | 0.00 |
| 3 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 165120-2 2071590-30 49767-0 3321883-0 49762-11 3584220-0 79082-11 3792419-0 4882462-0 653690-0 | 0.00 |
| 4 | wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? | 27859-0 799893-7 799893-14 4518252-4 | 799841-3 2397753-0 3976476-10 3976505-10 4683453-5 799833-34 4537256-1 4672619-8 35848-12 1694292-1 | 0.00 |
| 5 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 572271-0 3514321-2 2033016-2 2402011-1 715939-0 1589379-8 1488895-0 1586007-9 1586714-10 1799769-22 | 0.00 |
| 6 | wiki-trivia Z którego państwa pochodzi twórca Gadu-Gadu? | 1930-0 435065-0 1885378-1 | 366849-1 2194-124 1780062-0 1103608-0 1143082-0 3141426-1 3337162-5 23950-0 1019665-6 435369-0 | 0.00 |
| 7 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 7854-8 37916-3 1683720-52 162129-0 118422-6 4141706-8 4099106-0 51116-0 3710137-7 1632825-1 | 0.00 |
| 8 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 6105-8 3334003-0 3311571-3 2736151-0 534661-6 2801925-136 2739552-1 2856932-0 3445549-4 4469367-0 | 0.00 |
| 9 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 2198008-0 1590294-26 8148-0 547665-0 47564-0 866159-0 1300575-25 84087-0 25911-0 725097-0 | 0.00 |
| 10 | wiki-trivia W którym starożytnym mieście budowano wieżę Babel? | 10168-12 13187-9 1861864-1 | 658-14 1868343-0 10168-28 10168-5 637862-7 10168-0 1367024-10 2033017-3 1836031-13 3510403-3 | 0.00 |
| 11 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 354435-4 1258696-0 1497493-0 1203402-0 4795017-0 1465064-0 1049830-0 2314236-4 1198241-0 76591-0 | 0.00 |
| 12 | wiki-trivia Z którego państwa pochodzi Stieg Larsson, autor trylogii kryminalnej „Millennium”? | 4446190-0 5018537-0 461434-5 | 2130804-0 2044201-0 3612653-0 2210821-0 4081812-6 623975-0 1498341-0 138165-11 4227499-15 6608-7 | 0.00 |
| 13 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 210259-2 610227-2 4355939-3 340495-1 5098842-2 57827-5 147137-2 365563-1 399136-2 415380-1 | 0.00 |
| 14 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 1856051-0 6171-18 917904-18 1769-5 1856051-1 12158-14 9830-0 513522-0 96488-10 889941-51 | 0.00 |
| 15 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 562243-1 239866-0 498311-0 186776-43 4329879-0 4319444-0 526076-0 89359-0 4704805-0 4201896-1 | 0.00 |
| 16 | wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? | 471697-0 490372-6 18084-11 142774-5 | 3678011-6 1526040-4 7417-8 1569670-3 1518180-23 51936-2 143139-38 1305609-0 3069011-1 1083842-1 | 0.00 |
| 17 | wiki-trivia Po śmierci jakiego władcy diadochowie podzielili jego królestwo? | 14426-3 16357-0 12797-103 | 53062-2 30378-28 30262-4 1067513-9 1726146-0 53070-3 7747-6 72634-2 1444661-5 874723-1 | 0.00 |
| 18 | wiki-trivia W którym roku odbyła się pierwsza próba jądrowa? | 2312943-3 274961-0 1937784-0 1756259-2 4057-3 | 44822-28 129691-93 15434-58 3163059-5 1877629-1 1280945-6 3506753-23 679480-1 3026773-3 15434-85 | 0.00 |
| 19 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 45745-0 802949-47 1797224-0 1064517-24 5118056-1 3927310-38 46922-8 4635429-0 5014734-0 5033166-2 | 0.00 |
| 20 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 2174186-2 332358-12 2789510-3 1071082-1 123722-1 1668859-1 1741389-0 1263801-12 1300575-2 170139-0 | 0.00 |
| 21 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 104191-1 535257-0 245782-0 180179-0 521357-0 5103420-8 4086348-2 113451-45 741944-14 4287923-0 | 0.00 |
| 22 | wiki-trivia W którym wieku żył Karol Darwin? | 44869-0 1142-4 7395-26 7828-34 | 3534298-5 44839-4 82449-4 504084-0 35733-7 1647907-2 290648-13 7479-22 4427971-24 1680688-6 | 0.00 |
| 23 | wiki-trivia Jak chciał dać swojej córce na imię węglarz z filmu „Miś”? | 138277-7 | 2625832-22 729028-0 604276-14 1351771-4 3563861-3 750171-3 112702-2 2080622-17 5052017-2 2723526-16 | 0.00 |
| 24 | wiki-trivia Jak nazywała się akcja przesiedlenia Ukraińców z 1947 r.? | 20338-0 785771-2 20297-4 929707-2 968749-0 | 651828-56 20338-18 8174-53 76561-23 179848-33 651828-55 1552826-228 370824-4 1801621-0 875057-26 | 0.00 |
| 25 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 3501817-15 1352589-26 1689104-2 1919191-28 5977-73 4585432-5 3551416-133 2239844-21 4369132-4 4691536-0 | 0.00 |
| 26 | wiki-trivia Jak z francuskiego określamy okulary, które trzymają się tylko na nosie? | 1202545-0 | 185768-12 983604-1 4115201-51 2169299-1 1012338-1 497735-11 1905187-4 40804-5 906089-5 2397348-0 | 0.00 |
| 27 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 1658867-146 314765-5 209672-12 1245061-38 557177-4 3081651-6 30378-9 828197-4 3061821-1 2522637-7 | 0.00 |
| 28 | wiki-trivia Z iloma państwami graniczy San Marino? | 5531-17 44915-14 | 1193751-0 1209122-0 1218507-0 1874026-0 2027875-9 1209122-1 3097749-4 2028372-0 2027875-5 115440-0 | 0.00 |
| 29 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 2048728-5 193584-2 516032-0 3575219-4 4413539-2 1418508-339 266127-3 1036565-0 7104-0 134896-1 | 0.00 |
| 30 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 984901-17 2311468-1 43683-7 2318382-1 43683-10 2311468-5 984901-6 1157-5 7-74 6567-1 | 0.00 |
| 31 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 1108611-1 762236-57 3538138-40 35040-24 1602497-8 1197116-6 331182-4 1932922-10 687909-4 3543480-10 | 0.00 |
| 32 | wiki-trivia Jak miał na imię Makuszyński? | 49827-0 49827-8 49827-14 1509748-0 12060-7 | 1833337-3 111280-2 2799183-1 1516230-4 141463-3 3954267-3 97004-33 2143672-2 3492-12 3492-22 | 0.00 |
| 33 | wiki-trivia Czy w Polsce panował król o imieniu Ludwik? | 18470-0 11289-2 489028-1 650042-0 1227360-0 | 118422-6 630875-93 1367257-8 641854-1 865985-0 1066149-1 3311801-0 1773446-0 6502-3 11443-1 | 0.00 |
| 34 | wiki-trivia Funkcjonariusz państwowy który ściga przestępców i oskarża ich w sądzie to...? | 152150-0 152150-14 2194475-2 537444-1 | 922427-0 4711553-0 661639-8 3294002-0 3628391-1 1730558-18 69213-0 4064684-0 4082787-0 4202395-0 | 0.00 |
| 35 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 824743-3 1827042-13 33090-4 403192-4 4478120-3 2123923-5 44880-212 165529-32 2427571-5 3674136-0 | 0.00 |
| 36 | wiki-trivia Symbolem którego pierwiastka jest Cr? | 825-0 1676212-0 | 139796-3 462645-5 1130111-6 5422-2 3940074-3 114092-24 10479-0 1803233-7 2154818-6 844577-2 | 0.00 |
| 37 | wiki-trivia Jak nazywała się dawna rezydencja cesarska w Pekinie? | 74254-0 95568-1 | 2521418-0 2070144-0 1930869-0 5047935-0 9576-11 2975809-0 5047935-16 1906305-0 1309650-5 187346-3 | 0.00 |
| 38 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 1369909-3 189807-31 115492-7 4681008-1 4190489-40 420125-11 2844076-2 5131383-16 3024448-5 3004694-1 | 0.00 |
| 39 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 523654-0 391783-7 1269055-11 32547-34 274668-4 4277-20 391783-28 3258146-0 1575402-9 450117-4 | 0.00 |
| 40 | wiki-trivia Kto jest autorem wiersza o Słoniu Trąbalskim? | 23626-20 1757856-4 4439842-4 | 2764968-34 4252824-6 540491-1 1685661-1 534565-9 87280-36 2783340-0 3032063-1 191002-5 12750-13 | 0.00 |