779cf65028b9d6fcfc3e1c8e939cdbe500625410
v2
- challenge
- Passage Retrieval
- submitter
- BI Insight
- submitted
- 2022-11-02 13:07:19.190342 UTC
- file basename
- out
test-A / bbeb49ea6de5744dc431288deb69dd30c35b8755
| Metric | Score |
|---|---|
| NDCG@10 | 35.34 |
dev-0 / bf2edbbc6a65b6d5b4455564ee983a3dd59bc271
| Metric | Score |
|---|---|
| NDCG@10 | 29.62 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-B NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 3524832-0 1518821-1 3112158-0 2377444-1 143543-1 1760331-3 3880825-0 2377444-0 2948500-2 1287330-0 | 0.00 |
| 2 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 49762-4 552904-0 101527-1 49762-12 1929638-1 109175-5 3572733-0 109175-0 2005270-0 627331-0 | 0.00 |
| 3 | wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? | 27859-0 799893-7 799893-14 4518252-4 | 187229-1 4706926-22 54172-13 2854592-2 2989931-1 134677-0 27859-6 2397309-12 3892219-4 2974939-6 | 0.00 |
| 4 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 306982-0 4978480-17 222547-0 321358-1 4843686-47 3643784-0 4978480-8 2085194-0 10486-0 10503-13 | 0.00 |
| 5 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 2077252-2 1023230-1 1852548-4 2896543-3 1263250-2 53582-19 2536818-5 181264-10 941032-0 181284-0 | 0.00 |
| 6 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 1589274-4 87255-2 1351515-1 72525-258 762402-0 4625248-0 4625555-8 7084-1 1965911-3 3304124-6 | 0.00 |
| 7 | wiki-trivia Na ogonie którego ptaka Hera umieściła oczy olbrzyma Argosa? | 205590-1 | 101285-2 1528827-2 205590-0 1035215-0 101285-4 661616-0 1225185-18 205592-0 86748-2 337494-16 | 0.00 |
| 8 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 5465-0 108372-0 453381-20 11569-1 5465-10 116359-10 988157-0 986327-0 1818509-0 1273362-0 | 0.00 |
| 9 | wiki-trivia W którym starożytnym mieście budowano wieżę Babel? | 10168-12 13187-9 1861864-1 | 10168-5 1868343-5 10168-27 10168-3 10168-17 10168-15 10168-29 557961-1 10168-0 1163900-0 | 0.00 |
| 10 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 937406-0 73042-0 2920865-0 16122-0 3317324-1 14360-16 354435-4 3317324-0 1216081-0 4625746-5 | 0.00 |
| 11 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 2227915-0 5377-0 37083-0 21099-0 24742-8 10037-0 21576-0 16086-0 24742-3 1893165-2 | 0.00 |
| 12 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 889941-51 10461-37 9828-0 30330-5 3289-61 1856051-1 6084-2 30332-6 59127-17 2861029-14 | 0.00 |
| 13 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 221655-6 16354-2 474561-0 330107-1 21096-27 1881208-0 107228-2 4047388-4 6274-4 114166-2 | 0.00 |
| 14 | wiki-trivia Po śmierci jakiego władcy diadochowie podzielili jego królestwo? | 14426-3 16357-0 12797-103 | 1726146-0 79431-37 14426-64 27906-0 1293368-0 3817036-3 1996653-0 27906-2 3817036-9 3817049-0 | 0.00 |
| 15 | wiki-trivia W którym roku odbyła się pierwsza próba jądrowa? | 2312943-3 274961-0 1937784-0 1756259-2 4057-3 | 3862076-2 2839903-11 1826203-36 3073408-3 80936-12 492418-3 1826203-37 4086834-3 3452372-3 96181-35 | 0.00 |
| 16 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 45735-9 3820485-9 802949-47 45745-0 35994-24 1352183-2 5118056-1 3760147-3 89926-5 327866-93 | 0.00 |
| 17 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 1834305-0 2174186-2 1676730-0 172738-0 43654-8 1834235-0 1834162-0 1416100-1 277083-1 1715423-0 | 0.00 |
| 18 | wiki-trivia Kto napisał „Ziemię obiecaną” oraz „Chłopów”? | 491777-0 503711-0 6624-9 503711-67 | 1474653-0 3740698-27 6624-11 746926-77 937744-20 503711-11 2052685-20 503711-1 89155-0 746926-23 | 0.00 |
| 19 | wiki-trivia W którym roku wystrzelono pierwszego sztucznego satelitę ziemskiego? | 21622-0 7299-31 504860-13 198755-0 4839-2 | 64970-0 3216-2 3664583-0 2134004-0 2303866-0 140297-12 4038-2 3510889-6 1619469-0 10064-9 | 0.00 |
| 20 | wiki-trivia Jak nazywała się akcja przesiedlenia Ukraińców z 1947 r.? | 20338-0 785771-2 20297-4 929707-2 968749-0 | 1244780-20 381998-21 706804-21 101640-3 71676-105 2415784-1 178258-13 875057-0 1316865-2 1548298-1 | 0.00 |
| 21 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 175305-4 3806-3 1607982-2 108880-8 1919191-28 2239844-21 1249108-5 316692-1 222726-8 698175-3 | 0.00 |
| 22 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 568164-1 1818942-5 2807644-19 425167-1 395316-1 423792-21 395316-0 420939-0 425167-7 2555219-1 | 0.00 |
| 23 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 1996923-0 984901-6 43683-10 43683-7 7-49 1324757-50 984901-19 7-72 6567-1 7-74 | 0.00 |
| 24 | wiki-trivia Z którego kontynentu pochodzą papużki nierozłączki? | 1507283-2 | 3823880-12 2270513-4 1507283-6 3823880-1 1320346-14 4887687-2 4916088-3 294104-5 1320346-3 4498545-0 | 0.00 |
| 25 | wiki-trivia Czy w Polsce panował król o imieniu Ludwik? | 18470-0 11289-2 489028-1 650042-0 1227360-0 | 1173579-0 199569-2 2366981-3 4187966-10 6461-3 6502-1 126804-3 72097-42 33267-4 630875-95 | 0.00 |
| 26 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 184952-0 233530-1 2605129-9 3243471-12 4998859-0 652000-0 3674136-0 674-65 303985-0 159-92 | 0.00 |
| 27 | wiki-trivia Jak nazywała się dawna rezydencja cesarska w Pekinie? | 74254-0 95568-1 | 2521418-0 637443-0 1940895-0 1746085-0 2819645-23 1968879-0 2070144-0 1906305-0 5047935-0 3330773-1 | 0.00 |
| 28 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 2844076-2 2055595-20 2352430-0 2462290-0 115521-7 5246661-3 5754-14 1484856-9 8653-0 59425-0 | 0.00 |
| 29 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 4342-60 523654-0 470606-7 1017419-7 1019187-9 1017545-8 2729036-3 1019218-8 1322911-1 1017470-7 | 0.00 |
| 30 | wiki-trivia Z repertuaru którego zespołu pochodzi utwór „Jestem z miasta”? | 1642348-0 741949-0 204472-3 3208891-8 | 5165180-14 172313-29 921731-0 173438-1 1543428-1 435846-104 4942951-0 3032360-1 83232-86 2902366-8 | 0.00 |
| 31 | wiki-trivia Co po łacinie oznacza słowo „lupus”? | 330559-0 622969-2 63166-0 63166-49 63166-9 | 48275-46 23951-9 385282-32 1056753-49 3177089-2 5219832-5 242799-5 529973-1 2986421-1 192158-1 | 0.00 |
| 32 | wiki-trivia Jak nazywał się pancernik, który rozpoczął II wojnę światową? | 14103-0 1815538-17 2304-13 89007-6 3241-119 | 828552-5 10486-0 133030-0 15343-0 1631702-14 3734981-0 1593381-0 1248444-0 24109-199 5105-65 | 0.00 |
| 33 | wiki-trivia Jak miała na imię żona Heraklesa? | 3136602-0 39725-0 11468-0 11468-22 39725-2 | 12500-15 553468-0 11468-9 163063-1 1201-2 204427-2 4528710-0 11468-1 11468-27 39725-5 | 0.00 |
| 34 | wiki-trivia Która dyscyplinę sportu uprawiał zawodowo Mariusz Czerkawski? | 201577-0 118655-38 2733996-19 935701-2 | 474144-35 1615349-0 201577-63 1784871-26 201577-3 3582461-0 4449832-0 201577-69 123954-0 474144-3 | 0.00 |
| 35 | wiki-trivia Jakie zwierzę widnieje w godle Wenecji? | 3517-75 517835-1 996055-5 | 925742-1 87035-3 1788335-2 163423-4 23593-3 2502-2 2378349-2 806771-0 754081-4 2135890-2 | 0.00 |
| 36 | wiki-trivia Jedna z mitycznych gorgon oraz jamochłon morski mają wspólną nazwę? | 108851-0 108851-2 108851-4 27899-19 1877199-2 | 463184-0 953156-1 107821-0 84135-0 1877199-0 451354-0 107821-4 2803386-0 4539022-0 4539023-0 | 0.00 |
| 37 | wiki-trivia Kto był ojcem Pegaza? | 108851-11 269351-0 16435-1 | 55509-22 1404149-14 55509-18 55509-19 101773-2 55509-2 55509-4 55509-21 45889-0 2009988-0 | 0.00 |
| 38 | wiki-trivia Jak z francuskiego nazywa się pomieszczenie w teatrze, w którym widownia przebywa w trakcie przerwy? | 736692-0 | 63477-0 46823-0 1597304-1 3265315-5 171373-3 947402-0 346162-0 447328-3 4592165-2 63342-6 | 0.00 |
| 39 | wiki-trivia Jak nazywa się elastyczna deska umożliwiająca wybicie przy skokach do wody? | 90738-0 2996100-0 2996414-0 2066472-0 4112844-1 | 90738-1 749086-0 893903-1 2330285-0 1271652-1 695540-2 74639-0 2248977-0 87783-2 125233-6 | 0.00 |
| 40 | wiki-trivia Długa, biała szata, którą ksiądz nosi pod ornatem, to...? | 153722-0 128-0 153720-0 125212-47 | 853042-10 3738290-3 1136442-0 153722-3 25835-6 4718546-6 521050-7 1115727-0 327657-2 4573870-0 | 0.00 |