aa0056614b25d82b591bff35dc944541fdb35fbd
DBMC after 15 epochs
- challenge
- Passage Retrieval
- submitter
- Maciej
- submitted
- 2022-11-07 00:08:42.694856 UTC
- file basename
- out
test-A / 6ccd326f1446a2827c47a3e9d16c3d3243040fbf
| Metric | Score |
|---|---|
| NDCG@10 | 41.73 |
dev-0 / 5918a5ee29ffe12de15a9612988ecd55e2d12c46
| Metric | Score |
|---|---|
| NDCG@10 | 17.61 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-B NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia Co budował w Egipcie inżynier Tarkowski, ojciec Stasia z powieści „W pustyni i w puszczy”? | 934126-1 88267-17 | 2907847-3 934126-0 1633367-0 3114515-3 1871920-1 4696416-0 321573-4 2053838-1 3925758-3 540188-1 | 0.00 |
| 2 | wiki-trivia Kwartet – to ilu wykonawców? | 235415-0 17326-2 2490065-0 69774-0 17332-1 | 1459979-3 1469138-1 1787780-3 2245196-4 1091911-4 842585-5 872590-1 2203995-2 2200156-2 3180288-2 | 0.00 |
| 3 | wiki-trivia Jak nazywa się trucizna przyrządzona z korzenia szaleju? | 25098-0 141316-6 5423-11 | 1431587-6 1417360-1 1170990-42 4676144-8 3854219-0 115530-91 3800566-0 4980313-0 3985289-9 439857-75 | 0.00 |
| 4 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 177658-1 32581-5 1196102-4 408194-0 165671-3 693739-0 5603-1 390445-0 162640-6 32138-3 | 0.00 |
| 5 | wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? | 27859-0 799893-7 799893-14 4518252-4 | 800823-0 4518252-14 800068-21 2631259-6 1367559-7 27859-5 1529164-13 800806-0 2919882-0 3072851-50 | 0.00 |
| 6 | wiki-trivia W którym dniu tygodnia Robinson Crusoe spotkał Piętaszka? | 118590-4 2592188-2 | 7957-4 1298430-3 3165935-4 162209-8 3091158-6 2449235-3 4574650-0 4058866-6 12492-11 2580984-5 | 0.00 |
| 7 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 4805651-1 3113325-24 156600-17 4159068-10 1064233-1 5115755-9 504948-14 701576-1 306985-0 2008249-0 | 0.00 |
| 8 | wiki-trivia Z którego państwa pochodzi twórca Gadu-Gadu? | 1930-0 435065-0 1885378-1 | 4491104-0 14640-0 120893-66 2409103-2 1266654-3 201229-2 4841960-1 4453426-0 2344316-1 4104301-2 | 0.00 |
| 9 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 2449003-40 2077252-2 11289-4 4608972-0 2449003-48 3719-9 5061199-4 3178427-3 5104921-2 4033203-0 | 0.00 |
| 10 | wiki-trivia Jak nazywał się twórca Polskiej Akcji Humanitarnej? | 2733-0 437349-12 4306798-3 4211917-8 | 4688965-0 34668-7 504167-7 5097085-3 3535350-0 58054-0 850683-4 1756516-0 359-0 3952433-1 | 0.00 |
| 11 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 9372-18 1815589-2 3058833-6 711189-2 460409-2 1811080-1 590627-1 956558-9 1872536-1 193074-2 | 0.00 |
| 12 | wiki-trivia Z którego kosmodromu startował Jurij Gagarin? | 166906-0 2283748-0 2472693-1 2479587-0 | 2608-8 166906-6 273806-9 1334629-38 352486-3 2608-4 456334-3 383961-1 166926-1 719301-2 | 0.00 |
| 13 | wiki-trivia Co brzmi w trzcinie w bajce Jana Brzechwy? | 1131585-0 80790-2 | 4244988-1 1164582-2 2696105-1 2875398-2 2816162-2 2820380-1 755147-3 2407399-79 878176-4 920010-7 | 0.00 |
| 14 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 1029236-2 933900-1 8148-0 1671255-0 9536-2 5465-10 4299094-1 2837725-2 664084-3 4242245-7 | 0.00 |
| 15 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 1790523-0 354435-4 2128845-8 16098-2 3541721-0 1790523-2 1622286-0 868829-0 2102399-4 1027767-2 | 0.00 |
| 16 | wiki-trivia Z którego państwa pochodzi Stieg Larsson, autor trylogii kryminalnej „Millennium”? | 4446190-0 5018537-0 461434-5 | 2044201-2 4102741-0 2326920-0 2044201-1 3612653-0 623975-0 1442177-16 4081812-6 4094357-2 2130804-1 | 0.00 |
| 17 | wiki-trivia Sahara Zachodnia posiada duże złoża miedzi, fosforytów czy uranu? | 220899-2 1300844-0 | 2339751-0 1791819-5 422661-2 1796283-27 2195336-6 49464-1 10256-47 586597-2 1105462-2 51659-19 | 0.00 |
| 18 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 6111-8 6728-7 3954813-23 103289-5 403534-3 403532-1 5359-2 1529721-1 187502-3 487993-41 | 0.00 |
| 19 | wiki-trivia Jak nazywał się dokument wydany w 1215 r. przez Jana bez Ziemi? | 24139-0 13821-1 51599-27 10021-7 13181-16 | 7753-7 51599-0 3754106-3 4066272-0 13735-1 496872-5 121193-0 4075746-0 13777-0 7470-148 | 0.00 |
| 20 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 4729920-1 866511-1 4722724-1 4713848-1 2062522-8 5136170-2 619290-0 4959563-1 4960515-1 5184365-1 | 0.00 |
| 21 | wiki-trivia Który półwysep Azji jest największy? | 105934-0 | 251-11 100-4 1774370-0 3698-19 2013255-8 44854-9 3392117-1 60405-2 3359208-4 180740-0 | 0.00 |
| 22 | wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? | 471697-0 490372-6 18084-11 142774-5 | 142874-59 1182643-4 3038208-10 19413-153 28429-8 471697-2 706783-57 1727694-2 4469157-0 1018668-44 | 0.00 |
| 23 | wiki-trivia Po śmierci jakiego władcy diadochowie podzielili jego królestwo? | 14426-3 16357-0 12797-103 | 395414-3 133831-1 21102-15 79431-3 3773895-1 126843-6 28024-99 1235146-4 561503-3 1250714-3 | 0.00 |
| 24 | wiki-trivia W którym roku odbyła się pierwsza próba jądrowa? | 2312943-3 274961-0 1937784-0 1756259-2 4057-3 | 10211-13 2399186-3 1944317-4 634015-3 7293-30 2194-249 1302764-1 2296123-3 70570-13 3089682-24 | 0.00 |
| 25 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 5202146-8 174632-4 2509302-6 1404227-12 3542869-4 453504-61 2148967-12 960085-10 2241389-6 4599224-20 | 0.00 |
| 26 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 172738-0 1835943-0 1835943-1 1676730-0 82189-8 882297-0 19976-3 1590294-32 1324758-1 4034177-0 | 0.00 |
| 27 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 3584836-18 2362673-0 1302760-0 111902-7 1386044-4 1807613-1 750592-10 1385846-4 4720643-0 2828532-1 | 0.00 |
| 28 | wiki-trivia Który car rosyjski wprowadził grażdankę? | 129904-0 908-2 22313-16 2854198-24 2705-7 | 752470-7 5113338-57 5211010-9 129904-1 2055357-1 1421105-1 4460583-7 632477-20 4750970-21 68587-194 | 0.00 |
| 29 | wiki-trivia Jak chciał dać swojej córce na imię węglarz z filmu „Miś”? | 138277-7 | 554983-47 3656030-0 11855-10 2804479-0 598183-22 426762-4 687930-9 3192810-12 152409-8 27520-9 | 0.00 |
| 30 | wiki-trivia Jak nazywała się akcja przesiedlenia Ukraińców z 1947 r.? | 20338-0 785771-2 20297-4 929707-2 968749-0 | 875057-0 76561-21 23992-125 178391-9 20297-85 1826361-10 2186977-5 4264618-3 546766-49 6423-115 | 0.00 |
| 31 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 1594697-1 31038-5 165798-3 1328-3 164549-0 5190029-11 3998572-423 31038-1 162182-0 1730427-5 | 0.00 |
| 32 | wiki-trivia Jak z francuskiego określamy okulary, które trzymają się tylko na nosie? | 1202545-0 | 2910467-14 3958651-9 5176722-7 5061280-14 5239208-3 2798004-9 121272-5 43854-10 1149221-17 1034096-12 | 0.00 |
| 33 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 913165-1 1658867-146 423870-13 1189250-5 1088243-4 1318529-1 209672-12 3037690-3 4170322-3 4744199-3 | 0.00 |
| 34 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 1418508-339 2048728-5 4607596-17 4671522-2 545161-9 1280093-5 313868-12 426007-8 4752294-3 318254-6 | 0.00 |
| 35 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 24654-3 496315-12 61424-64 875-20 143094-17 43681-4 43681-5 5006042-4 1395215-2 3272280-47 | 0.00 |
| 36 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 685822-2 1379844-33 2317358-36 1417639-16 2942854-6 1385539-5 4642820-2 976622-45 4479932-4 107300-5 | 0.00 |
| 37 | wiki-trivia Z którego kontynentu pochodzą papużki nierozłączki? | 1507283-2 | 4334-12 2227123-1 11900-1 649305-3 839572-9 4896048-1 3795747-5 131256-1 194167-8 90085-19 | 0.00 |
| 38 | wiki-trivia Funkcjonariusz państwowy który ściga przestępców i oskarża ich w sądzie to...? | 152150-0 152150-14 2194475-2 537444-1 | 924877-0 567483-0 565250-0 3528382-3 24816-14 973129-0 4882672-1 924770-0 23275-21 180226-90 | 0.00 |
| 39 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 824743-3 169962-4 1782679-1 1330849-3 1423674-4 1859405-5 1731936-2 291056-6 115216-17 852696-5 | 0.00 |
| 40 | wiki-trivia Symbolem którego pierwiastka jest Cr? | 825-0 1676212-0 | 24742-7 3430-5 5422-2 16866-70 1846040-1 5422-1 492066-4 1874575-4 2457945-8 2169666-19 | 0.00 |