e61a37c32558b2054a65e4ae04ed0da01adc9aae
4
- challenge
- Reading Comprehension
- submitter
- Krzysztof Wróbel
- submitted
- 2024-10-11 17:14:28.090539 UTC
- file basename
- out
dev-0 / 42f228688311332f9fcb087cabf228fdf8c78e19
| Metric | Score |
|---|---|
| Score | 83.07 |
| Levenshtein | 84.42 |
| Answerability | 81.73 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-B Score |
|---|---|---|---|---|
| 1 | 18093_0_4 | nie | nie | NaN |
| 2 | 8922_0_1 | w warszawie | 0.00 | |
| 3 | 7843_0_2 | tak | 0.00 | |
| 4 | 9778_0_2 | 4440/2440/500 mm | 0.00 | |
| 5 | 8949_0_2 | lokalni politycy sld | 0.00 | |
| 6 | 8031_0_4 | 2004 | 0.00 | |
| 7 | 8069_0_4 | nie | 0.00 | |
| 8 | 9033_0_2 | danie obywatelom prawa do noszenia broni i zwolnienie z więzień wszystkich więźniów | 0.00 | |
| 9 | 8942_0_2 | ok. 500 tysięcy funtów | 0.00 | |
| 10 | 7947_0_3 | na pieczęciach | 0.00 | |
| 11 | 4825_0_3 | trzy | 0.00 | |
| 12 | 4865_0_3 | major chagaj ronen | 0.00 | |
| 13 | 3553_0_3 | od początku lat 90 | 0.00 | |
| 14 | 4740_0_3 | wygrywający nadawca publiczny | 0.00 | |
| 15 | 92_0_4 | dwóch | 0.00 | |
| 16 | 1700_0_4 | orangutan | 0.00 | |
| 17 | 6066_0_2 | co ma stanowić nawiązanie do wiadomości rozsyłanych przez esterę i mardocheusza do współwyznawców | 0.00 | |
| 18 | 1709_0_3 | w południowo-zachodniej | 0.00 | |
| 19 | 3902_1_0 | tak | 0.00 | |
| 20 | 4235_0_3 | tak | 0.00 | |
| 21 | 4504_0_2 | islandią | 0.00 | |
| 22 | 2279_0_2 | 30 tys | 0.00 | |
| 23 | 2839_0_3 | o 10% | 0.00 | |
| 24 | 6172_1_3 | tak | 0.00 | |
| 25 | 41_0_3 | zwolenników rządu i działaczy ruchu oporu | 0.00 | |
| 26 | 5112_0_3 | wagnera | 0.00 | |
| 27 | 5503_0_4 | tak | 0.00 | |
| 28 | 5081_0_0 | inwazją lisa | 0.00 | |
| 29 | 3583_0_3 | 200 000 | 0.00 | |
| 30 | 2234_0_3 | po tych wydarzeniach pancernik pozostawał w puli aż do czerwca 1918 roku | 0.00 | |
| 31 | 4864_0_1 | w ekalaka w montańskim hrabstwie carter | 0.00 | |
| 32 | 4864_0_3 | 1943 | 0.00 | |
| 33 | 2243_0_3 | około dwóch tysięcy | 0.00 | |
| 34 | 4739_0_4 | 2010 | 0.00 | |
| 35 | 4256_0_0 | grand prix niemiec 2011 | 0.00 | |
| 36 | 7081_0_2 | leonid sokołow | 0.00 | |
| 37 | 6498_0_0 | 21 kwietnia 2016 | 0.00 | |
| 38 | 7190_0_3 | na osiedlu | 0.00 | |
| 39 | 7136_0_2 | ząb | 0.00 | |
| 40 | 11434_0_3 | 6047 | 0.00 |