a342d80118987259333ee465135c3aadd6c09567
BLEU baseline baseline

 

challenge
Evaluation of translation quality assessment metrics (nonblind)
submitter
Filip Graliński
submitted
2021-08-21 16:56:07.136695 UTC
original repo
git@django:/git_data/pr/quality-estimation-nonblind-f906c9f6-28d8-46fc-b52e-5c5cd3810ef7 / branch master
publicly available at
https://github.com/poleval/quality-estimation-nonblind / branch submission-00221
browsable at
https://github.com/poleval/quality-estimation-nonblind/tree/submission-00221
clone by
git clone --single-branch https://github.com/poleval/quality-estimation-nonblind -b submission-00221
file basename
out

test-A / c29889b9f060c8555caeee51ed7d169c9d6e64d6
Metric Score
Pearson 0.2737

worst items

note: the gold standard is taken from the challenge
# input expected output actual output test-B Pearson
1 Nie wiem, czy nadal możesz zobaczyć czerwoną linię tutaj i na ramieniu. I don not know if you can still see the red line here and up the arm… 4.666666667 0.0 NaN
2 A jednak wciąż jest jeden na ciemnym tle, a drugi na jasnym. And yet there is still one on a dark surround and one on a light surround. Ale … 4.583333333 0.0 NaN
3 I nie zawsze ze sobą współpracują. Podoba mi się teoria Freuda, że ​​większość z nich wyklucza się nawzajem. And they don not always work to… 4.666666667 0.24623953025272616 NaN
4 Tak więc w drugiej wersji jest 100 miliardów lub 1000 miliardów ludzi na Ziemi, ale wszyscy oni są przechowywani na twardych dyskach, dyskie… 4.5 0.2908651942345128 NaN
5 Teraz pamiętaj, że ma iść do niebieskich kwiatów. Now remember she is supposed to be going to the blue flowers. Teraz pamiętajcie że ona mi… 5 0.3376459109063278 NaN
6 Tak więc w życiu i przy cięciu papieru wszystko jest ze sobą powiązane. So in life and in papercutting everything is connected. W życiu i wy… 4.75 0.0 NaN
7 Sugeruje to, że nikt nie jest zewnętrznym obserwatorem natury. What this suggests is that no one is an outside observer of nature Okay. To s… 4.583333333 0.6496350258549114 NaN
8 Okej, więc są fizycznie takie same. Okay So they are physically the same. Okej. Więc fizycznie są takie same. 4.833333333 0.0 NaN
9 Więc jedno, co możemy zrobić, to żyć dłużej. So one thing we can do is live longer. Możemy też żyć dłużej. 4.666666667 0.0 NaN
10 Więc mój proces jest bardzo prosty. So my process is very straightforward. Mój proces jest więc dość prosty. 4.416666667 0.0 NaN
11 Przewierciliśmy sto metrów pływającego szelfu lodowego, następnie 900 metrów wody, a następnie 1300 metrów w dno morskie. We drilled through… 4.333333333 0.0 NaN
12 A teraz pojawia się teoria strun i mówi, że tak, elektromagnetyzm mechaniki kwantowej grawitacji razem w jednym pakiecie, ale tylko wtedy, g… 4.333333333 0.0 NaN
13 A teraz wiemy, że w naszej niedawnej przeszłości stopił się i ponownie uformował, a poziom morza podnosił się i opadał o sześć metrów na raz… 4.583333333 0.0 NaN
14 Rozważ to Jeśli spojrzysz na instrument, waltornia zauważysz, że kształt instrumentu ma wpływ na wibracje strumieni powietrza. Consider this… 4 0.0 NaN
15 Trzaskujesz je razem i jeśli mamy rację, część energii tego zderzenia trafi do gruzu, który odleci do tych dodatkowych wymiarów. You slam th… 4.083333333 0.0 NaN
16 W każdym razie jest to zła wiadomość dla koralowców z Wysp Galapagos. Either case it is bad news for the corals of the Galapagos Islands. W … 4.5 0.0 NaN
17 Mógłbyś wygłosić im długie przemówienie polityczne, którego nadal by nie zrozumieli. You could give them a long political speech they would … 4.5 0.0 NaN
18 Ponieważ w przeciwnym razie może stać się dość klaustrofobiczna. Because otherwise it can get quite claustrophobic. bo inaczej robi się dość… 4.583333333 0.0 NaN
19 Nazwaliśmy ten ląd Pangea. And we called that landmass Pangea. Nazywamy ten ląd Pangeą. 4.833333333 0.0 NaN
20 I wiesz co. And you know what. I wiecie co? 4.666666667 0.0 NaN
21 I oczywiście przyniesie to wspaniałe rzeczy. And of course it will bring great things. Przyniesie wielkie owoce. 4.5 0.0 NaN
22 Ale ponieważ tak wiele problemów w edukacji dotyczy nie tylko szkoły, ale także rodziny i społeczności, to, czego potrzebujesz, jest zdecydo… 3.833333333 0.0 NaN
23 Byłem też nazywany egipskim Libańczykiem i syryjskim Amerykaninem z perskim imieniem - kryzys pokojowy na Bliskim Wschodzie. And I have also… 4.25 0.0 NaN
24 możemy cofnąć się i zmienić nasz związek, ponownie wizja naszego stosunku do ludzi z przeszłości i wydarzeń, ścieżki neuronowe mogą się zmie… 4.083333333 0.0 NaN
25 Kiedy o tym pisałem, natknąłem się na książkę Viktora Frankla pt. Człowiek szuka sensu. Now while I was writing about this I came upon a boo… 4.666666667 0.3161487584488943 NaN
26 Nie mieliśmy na to funduszy. We had no funding for it. Nie mieliśmy żadnego wsparcia finansowego. 4.833333333 0.0 NaN
27 Współpracownik, kiedy umarł, było mi naprawdę smutno. Collaborator I felt really sad when he died. Współpracownik Czułem prawdziwy smutek ki… 4.25 0.0 NaN
28 Wspiera także dzieci z klasy robotniczej chodzące do indyjskich szkół. And it also supports working class kids going into Indian schools. To… 4.583333333 0.0 NaN
29 Po prostu chciałem być w centrum. I just wanted to be in the center. Chciałam być w centrum wydarzeń. 4.666666667 0.0 NaN
30 Być może nadal cierpimy z powodu psychicznego bólu i rany. Perhaps we still suffer from a psychic pain a wound. Być może nadal cierpimy z po… 4.833333333 0.5814307369682193 NaN
31 Ale w przeciwieństwie do mojego złego bliźniaka, który pożąda dominacji nad światem, moje motywy nie są złowieszcze. But in contrast to my e… 4.583333333 0.0 NaN
32 Po prawej stronie okrążamy klif. We are coming around a cliff here on the right. Lecimy koło klifu. 4.5 0.0 NaN
33 Oczywiście racja. Obvious right. To oczywiste. 4.333333333 0.0 NaN
34 To była świetna zabawa. This has been a lot of fun. To mnóstwo frajdy. 4.666666667 0.0 NaN
35 Dlatego naprawdę zachęcam cię, bez względu na twoją stawkę w edukacji, niezależnie od tego, czy jesteś twórcą polityki dla rodziców i nauczy… 4 0.0 NaN
36 Tak nazywa się ikona naszego robota Jasona. This is an icon of our robot Jason it is called. gdzie widać naszego robota Jasona. 4.833333333 0.0 NaN
37 Ale poza głębokimi przywilejami federalnymi, małżonkowie zarabiają więcej pieniędzy. But beyond the profound federal perks married people ma… 4.333333333 0.0 NaN
38 Istnieje niechęć do zadań tekstowych, która dotyczy 99 procent moich uczniów. There is an aversion to word problems which describes 99 perce… 4.5 0.0 NaN
39 BL Biały materiał to rodzaj bakterii, która rozwija się w temperaturze 180 stopni C. BL The white material is a type of bacteria that thrive… 4.666666667 0.0 NaN
40 Więc znowu jednym z wielkich rozwiązań jest przeniesienie przez Światową Organizację Handlu dotacji na zrównoważone praktyki. So again one o… 4.083333333 0.0 NaN

dev-0 / 28ef1e5fd72446c143846b1de478c7cd6876617c
Metric Score
Pearson 0.3149

worst items

note: the gold standard is taken from the challenge
# input expected output actual output test-B Pearson
1 Zacząłem więc swoje życie jako architekt lub jako architekt i zawsze byłem zainteresowany społecznie odpowiedzialnym projektowaniem i tym, j… 3.833333333 0.0 NaN
2 Myślisz, że szczegół jest obecny, ale go nie ma. You think the detail is there but it isn not there. Myślisz że szczegół jest ale go tam nie… 4.166666667 0.0 NaN
3 Przypomina mu to słowo pudel barokowy barokowy Suzanne R, który wyrusza na wyścigi. That reminds him of the word baroque barrack bark poodle… 3.25 0.0 NaN
4 I sprawił, że igła wyglądała, jakby Hulk ją złamał. And made a needle look like the Hulk is broken it. tak aby wydawało się że to Hulk ją zł… 4.666666667 0.0 NaN
5 I mówi: Wydaje się, że idealnym argumentem dla większości filozofów jest to, że dajesz słuchaczom przesłanki, a następnie dajesz im wnioski … 3.916666667 0.0 NaN
6 Jesteśmy u progu największego odkrycia, jakie kiedykolwiek znała ludzkość. We are on the verge of the greatest exploration that the human ra… 4.416666667 0.0 NaN
7 Ale inni dorośli mówią niezwykle bolesne rzeczy. But other adults say incredibly painful things. Ale inni dorośli wypowiadają niezwykle bole… 4.833333333 0.0 NaN
8 To dobra wiadomość. That is the good news. To dobra wiadomość. 5 1.0 NaN
9 Nasza siedziba znajduje się na Florydzie. We are based down in Florida. Jesteśmy na Florydzie. 4.666666667 0.0 NaN
10 Nazywa się je bateriami jądrowymi. They are referred to as nuclear batteries. Mówi się o nich jako jądrowych bateriach. 4.333333333 0.0 NaN
11 Szybki moment dla projektantów na widowni. Quick moment for the designers in the audience. Chwila dla projektantów wśród publiczności. 4.416666667 0.0 NaN
12 Dysmorfofobia to skrajna wersja tego, że nie postrzegamy siebie tak, jak widzą nas inni. Dysmorphophobia is an extreme version of the fact t… 4.75 0.2668064899634279 NaN
13 A to oczywiście ostrzega dziecko o ich niezwykłej naturze. And that obviously alerts the child to their unusual nature. I ta ciekawość wyraź… 4.416666667 0.0 NaN
14 Nie możesz więc używać tych samych modeli, których używasz w Stanach Zjednoczonych, aby przyspieszyć rozwój. So you can not use the same mod… 4.25 0.0 NaN
15 Ponadto dochód generowany z tego węgla drzewnego wynosi 260 milionów dolarów. In addition the revenue generated from that charcoal is 260 mi… 4.583333333 0.0 NaN
16 Kiedy ludzie robią zdjęcia tym budynkom z tego kontekstu, wyglądają naprawdę dziwnie i zakładam, że mają one dużo więcej sensu, gdy są fotog… 4.166666667 0.0 NaN
17 Teraz, gdybyście zobaczyli zdjęcie tego, które zostało opublikowane w Architectural Record, nie pokazały one kontekstu, więc można by pomyśl… 4 0.0 NaN
18 A po tym, jak zawiedliśmy, po prostu zawodziłem. And after we failed I just kept failing. I gdy nam się nie udało dalej odnoszę porażki. 4.083333333 0.0 NaN
19 Chodzi mi o to, że to trochę banalna rzecz, ale to prawda, że ​​chcieli mieć centralne miejsce, w którym byłaby stołówka, gdzie przychodzili… 4.083333333 0.0 NaN
20 A budynek jest bardzo rzeźbiarski, gdy go obchodzisz. And the building is very sculptural as you walk around it. Budynek wygląda jak rzeźba … 4.083333333 0.0 NaN
21 Herman Miller wyznaje tę filozofię, że miejsce jest miejscem dla ludzi. And Herman Miller has this philosophy of having a place a people pla… 4.166666667 0.0 NaN
22 Właściwie to w zasadzie trzy kwadratowe pokoje z kilkoma świetlikami i innymi rzeczami. It is actually basically three square rooms with a c… 4 0.0 NaN
23 Rzecz po prawej stronie to wąż z zigguratu. The thing on the right is a snake form a ziggurat. To po prawej stronie to forma węża ziggurat. 4.666666667 0.345720784641941 NaN
24 Więc zacząłem robić te zabawne rzeczy. And so I started making these funny things. I tak zacząłem tworzyć te śmieszne rzeczy. 4.666666667 0.0 NaN
25 Po lewej stronie zobaczysz przetworzone wideo, w którym kamera uczyniła go niewidzialnym. And on the left side you will see the processed vi… 4.666666667 0.0 NaN
26 Jedna z historii, które opowiadał mi tak często, kiedy byłem małym chłopcem, dotyczyła pierwszego brytyjskiego testu bomby atomowej. And one… 4.5 0.0 NaN
27 A co gorsza, znacznie gorsze niż to, że moje poczucie własnej wartości w pewnym sensie wyparowało. And worse than that far worse than that m… 4.083333333 0.0 NaN
28 Pracowałem jako dyrektor biura Banku Światowego w Nairobi w Afryce Wschodniej. I used to work as the director of the World Bank office in Na… 4.833333333 0.3672056269893592 NaN
29 Tak, jest bardzo różny, nie, nie jest inny. Yeah it is very different no it is not different. Tak różnią się znacznie od siebie ale czy aż t… 4 0.0 NaN
30 Brak zarządzania w wielu obszarach w obszarze korupcji i niszczenia środowiska w obszarze wykorzystywania kobiet i dzieci w obszarze zmian k… 4.083333333 0.0 NaN
31 Więc to jedna z historii ropy naftowej, jest jej po prostu dużo. So that is one of the stories of oil there is just a lot of it. Reasumując … 3.916666667 0.0 NaN
32 Miałem tę firmę, którą spędziłbym 15 lat budując. Nazywa się Future, była to firma wydawnicza. I had this company that I would spent 15 year… 4 0.0 NaN
33 Pomyślałem, że to będzie bułka z masłem, ponieważ zawsze prowadzę wstępne rozmowy z tymi ludźmi przez może 10 lub 15 minut. And I thought th… 4.5 0.0 NaN
34 Więc ona i ja odbyliśmy wspaniałą rozmowę. So she and I had a delightful conversation. Więc ona i ja rozpoczęliśmy przemiłą konwersację. 4.833333333 0.4111336169005197 NaN
35 Powiedział, że my, południowcy, lubimy gładką powierzchnię, więc były chwile, kiedy po prostu nie chciał konfrontacji. He said We southerner… 4.416666667 0.25576360687094823 NaN
36 Odwożą ich do domu i chcą, aby zostali oświeceni, więc zabierają ich do Ben & amp Jerry to firma produkująca lody z własną polityką zagranic… 4.333333333 0.12241236136520368 NaN
37 To, co widzisz, to znaczna poprawa ich natychmiastowej pamięci o ich zdolności do zapamiętywania rzeczy po opóźnieniu ich zdolności kontrolo… 3.833333333 0.0 NaN
38 I to jest okres, w którym mózg ustawia w swojej pierwotnej formie swoją podstawową maszynerię przetwarzania. And that is the period in which… 4.25 0.0 NaN
39 W rzeczywistości wyolbrzymia ich odrębność reprezentacji w wielowymiarowych neuronalnych terminach reprezentacji. It actually exaggerates th… 3.5 0.0 NaN
40 Jeśli zawieje je wiatr, są jak chrząszcze uwięzione na ziemi. If the wind blows them over they are like beetles stuck there on the ground. J… 4 0.0 NaN

Compare with other submission