6ec3d5069b0269421e319762d5b2f53c6f0de7c1
BLEU baseline baseline
- challenge
- Evaluation of translation quality assessment metrics (nonblind)
- submitter
- Filip Graliński
- submitted
- 2021-08-21 16:51:28.66939 UTC
- file basename
- out
test-A / c29889b9f060c8555caeee51ed7d169c9d6e64d6
| Metric | Score |
|---|---|
| Pearson | 0.2737 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-B Pearson |
|---|---|---|---|---|
| 1 | Nie wiem, czy nadal możesz zobaczyć czerwoną linię tutaj i na ramieniu. I don not know if you can still see the red line here and up the arm… | 4.666666667 | 0.0 | NaN |
| 2 | A jednak wciąż jest jeden na ciemnym tle, a drugi na jasnym. And yet there is still one on a dark surround and one on a light surround. Ale … | 4.583333333 | 0.0 | NaN |
| 3 | I nie zawsze ze sobą współpracują. Podoba mi się teoria Freuda, że większość z nich wyklucza się nawzajem. And they don not always work to… | 4.666666667 | 0.24623953025272616 | NaN |
| 4 | Tak więc w drugiej wersji jest 100 miliardów lub 1000 miliardów ludzi na Ziemi, ale wszyscy oni są przechowywani na twardych dyskach, dyskie… | 4.5 | 0.2908651942345128 | NaN |
| 5 | Teraz pamiętaj, że ma iść do niebieskich kwiatów. Now remember she is supposed to be going to the blue flowers. Teraz pamiętajcie że ona mi… | 5 | 0.3376459109063278 | NaN |
| 6 | Tak więc w życiu i przy cięciu papieru wszystko jest ze sobą powiązane. So in life and in papercutting everything is connected. W życiu i wy… | 4.75 | 0.0 | NaN |
| 7 | Sugeruje to, że nikt nie jest zewnętrznym obserwatorem natury. What this suggests is that no one is an outside observer of nature Okay. To s… | 4.583333333 | 0.6496350258549114 | NaN |
| 8 | Okej, więc są fizycznie takie same. Okay So they are physically the same. Okej. Więc fizycznie są takie same. | 4.833333333 | 0.0 | NaN |
| 9 | Więc jedno, co możemy zrobić, to żyć dłużej. So one thing we can do is live longer. Możemy też żyć dłużej. | 4.666666667 | 0.0 | NaN |
| 10 | Więc mój proces jest bardzo prosty. So my process is very straightforward. Mój proces jest więc dość prosty. | 4.416666667 | 0.0 | NaN |
| 11 | Przewierciliśmy sto metrów pływającego szelfu lodowego, następnie 900 metrów wody, a następnie 1300 metrów w dno morskie. We drilled through… | 4.333333333 | 0.0 | NaN |
| 12 | A teraz pojawia się teoria strun i mówi, że tak, elektromagnetyzm mechaniki kwantowej grawitacji razem w jednym pakiecie, ale tylko wtedy, g… | 4.333333333 | 0.0 | NaN |
| 13 | A teraz wiemy, że w naszej niedawnej przeszłości stopił się i ponownie uformował, a poziom morza podnosił się i opadał o sześć metrów na raz… | 4.583333333 | 0.0 | NaN |
| 14 | Rozważ to Jeśli spojrzysz na instrument, waltornia zauważysz, że kształt instrumentu ma wpływ na wibracje strumieni powietrza. Consider this… | 4 | 0.0 | NaN |
| 15 | Trzaskujesz je razem i jeśli mamy rację, część energii tego zderzenia trafi do gruzu, który odleci do tych dodatkowych wymiarów. You slam th… | 4.083333333 | 0.0 | NaN |
| 16 | W każdym razie jest to zła wiadomość dla koralowców z Wysp Galapagos. Either case it is bad news for the corals of the Galapagos Islands. W … | 4.5 | 0.0 | NaN |
| 17 | Mógłbyś wygłosić im długie przemówienie polityczne, którego nadal by nie zrozumieli. You could give them a long political speech they would … | 4.5 | 0.0 | NaN |
| 18 | Ponieważ w przeciwnym razie może stać się dość klaustrofobiczna. Because otherwise it can get quite claustrophobic. bo inaczej robi się dość… | 4.583333333 | 0.0 | NaN |
| 19 | Nazwaliśmy ten ląd Pangea. And we called that landmass Pangea. Nazywamy ten ląd Pangeą. | 4.833333333 | 0.0 | NaN |
| 20 | I wiesz co. And you know what. I wiecie co? | 4.666666667 | 0.0 | NaN |
| 21 | I oczywiście przyniesie to wspaniałe rzeczy. And of course it will bring great things. Przyniesie wielkie owoce. | 4.5 | 0.0 | NaN |
| 22 | Ale ponieważ tak wiele problemów w edukacji dotyczy nie tylko szkoły, ale także rodziny i społeczności, to, czego potrzebujesz, jest zdecydo… | 3.833333333 | 0.0 | NaN |
| 23 | Byłem też nazywany egipskim Libańczykiem i syryjskim Amerykaninem z perskim imieniem - kryzys pokojowy na Bliskim Wschodzie. And I have also… | 4.25 | 0.0 | NaN |
| 24 | możemy cofnąć się i zmienić nasz związek, ponownie wizja naszego stosunku do ludzi z przeszłości i wydarzeń, ścieżki neuronowe mogą się zmie… | 4.083333333 | 0.0 | NaN |
| 25 | Kiedy o tym pisałem, natknąłem się na książkę Viktora Frankla pt. Człowiek szuka sensu. Now while I was writing about this I came upon a boo… | 4.666666667 | 0.3161487584488943 | NaN |
| 26 | Nie mieliśmy na to funduszy. We had no funding for it. Nie mieliśmy żadnego wsparcia finansowego. | 4.833333333 | 0.0 | NaN |
| 27 | Współpracownik, kiedy umarł, było mi naprawdę smutno. Collaborator I felt really sad when he died. Współpracownik Czułem prawdziwy smutek ki… | 4.25 | 0.0 | NaN |
| 28 | Wspiera także dzieci z klasy robotniczej chodzące do indyjskich szkół. And it also supports working class kids going into Indian schools. To… | 4.583333333 | 0.0 | NaN |
| 29 | Po prostu chciałem być w centrum. I just wanted to be in the center. Chciałam być w centrum wydarzeń. | 4.666666667 | 0.0 | NaN |
| 30 | Być może nadal cierpimy z powodu psychicznego bólu i rany. Perhaps we still suffer from a psychic pain a wound. Być może nadal cierpimy z po… | 4.833333333 | 0.5814307369682193 | NaN |
| 31 | Ale w przeciwieństwie do mojego złego bliźniaka, który pożąda dominacji nad światem, moje motywy nie są złowieszcze. But in contrast to my e… | 4.583333333 | 0.0 | NaN |
| 32 | Po prawej stronie okrążamy klif. We are coming around a cliff here on the right. Lecimy koło klifu. | 4.5 | 0.0 | NaN |
| 33 | Oczywiście racja. Obvious right. To oczywiste. | 4.333333333 | 0.0 | NaN |
| 34 | To była świetna zabawa. This has been a lot of fun. To mnóstwo frajdy. | 4.666666667 | 0.0 | NaN |
| 35 | Dlatego naprawdę zachęcam cię, bez względu na twoją stawkę w edukacji, niezależnie od tego, czy jesteś twórcą polityki dla rodziców i nauczy… | 4 | 0.0 | NaN |
| 36 | Tak nazywa się ikona naszego robota Jasona. This is an icon of our robot Jason it is called. gdzie widać naszego robota Jasona. | 4.833333333 | 0.0 | NaN |
| 37 | Ale poza głębokimi przywilejami federalnymi, małżonkowie zarabiają więcej pieniędzy. But beyond the profound federal perks married people ma… | 4.333333333 | 0.0 | NaN |
| 38 | Istnieje niechęć do zadań tekstowych, która dotyczy 99 procent moich uczniów. There is an aversion to word problems which describes 99 perce… | 4.5 | 0.0 | NaN |
| 39 | BL Biały materiał to rodzaj bakterii, która rozwija się w temperaturze 180 stopni C. BL The white material is a type of bacteria that thrive… | 4.666666667 | 0.0 | NaN |
| 40 | Więc znowu jednym z wielkich rozwiązań jest przeniesienie przez Światową Organizację Handlu dotacji na zrównoważone praktyki. So again one o… | 4.083333333 | 0.0 | NaN |
dev-0 / 28ef1e5fd72446c143846b1de478c7cd6876617c
| Metric | Score |
|---|---|
| Pearson | 0.3149 |
worst items
note: the gold standard is taken from the submission itself, not from the challenge data!| # | input | expected output | actual output | test-B Pearson |
|---|---|---|---|---|
| 1 | Zacząłem więc swoje życie jako architekt lub jako architekt i zawsze byłem zainteresowany społecznie odpowiedzialnym projektowaniem i tym, j… | 3.833333333 | 0.0 | NaN |
| 2 | Myślisz, że szczegół jest obecny, ale go nie ma. You think the detail is there but it isn not there. Myślisz że szczegół jest ale go tam nie… | 4.166666667 | 0.0 | NaN |
| 3 | Przypomina mu to słowo pudel barokowy barokowy Suzanne R, który wyrusza na wyścigi. That reminds him of the word baroque barrack bark poodle… | 3.25 | 0.0 | NaN |
| 4 | I sprawił, że igła wyglądała, jakby Hulk ją złamał. And made a needle look like the Hulk is broken it. tak aby wydawało się że to Hulk ją zł… | 4.666666667 | 0.0 | NaN |
| 5 | I mówi: Wydaje się, że idealnym argumentem dla większości filozofów jest to, że dajesz słuchaczom przesłanki, a następnie dajesz im wnioski … | 3.916666667 | 0.0 | NaN |
| 6 | Jesteśmy u progu największego odkrycia, jakie kiedykolwiek znała ludzkość. We are on the verge of the greatest exploration that the human ra… | 4.416666667 | 0.0 | NaN |
| 7 | Ale inni dorośli mówią niezwykle bolesne rzeczy. But other adults say incredibly painful things. Ale inni dorośli wypowiadają niezwykle bole… | 4.833333333 | 0.0 | NaN |
| 8 | To dobra wiadomość. That is the good news. To dobra wiadomość. | 5 | 1.0 | NaN |
| 9 | Nasza siedziba znajduje się na Florydzie. We are based down in Florida. Jesteśmy na Florydzie. | 4.666666667 | 0.0 | NaN |
| 10 | Nazywa się je bateriami jądrowymi. They are referred to as nuclear batteries. Mówi się o nich jako jądrowych bateriach. | 4.333333333 | 0.0 | NaN |
| 11 | Szybki moment dla projektantów na widowni. Quick moment for the designers in the audience. Chwila dla projektantów wśród publiczności. | 4.416666667 | 0.0 | NaN |
| 12 | Dysmorfofobia to skrajna wersja tego, że nie postrzegamy siebie tak, jak widzą nas inni. Dysmorphophobia is an extreme version of the fact t… | 4.75 | 0.2668064899634279 | NaN |
| 13 | A to oczywiście ostrzega dziecko o ich niezwykłej naturze. And that obviously alerts the child to their unusual nature. I ta ciekawość wyraź… | 4.416666667 | 0.0 | NaN |
| 14 | Nie możesz więc używać tych samych modeli, których używasz w Stanach Zjednoczonych, aby przyspieszyć rozwój. So you can not use the same mod… | 4.25 | 0.0 | NaN |
| 15 | Ponadto dochód generowany z tego węgla drzewnego wynosi 260 milionów dolarów. In addition the revenue generated from that charcoal is 260 mi… | 4.583333333 | 0.0 | NaN |
| 16 | Kiedy ludzie robią zdjęcia tym budynkom z tego kontekstu, wyglądają naprawdę dziwnie i zakładam, że mają one dużo więcej sensu, gdy są fotog… | 4.166666667 | 0.0 | NaN |
| 17 | Teraz, gdybyście zobaczyli zdjęcie tego, które zostało opublikowane w Architectural Record, nie pokazały one kontekstu, więc można by pomyśl… | 4 | 0.0 | NaN |
| 18 | A po tym, jak zawiedliśmy, po prostu zawodziłem. And after we failed I just kept failing. I gdy nam się nie udało dalej odnoszę porażki. | 4.083333333 | 0.0 | NaN |
| 19 | Chodzi mi o to, że to trochę banalna rzecz, ale to prawda, że chcieli mieć centralne miejsce, w którym byłaby stołówka, gdzie przychodzili… | 4.083333333 | 0.0 | NaN |
| 20 | A budynek jest bardzo rzeźbiarski, gdy go obchodzisz. And the building is very sculptural as you walk around it. Budynek wygląda jak rzeźba … | 4.083333333 | 0.0 | NaN |
| 21 | Herman Miller wyznaje tę filozofię, że miejsce jest miejscem dla ludzi. And Herman Miller has this philosophy of having a place a people pla… | 4.166666667 | 0.0 | NaN |
| 22 | Właściwie to w zasadzie trzy kwadratowe pokoje z kilkoma świetlikami i innymi rzeczami. It is actually basically three square rooms with a c… | 4 | 0.0 | NaN |
| 23 | Rzecz po prawej stronie to wąż z zigguratu. The thing on the right is a snake form a ziggurat. To po prawej stronie to forma węża ziggurat. | 4.666666667 | 0.345720784641941 | NaN |
| 24 | Więc zacząłem robić te zabawne rzeczy. And so I started making these funny things. I tak zacząłem tworzyć te śmieszne rzeczy. | 4.666666667 | 0.0 | NaN |
| 25 | Po lewej stronie zobaczysz przetworzone wideo, w którym kamera uczyniła go niewidzialnym. And on the left side you will see the processed vi… | 4.666666667 | 0.0 | NaN |
| 26 | Jedna z historii, które opowiadał mi tak często, kiedy byłem małym chłopcem, dotyczyła pierwszego brytyjskiego testu bomby atomowej. And one… | 4.5 | 0.0 | NaN |
| 27 | A co gorsza, znacznie gorsze niż to, że moje poczucie własnej wartości w pewnym sensie wyparowało. And worse than that far worse than that m… | 4.083333333 | 0.0 | NaN |
| 28 | Pracowałem jako dyrektor biura Banku Światowego w Nairobi w Afryce Wschodniej. I used to work as the director of the World Bank office in Na… | 4.833333333 | 0.3672056269893592 | NaN |
| 29 | Tak, jest bardzo różny, nie, nie jest inny. Yeah it is very different no it is not different. Tak różnią się znacznie od siebie ale czy aż t… | 4 | 0.0 | NaN |
| 30 | Brak zarządzania w wielu obszarach w obszarze korupcji i niszczenia środowiska w obszarze wykorzystywania kobiet i dzieci w obszarze zmian k… | 4.083333333 | 0.0 | NaN |
| 31 | Więc to jedna z historii ropy naftowej, jest jej po prostu dużo. So that is one of the stories of oil there is just a lot of it. Reasumując … | 3.916666667 | 0.0 | NaN |
| 32 | Miałem tę firmę, którą spędziłbym 15 lat budując. Nazywa się Future, była to firma wydawnicza. I had this company that I would spent 15 year… | 4 | 0.0 | NaN |
| 33 | Pomyślałem, że to będzie bułka z masłem, ponieważ zawsze prowadzę wstępne rozmowy z tymi ludźmi przez może 10 lub 15 minut. And I thought th… | 4.5 | 0.0 | NaN |
| 34 | Więc ona i ja odbyliśmy wspaniałą rozmowę. So she and I had a delightful conversation. Więc ona i ja rozpoczęliśmy przemiłą konwersację. | 4.833333333 | 0.4111336169005197 | NaN |
| 35 | Powiedział, że my, południowcy, lubimy gładką powierzchnię, więc były chwile, kiedy po prostu nie chciał konfrontacji. He said We southerner… | 4.416666667 | 0.25576360687094823 | NaN |
| 36 | Odwożą ich do domu i chcą, aby zostali oświeceni, więc zabierają ich do Ben & amp Jerry to firma produkująca lody z własną polityką zagranic… | 4.333333333 | 0.12241236136520368 | NaN |
| 37 | To, co widzisz, to znaczna poprawa ich natychmiastowej pamięci o ich zdolności do zapamiętywania rzeczy po opóźnieniu ich zdolności kontrolo… | 3.833333333 | 0.0 | NaN |
| 38 | I to jest okres, w którym mózg ustawia w swojej pierwotnej formie swoją podstawową maszynerię przetwarzania. And that is the period in which… | 4.25 | 0.0 | NaN |
| 39 | W rzeczywistości wyolbrzymia ich odrębność reprezentacji w wielowymiarowych neuronalnych terminach reprezentacji. It actually exaggerates th… | 3.5 | 0.0 | NaN |
| 40 | Jeśli zawieje je wiatr, są jak chrząszcze uwięzione na ziemi. If the wind blows them over they are like beetles stuck there on the ground. J… | 4 | 0.0 | NaN |