Metric	Score
Weighted-F1	61.46
Hyphens-F1	55.13
Comma-F1	64.57
Ellipsis-F1	100.00
Fullstop-F1	60.54
QMark-F1	67.19
Colon-F1	60.11
Semicolon-F1	0.00
Excl-F1	8.33

worst items

note: the gold standard is taken from the challenge

#	input	expected output	actual output	test-D Weighted-F1
1	wikinews187921 " ars ante portas " to cykl wystaw twórczości artystów którzy bezinteresownie uczestniczyli w zbiorowym przedsięwzięciu artys…	O O O O O O O O O B-COMMA O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP O O O B-KOLON O B-COMMA O B-COMMA O B-HYPHEN O O…	O O O O O O O B-COMMA O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP O O O B-KOLON O O O O O O O O O B-FULLSTOP O O O O O…	0.00
2	wikitalks0016311 " armia pakistańska wymordowała w delcie gangesu ok 1 1 5 miliona cywilów i dopuściła się bezprecedensowo straszliwej liczb…	O O O O O O O B-FULLSTOP B-HYPHEN B-COMMA B-HYPHEN O O O O O O O O B-FULLSTOP O O B-HYPHEN O O O O B-QMARK O B-KOLON O O O O O O O O B-KOLON…	O O O O O O B-FULLSTOP O O O O O O O O O O O B-FULLSTOP O B-FULLSTOP O O O O B-QMARK O B-KOLON O O O O O O O O B-KOLON O O O O O O O O O O O…	0.00
3	wikinews183820 " kościół zawsze nalegał i przypominał że to jest obowiązek moralny wzięcia udziału w wyborach natomiast nie powinien się wyp…	O O O O O B-COMMA O O O O O O O O B-FULLSTOP O O O O O O O B-COMMA O O O O B-COMMA O O O O O B-HYPHEN O O O O O O O O B-FULLSTOP O O O O B-H…	O O O O B-COMMA O O O O O O O O B-COMMA O O O O O O O O O O O O B-COMMA O O O O B-HYPHEN O O O O O O O O B-FULLSTOP O O O O O B-FULLSTOP O O…	0.00
4	wikinews227876 " uroczyście ogłaszam poniedziałek dniem radości narodowej awans do mistrzostw europy 2008 to historyczny moment " powiedział…	O O O O O O B-FULLSTOP O O O O O O O O B-HYPHEN O O O O O O B-FULLSTOP O O O O O O O O O O O O B-FULLSTOP O O B-COMMA O O O O B-FULLSTOP O O…	O O O O O B-HYPHEN O O O O O O O B-HYPHEN O O O O O O B-FULLSTOP O O O O O O O O O O O O B-FULLSTOP O O B-COMMA O O O O B-COMMA O O O O O B-…	0.00
5	wikinews228950 " niech cba poda od kogo się dowiedziało że r i k chodzą po warmii i mazurach i oferują załatwianie jakichś spraw pan k na pe…	O O O B-COMMA O O O B-COMMA O B-FULLSTOP O B-FULLSTOP O O O O O O O O O B-FULLSTOP O B-FULLSTOP O O O B-FULLSTOP O O O O O O B-COMMA O O O B…	O O O O O O B-COMMA O B-FULLSTOP O B-FULLSTOP O O O O O O O O O B-FULLSTOP O O O O O B-COMMA O O O O O O B-COMMA O O B-HYPHEN O O O O O O O …	0.00
6	wikinews196430 " lechu wałęso jest pan wielkim symbolem polski europy i świata który wierzy w wolność i odrzuca wszelkie formy dyktatury " m…	O O B-COMMA O O O O B-COMMA O O B-COMMA O O O O O O O O O O O O O O O B-FULLSTOP O O O O O B-COMMA O O O O O O B-FULLSTOP O O O O O B-FULLST…	O B-COMMA O O O O B-COMMA O O B-COMMA O O O O O O O O B-HYPHEN O O O O O B-COMMA O O O O O O O O O O O O B-FULLSTOP O O O O O B-FULLSTOP O O…	0.00
7	wikinews185273 " european passion play 2008 " pod ta nazwą symfoniczno metalowy zespół z finlandii nightwish rozpocznie swoją trasę koncerto…	O O O O O O O O O B-HYPHEN O O O O O O O O B-FULLSTOP O O O B-FULLSTOP O O O O O O O O O O B-FULLSTOP O O O O O O B-HYPHEN O O B-COMMA O O O…	O O O O O O O B-HYPHEN O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O B-FULLSTOP O O O O O O B-HYPHEN O O B-COMMA O O O O O O B-COMM…	0.00
8	wikinews227887 " wizyta premiera donalda tuska w niemczech jest nieprzygotowana już wiemy że w sprawie muzeum ii wojny światowej premier wró…	O O O O O O O O B-FULLSTOP O B-COMMA O O O O O O O O O O O B-FULLSTOP O O O O B-COMMA O B-COMMA O O O O O O O B-FULLSTOP O O O B-FULLSTOP O …	O O O O O O O B-FULLSTOP O B-COMMA O O O O O O O O O O O O O O O O O O B-COMMA O O O O O O O B-FULLSTOP O O O B-COMMA O O O O O O O O B-COMM…	0.00
9	wikinews189425 " discovery " wylądował na bieżni numer 33 w kennedy space center na florydzie dziś o godzinie 13 08 gmt kończąc misję sts 13…	O O O O O O O O O O O O O O O O O B-KOLON O B-COMMA O O B-HYPHEN O O O O O O O O B-COMMA O O O O O O B-COMMA O O O O O O O O O O B-FULLSTOP …	O O O O O O O O O O O O O O O B-KOLON O B-COMMA O O B-HYPHEN O O O O O O O O B-COMMA O O O O O O B-COMMA O O O O O O O O O O B-FULLSTOP O O …	2.04
10	wikinews196417 " dlaczego ścigano wachowskiego a szczególnie dlaczego robiono rewizje wachowskiemu dlatego że chciano znaleźć oryginalne]] p…	O O O B-COMMA O O O O O B-FULLSTOP B-COMMA O O O B-COMMA O B-COMMA O O O O O O B-HYPHEN O O O O O B-COMMA O O O O O B-COMMA O O B-FULLSTOP O…	O O B-COMMA O O O O O O B-COMMA O O O O O O O O O O O B-HYPHEN O O O O O O O O O O O B-COMMA O O B-FULLSTOP O O O O O O O O O O B-HYPHEN O B…	3.28
11	wikinews186513 " poczuj się jak gwiazda " pod tym hasłem będzie przebiegał kolejny już dzień otwarty telewizji polskiej podczas spotkania z …	O O O O O B-HYPHEN O O O O O O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP O O O B-FULLSTOP O O O O B-FULLSTOP O O O O O O O B-COMMA O O B…	O O O B-HYPHEN O O O O O O O O O O B-COMMA O O O O O O O O O O O O B-FULLSTOP O O O O B-COMMA O O O O O O O B-COMMA O O B-COMMA O O O O B-CO…	3.85
12	wikitalks001598 co za bzdura z tym że saiyanom nie rosły włosy może na głowie ale nie dotyczy to zarostu połowa saiyan miała zarost chyba ni…	O O O O O O O O O B-QMARK O O B-COMMA O O O O B-XCL O O O B-COMMA O O O O O O O B-QMARK O O O O O O O O O B-XCL O O O B-XCL O O O O O B-COMM…	O O O O O O O O O O O O O O O O O B-FULLSTOP O O O B-COMMA O O O O O O O O O O O O O O O O O O O O O B-COMMA O O O O O O O O B-COMMA O O O O…	29.19
13	wikinews189958 w minionym tygodniu rozpoczęła się w chinach budowa bloku elektrowni jądrowej ningde 4 na dwóch innych placach budowy reaktor…	O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O B-FULLSTOP O O O O O O B-HYPHEN …	O O O O O O O O O O O O B-COMMA O O O O O O O O O B-FULLSTOP O O O O O O B-COMMA O O O O O O O O O O O O B-FULLSTOP O O B-FULLSTOP O O O O O…	34.05
14	wikitalks0016312 od kiedy death metal i black metal to odmiana heavy metalu od zgoła 20 lat 1 motorhead judas priest venom death death metal…	O O O O O O O O O O B-QMARK O O O B-FULLSTOP O B-COMMA O B-HYPHEN O B-HYPHEN O O O B-COMMA O B-HYPHEN B-COMMA B-HYPHEN O O O O O O O O O O O…	O O O O O O O O O O O O O O B-QMARK B-FULLSTOP O O O B-HYPHEN B-HYPHEN O O B-FULLSTOP O O O B-HYPHEN B-HYPHEN O O O O O O O O O O O O O B-QM…	36.74
15	wikitalks003512 dlaczego data wejścia w życie konstytucji rózni się od tej podanej na stronie angielskiej wersji wikipedi xmikolajx poprawka…	O O O O O O O O O O O O O O O B-QMARK O O O O O O O O O B-KOLON O O O O O O B-COMMA O O O B-COMMA O O O O O O O B-COMMA O O O B-COMMA O O O …	O O O O O O O O O O O O O O O B-QMARK O O O O O O O O O B-KOLON O B-HYPHEN O O O O O B-HYPHEN O O O O O B-FULLSTOP O O O O O B-HYPHEN O O O …	39.80
16	wikinews218164 po wyborach do rosyjskiej dumy 10 grudnia odbyła się kilkudziesięciotysięczna manifestacja w moskwie a także inne kilkutysięc…	O O O O B-COMMA O B-COMMA O O O O O B-COMMA O O B-COMMA O O O O O O B-FULLSTOP O O B-KOLON O B-XCL B-COMMA O O O B-XCL O O O O O O O B-XCL B…	O O O O B-FULLSTOP O O O O O O O B-COMMA O O O O O O O O O B-FULLSTOP O O O O O B-COMMA O O O O O O O O O O O O B-COMMA B-COMMA O O O O O O …	39.92
17	wikinews196680 28 lipca odbędą się w krakowie w hotelu galaxy targi kariera programisty targi organizowane są cyklicznie przez firmę careerc…	O O O O O B-COMMA O O B-COMMA O O B-FULLSTOP O O O O O O O O O O B-FULLSTOP O O O B-COMMA O O O O O B-COMMA O O O O O O B-FULLSTOP O O B-KOL…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-COMMA O O O O O O O O O B-KOLON O O O O O O O O O O O O O O O O O O O O O …	40.18
18	wikitalks008601 a co z wyrażeniem " oblucja " " w kościele rzymskokatolickim " dlaczego na wstępie tego artykułu jest napisane że ablucja to…	O O O O O O B-QMARK O O O O O O O O O O O B-COMMA O B-COMMA O O O O O O O B-QMARK O O O O O B-COMMA O O O O O B-FULLSTOP O O O O O O O O O O…	O O O O O O O O O O O B-QMARK O O O O O O B-COMMA O O O O O O O O O B-QMARK O O O O O B-COMMA O O O O O B-HYPHEN O O O O O O O O O O O O O O…	40.59
19	wikinews186672 o niespełna cztery tysiące złotych zmniejszą się emerytury byłych generałów służb bezpieczeństwa do przygotowanego przez po p…	O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O B-FULLSTOP O O O O B-QMARK O O O O O O O O O B-FULLSTO…	O O O O O O O O O O O B-HYPHEN O O O O O O O O O O O O O O B-COMMA O O O O O O O B-FULLSTOP O O O O B-QMARK O O O O O O O O O B-HYPHEN O O O…	42.44
20	wikitalks0016801 o co chodzi z tym " tramwaje w polsce " to może od razu ramka z " przejściami granicznymi w polsce " albo " puby w polsce "…	O O O O B-KOLON O O O O B-QMARK O O O O O O O O O O O B-COMMA O O O O O B-QMARK B-FULLSTOP B-FULLSTOP O O B-COMMA O O O O B-FULLSTOP O B-KOL…	O O O O O O O O O B-COMMA O O O O O O O O O O O O O O O O O B-QMARK O B-FULLSTOP O O O O O O O B-FULLSTOP O B-KOLON B-COMMA O O O O O O O O …	45.31
21	wikinews188298 armia pakistańska rozpoczęła ponad tydzień temu operację w górskich rejonach waziristanu w nalotach lotnictwa pakistanu i usa…	O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O B-COMMA O O O O O B-FULLSTOP O O O B-COMMA O O O O O O O O O O …	O O O O O O O O O O B-COMMA O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O B-COMMA O O O O O O O O O O O O O O O B-FULLSTOP O O O O …	45.42
22	wikitalks009377 mam wątpliwość czy nam potrzeba linków zewnetrznych w obcych językach angielski jeszcze ujdzie ale inne czy można tu wypraco…	O O O O O O O O O B-QMARK O O B-COMMA O B-QMARK O O O O O B-QMARK O B-COMMA O O O O O O O O O O O O O O O O B-HYPHEN O O O O O B-FULLSTOP O …	O O O O O O O O O B-HYPHEN O O B-COMMA O B-HYPHEN O O O O O B-QMARK O B-COMMA O O O O O O O O O O O O O O O O B-HYPHEN O O O O O B-FULLSTOP …	45.94
23	wikitalks0014941 skąd informacja że krzyż i tablica były umieszczone nielegalnie czy autor edycji mógłby podać źródło czy liczy się dodanie …	O B-COMMA O O O O O O B-QMARK O O O O O B-QMARK O O O B-COMMA O O B-QMARK O O O B-FULLSTOP O B-COMMA O O O B-HYPHEN O B-COMMA O B-QMARK O O …	O B-COMMA O O O O O O B-QMARK O O O O O B-QMARK O O O O O O B-QMARK O O O B-COMMA B-ELLIPSIS O O O O O O B-COMMA O B-QMARK O O O O O B-COMMA…	46.86
24	wikinews180020 polska edycja wikinews wolnego źródła informacji opartego o technologię wiki ma już rok na początku 2005 roku po dyskusji na …	O O B-HYPHEN O O O O O O B-HYPHEN O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O B-COMMA O O O O O O O O O B-FULLSTOP O O O O B-FULLST…	O O B-HYPHEN O O O O O O B-COMMA O O B-COMMA O O O O O O O O O O O O O O O O O O O B-COMMA O O O O O O O O O B-FULLSTOP O O O O B-COMMA O O …	46.90
25	wikinews231413 między 15 a 18 lipca 2007 roku lech kaczyński wraz z małżonką odbył podróż do stanów zjednoczonych w pierwszym dniu wizyty ma…	O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O B-FULLSTOP O O O O B-KOLON O O O O B-HYPHEN O B-HYPHEN O O O O O B-FULL…	O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O B-HYPHEN O O O O O O O O O O O O O O O O O O B-KOLO…	47.30
26	wikitalks007788 link do " archiwalna strona wp pl z 12 lutego 1998 roku " nie dzial w chwili testowania dostep 2006 05 31 teraz dziala herr …	O O O O O B-FULLSTOP O O O O O O O O O O O B-HYPHEN B-KOLON B-HYPHEN O B-HYPHEN O B-FULLSTOP O O O O O O O O O O O O O O B-FULLSTOP O O O O …	O O O O O B-FULLSTOP O O O O O O O O O O O O O O B-KOLON O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-QMARK O O …	48.19
27	wikitalks005743 boże widzisz takie hasło i nie grzmisz gdzie moderator taki tekst nie powinien się gdziekolwiek ukazywać jest straszny pod k…	O O O O O O B-QMARK O B-QMARK O O O O O O B-COMMA O O O O B-HYPHEN O O O B-COMMA O O O B-COMMA O O O O B-FULLSTOP B-XCL O B-QMARK O B-COMMA …	O O O O O O B-HYPHEN O B-QMARK O O O O O O B-COMMA O O O O B-COMMA O O O B-COMMA O O O O O O O O B-FULLSTOP O O O O O O O B-COMMA O O O O O …	48.74
28	wikitalks0016538 polactwo zbiorem felietonów klisu właśnie toż to traktat polityczny sugeruję korektę mendel poprawiłem a j raz nie zerwał o…	O O B-HYPHEN O B-XCL O O O B-FULLSTOP O B-FULLSTOP O B-FULLSTOP B-FULLSTOP B-FULLSTOP O O O O O O O O B-HYPHEN O O O O O O B-HYPHEN O O O O …	O O O O B-ELLIPSIS O O O B-ELLIPSIS O O O O O B-FULLSTOP O O O O O B-HYPHEN O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O …	48.88
29	wikitalks0014582 kolego gregul sprawa jest prosta pojęcie stateczności stabilności dotyczy nie tylko układów sutomatycznej regulacji ale tak…	O B-COMMA O O B-KOLON O O O O O O O O B-COMMA O O O B-FULLSTOP O O O O O B-QMARK O O O O O O O O O O B-COMMA O O O O O O O O B-QMARK O O B-H…	O O O O B-HYPHEN O O O O O O O O B-COMMA O O O O O O O O O B-FULLSTOP O O O O O O O O O O B-COMMA O O O O O O O O B-QMARK O O O O O O O O O …	49.06
30	wikinews180419 w poniedziałek w kolonii w meczu 1 8 finału szwajcaria została wyeliminowana z turnieju przez ukrainę w konkursie rzutów karn…	O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP O O O O O B-HYPHEN O O O O O O O O B-FU…	O O O O O O O O O O O O O O O O O O O O O O O O O O O B-COMMA O O O O O O O O B-COMMA O O O O O B-HYPHEN O O O O O O O O B-HYPHEN O B-FULLST…	49.21
31	wikinews180554 na 5 5 km prologu w düsseldorfie zawodników przywitała nie najlepsza pogoda czasami nawet utrudniała ona bardzo jazdę specjal…	O B-COMMA O O O O O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP O O O O O O B-COMMA O O O O O O B-FULLSTOP O O O B-FULLSTOP O O O O O O O …	O B-HYPHEN B-HYPHEN O O O O O O O O B-COMMA O O O O O O O O B-FULLSTOP O O O O O O B-COMMA O O O O O O B-COMMA O O O B-FULLSTOP O O O O O O …	49.31
32	wikinews229330 28 i 29 marca w zakopanem odbyły się zawody w slalomie kobiet i mężczyzn w ramach tradycyjnego memoriału bronisława czecha i …	O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O B-COMMA B-COMMA B-COMMA B-COMMA O O O B-FULLSTOP O O O …	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-COMMA B-COMMA B-COMMA B-COMMA O O O B-FULLSTOP O O O O O O O O…	50.00
33	wikinews230021 francuzka amelie mauresmo czwarta rakieta świata przegrała w pierwszym swoim meczu turnieju tenisistek w rzymie jej pogromczy…	O O B-COMMA O O B-COMMA O O O O O O O O B-FULLSTOP O O O O O O B-COMMA O O B-FULLSTOP O B-KOLON O O O O O O O O O O O O O B-FULLSTOP O O O O…	O O B-COMMA O O B-COMMA O O O O O O O O B-COMMA O O O O O O B-COMMA O O B-FULLSTOP O O O O O O O B-FULLSTOP O O O O O O O B-FULLSTOP O O O B…	50.38
34	wikinews230864 prezydent francji jacques chirac opuścił dziś wojskową klinikę val de grace w której spędził tydzień czasu powodem pobytu był…	O O O O O O O O B-HYPHEN O B-HYPHEN O O O O B-FULLSTOP O O O O O O O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP B-HYPHEN O O O O O O O B-…	O O O O O O O O O O B-COMMA O O O O B-FULLSTOP O O O O O O O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP B-HYPHEN O O O O O O O O B-COMMA …	50.75
35	wikinews196753 wydano peazip 4 7 rozbudowany program do kompresji danych i zarządzania archiwami peazip obsługuje większość współczesnych fo…	O O O B-COMMA O O O O O O O B-FULLSTOP O O O O O O O O O B-FULLSTOP B-FULLSTOP O O O O O O B-COMMA O O O B-COMMA O O O O B-COMMA O O O B-FUL…	O O O B-HYPHEN O O O O O O O B-FULLSTOP O O O O O O O O O O B-FULLSTOP O O O O O O B-COMMA O O O B-COMMA O O O O O O O O B-COMMA O O O O O O…	50.82
36	wikinews232282 nasa ogłosiła konkurs " scientist for a day " skierowany do uczniów wszystkich typów szkół na całym świecie zadaniem konkurso…	O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O B-COMMA O B-COMMA O B-COMMA B-COMMA O O B-FULLSTOP O O O O B-COMMA O O B-COMMA O O O O …	O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O B-COMMA O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O O B-CO…	50.93
37	wikinews239133 nasa ogłosiła w poniedziałek swoje plany dotyczące powrotu ludzi na księżyc głównym założeniem jest wysłanie czteroosobowej z…	O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O B-FULLSTOP O O O O O O B-COMMA O O O O O O O O O O O O O…	O O O O O O O O O O B-HYPHEN O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O B-COMMA O O O O O O B-COMMA O O O O O O B-COMMA O O O O O …	51.10
38	wikitalks0012041 ciekawe wyrażenie arytmetyczne tylko że odkąd to unia pracy jest centrolewicowa czyżby środek ciężkości przesunąwszy był zr…	O O B-COMMA B-COMMA O O O O O O B-QMARK O O O O O O O O O O B-COMMA O B-QMARK O O O O O O O O B-COMMA O O O B-COMMA O O O O O B-COMMA O O O …	O O B-COMMA O O O O O O O B-COMMA O O O O O O O O O O B-COMMA O B-QMARK O O O O O O O O B-COMMA O O O B-COMMA O O O O O O O O O B-COMMA O O …	51.56
39	wikitalks004346 w odniesieniu do ich surowego życia może coś przeoczyłem ale nie widzę 'fantazyjności' nie szukając daleko finezyjne jak to …	O O O O O B-QMARK O O B-COMMA O O O B-FULLSTOP O O B-HYPHEN B-SEMICOLON O O B-QMARK O O O O O O O O B-XCL O O O O O O O O O B-COMMA O O O O …	O O O O O B-FULLSTOP O O B-COMMA O O O O O O O B-HYPHEN O O B-QMARK O O O O O O O O O O O O O O O O O O B-HYPHEN O O O O O O O O O O O O O O…	51.73
40	wikinews227317 drugiego maja wchodzi w życie rozporządzenie ministra transportu i budownictwa z dnia 20 kwietnia zmieniające rozporządzenie …	O O O O O O O O O O O O O O O O O O O O O B-COMMA O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP …	O O O O O O O O O O O O O O O O O O O O O B-COMMA O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O O B-COMMA O O O B-FUL…	52.06