16c00bcb8c5f08d31f329e7fc27ea064de155242
Simple baseline for testing baseline

 

challenge
Punctuation prediction from conversational language
submitter
Filip Graliński
submitted
2023-03-01 10:14:08.575197 UTC
file basename
out

test-B / 70a12868f9f3b83ebf2fe4af2bcb2397860e1495
Metric Score
Weighted-F1 35.30
Hyphens-F1 100.00
Comma-F1 14.88
Ellipsis-F1 0.00
Fullstop-F1 79.53
QMark-F1 0.00
Colon-F1 100.00
Excl-F1 0.00

test-A / af1678ca7e763ed8c33bfd04eb16f67267d5ed5b
Metric Score
Weighted-F1 30.88
Hyphens-F1 100.00
Comma-F1 18.80
Ellipsis-F1 0.00
Fullstop-F1 75.69
QMark-F1 0.00
Colon-F1 100.00
Excl-F1 0.00

dev-0 / b186ae33d1703279f20ea825c01a7cf2e82e4186
Metric Score
Weighted-F1 32.43
Hyphens-F1 100.00
Comma-F1 11.51
Ellipsis-F1 0.00
Fullstop-F1 72.21
QMark-F1 0.00
Colon-F1 100.00
Excl-F1 0.00

worst items

note: the gold standard is taken from the challenge
# input expected output actual output test-B Weighted-F1
1 audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Wie:119580-119670 pan:119700-119760 co:119790-119880 O O B-ELLIPSIS O O B-FULLSTOP 0.00
2 audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Przepraszam:120660-121020 ale:121320-121410 ale:121530-121620 czy:121740-121770 j… B-COMMA B-COMMA O O O O O O O B-COMMA O O O O O O O O O O O O O O B-QMARK O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP 0.00
3 audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Proszę:196770-196920 pana:196980-197100 a:197130-197130 co:197280-197340 powinien… O B-COMMA O O O O B-ELLIPSIS O O O O O O B-FULLSTOP 0.00
4 audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Tak:198870-199020 co:199140-199170 powinienem:199260-199560 ze:199650-199680 sobą… B-COMMA O O O O O O O B-QMARK O O O O O O O O B-FULLSTOP 0.00
5 audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Proszę:231570-231720 pana:231780-231930 skąd:232050-232380 wezmę:232440-232740 te… O B-COMMA O O B-COMMA O B-QMARK O O O O O O B-FULLSTOP 0.00
6 audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Wie:264390-264450 pan:264510-264600 co:264720-264750 ja:264960-264990 nie:265110-… O O B-COMMA O O O O O B-FULLSTOP B-COMMA O O O O O O O O O O O O O O B-QMARK O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP 0.00
7 audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Wszystko:354000-354600 rozumiem:430170-430380 Z:430410-430770 mojej:431280-431280… O B-FULLSTOP O O O O B-FULLSTOP B-FULLSTOP O O O O O O O O O O B-COMMA B-COMMA O O O O O O O O O O O B-COMMA B-QMARK O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP 0.00
8 audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Dzień:7440-7500 dobry:7560-7740 Andrzej:7830-8040 Murawa:8130-8430 W:8460-8460 cz… O B-FULLSTOP O B-FULLSTOP O O O B-QMARK O O O O O O O B-FULLSTOP 0.00
9 audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Czterdzieści:33300-33600 siedem:33660-33840 Dziękuję:33930-34290 bardzo:34350-346… O B-FULLSTOP O B-FULLSTOP B-FULLSTOP O O O O O O O B-COMMA O O O O O O O O O O O O O O B-FULLSTOP O O O O B-FULLSTOP O O O O O O O O O O O O… O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP 0.00
10 audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Tak:52320-52410 więc:52440-52560 poproszę:52770-53460 O O B-ELLIPSIS O O B-FULLSTOP 0.00
11 audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Mhm:128910-128970 B-QMARK B-FULLSTOP 0.00
12 audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Czy:196950-196980 ma:197040-197070 pan:197130-197220 jakieś:197280-197490 O O O B-ELLIPSIS O O O B-FULLSTOP 0.00
13 audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Mhm:202080-202110 B-QMARK B-FULLSTOP 0.00
14 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 No:19560-19590 B-XCL B-FULLSTOP 0.00
15 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Numer:33990-34200 klienta:34320-34710 to:34800-34890 dwa:34980-35160 dwa:35220-354… O O O B-COMMA B-ELLIPSIS O O O O B-FULLSTOP 0.00
16 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 cztery:36420-36690 pięć:36780-37020 B-COMMA B-COMMA O B-FULLSTOP 0.00
17 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 I:46200-46200 co:46320-46350 jeszcze:46380-46590 O O B-QMARK O O B-FULLSTOP 0.00
18 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Tak:62490-62880 No:62970-63000 ja:63150-63180 systematycznie:63270-63870 spłacam:6… B-XCL O O O O O O B-COMMA O O O O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O B-FULLSTOP 0.00
19 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Oczywiście:69480-69930 siedzę:70020-70290 przy:70380-70470 świeczkach:70590-71070 … O O O B-COMMA B-FULLSTOP O O O B-COMMA O O O O O O B-XCL O O O O O O O O O O O O O O O B-FULLSTOP 0.00
20 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Nie:84420-84450 no:84540-84570 nie:84840-84870 Na:85020-85050 jaką:85110-85290 kwo… O B-COMMA B-ELLIPSIS O O O O O O B-QMARK O O O O O O O O O B-FULLSTOP 0.00
21 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Cztery:94770-95010 Ale:95100-95190 dlaczego:95250-95520 aż:95580-95610 tak:95700-9… B-ELLIPSIS O O O O B-QMARK O O O O O B-COMMA O O O B-FULLSTOP O O O O O B-QMARK O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP 0.00
22 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 To:102510-102570 Ale:102720-102840 no:102900-102960 nie:103050-103080 wiem:103110-… B-ELLIPSIS B-COMMA O O B-COMMA B-FULLSTOP O B-ELLIPSIS B-ELLIPSIS O B-COMMA O O O O O B-COMMA B-QMARK O O O O O O O O O O O O O O O O O B-FULLSTOP 0.00
23 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 To:107670-107700 co:107880-107940 to:108000-108030 są:108120-108360 Z:108510-10851… O O O B-ELLIPSIS O O O O B-ELLIPSIS O O O O O O O O B-FULLSTOP 0.00
24 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 ta:110250-110310 ta:110610-110670 ta:110820-110850 ta:110970-111000 kwota:111030-1… B-COMMA B-COMMA B-COMMA O O O O B-QMARK O O O O O O O B-FULLSTOP 0.00
25 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 O:131820-131820 Boże:134790-135090 No:135510-135570 ale:135600-135690 To:135780-13… O B-FULLSTOP O B-ELLIPSIS B-COMMA B-COMMA O B-ELLIPSIS O B-COMMA B-COMMA O O O O O O O O O B-COMMA O O O O O B-QMARK O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP 0.00
26 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 No:144030-144060 ja:145440-145470 O B-ELLIPSIS O B-FULLSTOP 0.00
27 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Jakie:145620-145800 odsetki:145860-146280 Przecież:146340-146610 ja:146670-146700 … O B-QMARK O O O B-COMMA O O O O B-ELLIPSIS B-COMMA O O O B-COMMA O B-ELLIPSIS O O O O O O O O O O O O O O O O O B-FULLSTOP 0.00
28 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 przecież:151350-151590 potem:151680-151830 to:151890-151950 wszystko:151980-152220… O O O O B-FULLSTOP O O O O O O B-QMARK O O O O O O O O O O O B-FULLSTOP 0.00
29 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 No:166200-166230 dobrze:166290-166440 to:166530-166590 co:166680-166740 ja:166770-… O B-COMMA O O O O O B-ELLIPSIS O O O O O O O B-FULLSTOP 0.00
30 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 żebyście:168270-168600 państwo:168660-168900 znowu:168960-169170 włączyli:169260-1… O O O B-QMARK O O O O O B-COMMA O O O B-COMMA O B-ELLIPSIS O O O O O O O O O O O O O O O B-FULLSTOP 0.00
31 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 A:182700-182700 możecie:182730-182940 już:182970-183060 państwo:183150-183390 włąc… O O O O O B-COMMA O O O O B-QMARK O O O O O O O O O O B-FULLSTOP 0.00
32 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Czyli:196830-196950 co:197100-197130 ja:197220-197250 mam:197310-197370 zrobić:197… O O O O B-QMARK O O O O B-FULLSTOP 0.00
33 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Muszę:197700-197850 tylko:197910-198120 mam:198210-198300 tylko:198360-198510 możl… O B-ELLIPSIS O O B-ELLIPSIS O B-COMMA O B-COMMA O B-COMMA O O O O O B-QMARK O O O O O O O O O O O O O O O O B-FULLSTOP 0.00
34 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 I:203310-203310 po:203520-203550 prostu:203610-203790 wpłacić:203910-204270 to:204… O O O O O B-ELLIPSIS O O O B-COMMA O B-COMMA O B-COMMA B-QMARK O O O O O O O O O O O O O O B-FULLSTOP 0.00
35 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 O:216540-216540 Boże:216660-216900 Czyli:217350-217470 O B-FULLSTOP B-ELLIPSIS O O B-FULLSTOP 0.00
36 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 w:219930-219930 tej:219990-220080 ciemności:220110-220620 dopóki:220680-220950 nie… O O B-COMMA O O B-QMARK O O B-XCL O O O O O O O O B-FULLSTOP 0.00
37 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Dobra:231090-231360 no:231510-231540 to:231660-231690 no:232020-232050 to:232170-2… B-COMMA O B-COMMA O B-COMMA O O O O B-COMMA O O O O O O O B-QMARK O O O O O O O O O O O O O O O O O B-FULLSTOP 0.00
38 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Nie:249990-250020 nie:250200-250230 No:250350-250380 to:250470-250500 już:250530-2… B-COMMA B-FULLSTOP O O O O B-FULLSTOP O O O O B-COMMA B-COMMA O O B-COMMA O O O O O O O O O O O O O O O B-FULLSTOP 0.00
39 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Dzień:7020-7140 dobry:7200-7440 Energetyka:7800-8280 SA:8610-8610 Karolina:8760-90… O B-FULLSTOP O B-COMMA O B-COMMA O O O B-QMARK O O O O O O O O O B-FULLSTOP 0.00
40 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 To:19830-19860 dobrze:20700-20940 już:21060-21150 poproszę:21300-21720 O B-COMMA O B-ELLIPSIS O O O B-FULLSTOP 0.00

Compare with other submission