Fairness accent

Overall scores

	w2v2-L-cat	hubert-L-cat	wavlm-cat	data2vec-cat
Overall Score	100.0% passed tests (124 passed / 0 failed).	100.0% passed tests (124 passed / 0 failed).	99.2% passed tests (123 passed / 1 failed).	100.0% passed tests (124 passed / 0 failed).

Relative Difference Per Class

Threshold: 0.225

Data	anger				happiness				neutral				sadness
	w2v2-L-cat	hubert-L-cat	wavlm-cat	data2vec-cat	w2v2-L-cat	hubert-L-cat	wavlm-cat	data2vec-cat	w2v2-L-cat	hubert-L-cat	wavlm-cat	data2vec-cat	w2v2-L-cat	hubert-L-cat	wavlm-cat	data2vec-cat
speech-accent-archive-2.2.0-amharic	-0.01	-0.00	-0.01	-0.00	-0.10	-0.04	-0.02	-0.07	-0.02	0.01	-0.21	0.02	0.12	0.03	0.23	0.05
speech-accent-archive-2.2.0-arabic	0.01	-0.00	0.01	-0.00	0.04	0.06	0.02	0.10	-0.06	-0.05	-0.02	-0.10	0.01	-0.01	-0.02	0.00
speech-accent-archive-2.2.0-bengali	-0.00	-0.00	-0.01	-0.00	-0.08	-0.01	-0.02	-0.03	0.03	0.04	0.04	0.03	0.06	-0.02	-0.02	-0.01
speech-accent-archive-2.2.0-bulgarian	-0.01	-0.00	-0.01	-0.00	-0.09	0.01	-0.02	-0.04	0.03	-0.12	-0.06	0.02	0.07	0.11	0.09	0.03
speech-accent-archive-2.2.0-cantonese	-0.00	-0.00	-0.01	-0.00	-0.04	0.02	-0.02	-0.01	0.02	0.01	-0.03	0.01	0.02	-0.03	0.05	-0.00
speech-accent-archive-2.2.0-dutch	-0.01	-0.00	-0.01	-0.00	-0.02	-0.01	0.01	-0.02	0.10	0.07	0.10	0.05	-0.07	-0.06	-0.10	-0.03
speech-accent-archive-2.2.0-english	-0.01	-0.00	-0.01	-0.00	0.02	0.04	0.03	-0.01	0.09	0.01	0.05	0.04	-0.10	-0.05	-0.07	-0.03
speech-accent-archive-2.2.0-farsi	-0.00	-0.00	0.01	-0.00	-0.00	-0.01	-0.02	0.01	0.04	-0.01	0.05	-0.02	-0.04	0.02	-0.04	0.01
speech-accent-archive-2.2.0-french	-0.00	-0.00	-0.01	-0.00	-0.11	-0.05	-0.01	-0.05	-0.01	-0.00	0.01	-0.02	0.13	0.05	0.00	0.08
speech-accent-archive-2.2.0-german	-0.01	-0.00	-0.01	-0.00	0.09	0.07	0.01	0.03	0.03	-0.00	0.08	0.00	-0.11	-0.06	-0.08	-0.03
speech-accent-archive-2.2.0-greek	0.04	-0.00	0.04	-0.00	-0.02	-0.01	0.02	0.06	0.10	0.04	0.04	0.03	-0.11	-0.03	-0.10	-0.09
speech-accent-archive-2.2.0-hindi	-0.00	-0.00	-0.01	-0.00	-0.00	-0.03	0.05	0.02	-0.00	0.06	0.01	-0.01	0.01	-0.03	-0.06	-0.01
speech-accent-archive-2.2.0-italian	-0.00	0.01	0.02	-0.00	-0.01	-0.01	0.01	0.01	0.03	0.01	0.06	-0.00	-0.02	-0.01	-0.09	-0.01
speech-accent-archive-2.2.0-japanese	0.01	-0.00	0.02	0.01	-0.03	-0.02	0.01	0.01	0.09	0.05	-0.01	0.01	-0.07	-0.03	-0.02	-0.02
speech-accent-archive-2.2.0-korean	-0.01	-0.00	0.00	-0.00	0.10	-0.03	-0.01	0.03	-0.03	0.03	-0.02	-0.03	-0.05	-0.00	0.02	-0.00
speech-accent-archive-2.2.0-macedonian	-0.00	0.01	0.01	-0.00	0.22	0.01	0.01	0.02	-0.11	0.02	0.01	-0.01	-0.11	-0.04	-0.02	-0.01
speech-accent-archive-2.2.0-mandarin	0.04	0.01	0.00	0.02	-0.03	0.02	-0.02	0.01	0.02	-0.05	0.08	0.00	-0.03	0.03	-0.06	-0.03
speech-accent-archive-2.2.0-nepali	-0.01	-0.00	0.00	0.01	0.00	-0.05	-0.02	-0.06	-0.02	-0.00	-0.02	0.05	0.03	0.06	0.04	-0.00
speech-accent-archive-2.2.0-polish	0.02	-0.00	-0.01	-0.00	-0.04	-0.02	-0.02	-0.02	0.09	0.01	0.07	0.03	-0.07	0.01	-0.05	-0.01
speech-accent-archive-2.2.0-portuguese	0.01	-0.00	-0.01	-0.00	-0.00	0.02	-0.01	0.01	-0.09	-0.02	-0.03	-0.02	0.08	0.00	0.04	0.02
speech-accent-archive-2.2.0-romanian	-0.01	-0.00	-0.01	-0.00	-0.05	-0.02	-0.02	-0.04	0.06	0.07	0.09	-0.01	0.00	-0.04	-0.07	0.05
speech-accent-archive-2.2.0-russian	-0.01	-0.00	-0.01	-0.00	0.18	0.08	-0.00	0.02	-0.06	-0.05	0.03	-0.01	-0.10	-0.03	-0.02	-0.01
speech-accent-archive-2.2.0-serbian	-0.01	-0.00	-0.01	-0.00	-0.03	-0.01	-0.02	-0.03	-0.02	-0.03	-0.05	0.05	0.06	0.04	0.08	-0.01
speech-accent-archive-2.2.0-spanish	-0.01	0.01	-0.01	-0.00	-0.06	-0.03	-0.02	-0.00	0.00	-0.04	-0.04	-0.08	0.07	0.06	0.07	0.08
speech-accent-archive-2.2.0-swedish	-0.01	-0.00	-0.01	-0.00	0.05	0.06	-0.00	0.07	-0.02	-0.03	0.02	-0.05	-0.02	-0.03	-0.02	-0.02
speech-accent-archive-2.2.0-tagalog	0.01	-0.00	-0.01	-0.00	0.04	0.01	-0.02	-0.05	-0.08	-0.07	-0.05	0.05	0.03	0.06	0.07	0.01
speech-accent-archive-2.2.0-thai	0.01	0.01	0.01	-0.00	0.08	0.00	0.01	0.03	-0.09	-0.02	0.03	-0.09	0.01	0.00	-0.05	0.06
speech-accent-archive-2.2.0-turkish	0.01	-0.00	-0.01	-0.00	0.09	0.08	0.02	0.07	-0.04	-0.02	-0.00	-0.01	-0.06	-0.06	-0.01	-0.05
speech-accent-archive-2.2.0-ukrainian	0.01	-0.00	-0.01	-0.00	-0.12	-0.02	0.02	-0.01	0.07	0.06	-0.02	0.04	0.03	-0.03	0.00	-0.03
speech-accent-archive-2.2.0-urdu	0.01	-0.00	-0.01	-0.00	0.07	0.00	0.02	0.02	0.02	0.06	0.09	0.00	-0.09	-0.05	-0.10	-0.03
speech-accent-archive-2.2.0-vietnamese	-0.00	-0.00	-0.01	-0.00	-0.07	-0.04	-0.02	-0.05	-0.06	-0.03	-0.11	0.05	0.14	0.07	0.13	-0.01
mean	0.00	0.00	-0.00	0.00	0.00	0.00	-0.00	0.00	0.00	0.00	0.01	0.00	-0.01	-0.00	-0.01	-0.00

Visualization

w2v2-L-cat	hubert-L-cat	wavlm-cat	data2vec-cat