Fairness language

Overall scores

	CNN14	w2v2-b	hubert-b	axlstm
Overall Score	86.7% passed tests (26 passed / 4 failed).	83.3% passed tests (25 passed / 5 failed).	86.7% passed tests (26 passed / 4 failed).	90.0% passed tests (27 passed / 3 failed).

Mean Value

Threshold: 0.03

Data	Mean Value
	CNN14	w2v2-b	hubert-b	axlstm
mozillacommonvoice-10.1.0-de	-0.02	-0.02	-0.02	-0.01
mozillacommonvoice-10.1.0-en	-0.03	-0.05	-0.04	-0.03
mozillacommonvoice-10.1.0-es	0.03	0.00	-0.00	0.02
mozillacommonvoice-10.1.0-fr	-0.03	-0.01	-0.02	-0.01
mozillacommonvoice-10.1.0-it	0.03	0.07	0.06	0.04
mozillacommonvoice-10.1.0-zh	0.02	0.01	0.01	-0.00
mean	-0.00	0.00	-0.00	0.00

Relative Difference Per Bin

Bins with too few samples are skipped.

Threshold: 0.1

Data	(-inf, 0.25]				(0.25, 0.5]				(0.5, 0.75]				(0.75, inf]
	CNN14	w2v2-b	hubert-b	axlstm	CNN14	w2v2-b	hubert-b	axlstm	CNN14	w2v2-b	hubert-b	axlstm	CNN14	w2v2-b	hubert-b	axlstm
mozillacommonvoice-10.1.0-de	0.02	0.02	0.04	0.01	0.01	0.03	0.01	0.03	-0.02	-0.05	-0.05	-0.04	-0.01	-0.00	-0.00	0.00
mozillacommonvoice-10.1.0-en	0.06	0.13	0.09	0.04	0.00	-0.05	-0.03	0.05	-0.06	-0.08	-0.06	-0.08	-0.00	-0.00	-0.00	-0.00
mozillacommonvoice-10.1.0-es	-0.06	-0.01	-0.02	-0.02	-0.00	0.01	0.04	-0.01	0.04	-0.00	-0.03	0.03	0.01	0.01	0.01	0.00
mozillacommonvoice-10.1.0-fr	0.06	0.02	0.02	0.00	-0.01	0.01	0.02	0.02	-0.04	-0.03	-0.03	-0.02	-0.01	-0.00	-0.01	-0.00
mozillacommonvoice-10.1.0-it	-0.05	-0.14	-0.12	-0.03	-0.01	-0.00	-0.02	-0.09	0.05	0.14	0.14	0.12	0.00	0.00	-0.00	0.00
mozillacommonvoice-10.1.0-zh	-0.03	-0.02	-0.01	-0.00	0.00	0.00	-0.02	0.00	0.03	0.02	0.03	-0.00	0.00	0.00	0.00	0.00
mean	0.00	-0.00	0.00	0.00	-0.00	-0.00	0.00	0.00	0.00	0.00	0.00	0.00	-0.00	0.00	0.00	0.00

Visualization

CNN14	w2v2-b	hubert-b	axlstm