Fairness language

Overall scores

CNN14

w2v2-b

hubert-b

axlstm

Overall Score

100.0% passed tests (24 passed / 0 failed).

75.0% passed tests (18 passed / 6 failed).

100.0% passed tests (24 passed / 0 failed).

100.0% passed tests (24 passed / 0 failed).

Mean Value

Threshold: 0.03

Data

Mean Value

CNN14

w2v2-b

hubert-b

axlstm

mozillacommonvoice-10.1.0-de

0.00

0.01

0.00

-0.01

mozillacommonvoice-10.1.0-en

0.01

-0.03

-0.02

0.00

mozillacommonvoice-10.1.0-es

-0.02

-0.02

-0.01

0.01

mozillacommonvoice-10.1.0-fr

-0.00

-0.01

-0.01

-0.01

mozillacommonvoice-10.1.0-it

0.02

0.01

0.02

0.00

mozillacommonvoice-10.1.0-zh

-0.01

0.03

0.02

0.01

mean

0.00

-0.00

0.00

0.00

Relative Difference Per Bin

Bins with too few samples are skipped.

Threshold: 0.1

Data

(-inf, 0.25]

(0.25, 0.5]

(0.5, 0.75]

(0.75, inf]

CNN14

w2v2-b

hubert-b

axlstm

CNN14

w2v2-b

hubert-b

axlstm

CNN14

w2v2-b

hubert-b

axlstm

CNN14

w2v2-b

hubert-b

axlstm

mozillacommonvoice-10.1.0-de

-0.01

-0.00

-0.01

0.01

0.01

-0.03

0.02

0.00

0.00

0.03

-0.01

-0.01

mozillacommonvoice-10.1.0-en

-0.03

0.01

0.04

-0.00

0.02

0.10

-0.01

0.00

0.00

-0.10

-0.03

-0.00

mozillacommonvoice-10.1.0-es

0.03

0.00

0.01

-0.01

0.00

0.06

0.02

-0.00

-0.04

-0.06

-0.03

0.01

mozillacommonvoice-10.1.0-fr

-0.00

-0.00

-0.01

0.02

0.01

0.06

0.06

0.00

-0.01

-0.06

-0.04

-0.02

mozillacommonvoice-10.1.0-it

-0.02

0.00

-0.01

0.00

-0.04

-0.06

-0.06

0.00

0.06

0.06

0.06

-0.00

mozillacommonvoice-10.1.0-zh

0.02

-0.01

-0.02

-0.01

-0.01

-0.12

-0.03

-0.01

-0.02

0.13

0.05

0.02

mean

-0.00

0.00

-0.00

0.00

-0.00

0.00

0.00

-0.00

-0.00

0.00

-0.00

0.00

Visualization

CNN14

w2v2-b

hubert-b

axlstm

../../../_images/visualization_mozillacommonvoice-10.1.0-de33.png
../../../_images/visualization_mozillacommonvoice-10.1.0-de34.png
../../../_images/visualization_mozillacommonvoice-10.1.0-de35.png
../../../_images/visualization_mozillacommonvoice-10.1.0-de36.png
../../../_images/visualization_mozillacommonvoice-10.1.0-en33.png
../../../_images/visualization_mozillacommonvoice-10.1.0-en34.png
../../../_images/visualization_mozillacommonvoice-10.1.0-en35.png
../../../_images/visualization_mozillacommonvoice-10.1.0-en36.png
../../../_images/visualization_mozillacommonvoice-10.1.0-es33.png
../../../_images/visualization_mozillacommonvoice-10.1.0-es34.png
../../../_images/visualization_mozillacommonvoice-10.1.0-es35.png
../../../_images/visualization_mozillacommonvoice-10.1.0-es36.png
../../../_images/visualization_mozillacommonvoice-10.1.0-fr33.png
../../../_images/visualization_mozillacommonvoice-10.1.0-fr34.png
../../../_images/visualization_mozillacommonvoice-10.1.0-fr35.png
../../../_images/visualization_mozillacommonvoice-10.1.0-fr36.png
../../../_images/visualization_mozillacommonvoice-10.1.0-it33.png
../../../_images/visualization_mozillacommonvoice-10.1.0-it34.png
../../../_images/visualization_mozillacommonvoice-10.1.0-it35.png
../../../_images/visualization_mozillacommonvoice-10.1.0-it36.png
../../../_images/visualization_mozillacommonvoice-10.1.0-zh33.png
../../../_images/visualization_mozillacommonvoice-10.1.0-zh34.png
../../../_images/visualization_mozillacommonvoice-10.1.0-zh35.png
../../../_images/visualization_mozillacommonvoice-10.1.0-zh36.png