Fairness language

Overall scores

CNN14

w2v2-b

hubert-b

axlstm

Overall Score

93.3% passed tests (28 passed / 2 failed).

79.2% passed tests (19 passed / 5 failed).

91.7% passed tests (22 passed / 2 failed).

93.3% passed tests (28 passed / 2 failed).

Mean Value

Threshold: 0.03

Data

Mean Value

CNN14

w2v2-b

hubert-b

axlstm

mozillacommonvoice-10.1.0-de

-0.01

-0.01

-0.02

-0.01

mozillacommonvoice-10.1.0-en

-0.03

-0.03

-0.02

-0.02

mozillacommonvoice-10.1.0-es

0.02

-0.00

-0.02

0.01

mozillacommonvoice-10.1.0-fr

-0.02

-0.01

-0.02

-0.01

mozillacommonvoice-10.1.0-it

0.02

0.06

0.06

0.03

mozillacommonvoice-10.1.0-zh

0.03

0.01

0.02

0.00

mean

0.00

0.00

-0.00

0.00

Relative Difference Per Bin

Bins with too few samples are skipped.

Threshold: 0.1

Data

(-inf, 0.25]

(0.25, 0.5]

(0.5, 0.75]

(0.75, inf]

CNN14

w2v2-b

hubert-b

axlstm

CNN14

w2v2-b

hubert-b

axlstm

CNN14

w2v2-b

hubert-b

axlstm

CNN14

w2v2-b

hubert-b

axlstm

mozillacommonvoice-10.1.0-de

0.01

0.01

0.02

0.01

0.02

0.05

0.03

0.03

-0.03

-0.05

-0.05

-0.03

-0.00

0.00

mozillacommonvoice-10.1.0-en

0.05

0.04

0.04

0.01

0.04

0.05

-0.00

0.07

-0.09

-0.10

-0.04

-0.08

-0.00

-0.01

mozillacommonvoice-10.1.0-es

-0.03

-0.02

0.02

-0.01

-0.01

0.04

0.03

-0.02

0.04

-0.03

-0.05

0.02

0.00

0.01

mozillacommonvoice-10.1.0-fr

0.02

0.01

0.04

0.00

0.05

0.05

0.01

0.02

-0.06

-0.06

-0.05

-0.03

-0.00

0.00

mozillacommonvoice-10.1.0-it

-0.01

-0.04

-0.09

-0.01

-0.06

-0.16

-0.05

-0.09

0.06

0.20

0.14

0.10

0.00

0.00

mozillacommonvoice-10.1.0-zh

-0.03

-0.00

-0.03

-0.00

-0.05

-0.03

-0.02

-0.01

0.08

0.04

0.05

0.02

0.00

-0.00

mean

0.00

0.00

0.00

0.00

-0.00

0.00

-0.00

0.00

0.00

-0.00

0.00

0.00

0.00

0.00

Visualization

CNN14

w2v2-b

hubert-b

axlstm

../../../_images/visualization_mozillacommonvoice-10.1.0-de11.png
../../../_images/visualization_mozillacommonvoice-10.1.0-de12.png
../../../_images/visualization_mozillacommonvoice-10.1.0-de13.png
../../../_images/visualization_mozillacommonvoice-10.1.0-de14.png
../../../_images/visualization_mozillacommonvoice-10.1.0-en11.png
../../../_images/visualization_mozillacommonvoice-10.1.0-en12.png
../../../_images/visualization_mozillacommonvoice-10.1.0-en13.png
../../../_images/visualization_mozillacommonvoice-10.1.0-en14.png
../../../_images/visualization_mozillacommonvoice-10.1.0-es11.png
../../../_images/visualization_mozillacommonvoice-10.1.0-es12.png
../../../_images/visualization_mozillacommonvoice-10.1.0-es13.png
../../../_images/visualization_mozillacommonvoice-10.1.0-es14.png
../../../_images/visualization_mozillacommonvoice-10.1.0-fr11.png
../../../_images/visualization_mozillacommonvoice-10.1.0-fr12.png
../../../_images/visualization_mozillacommonvoice-10.1.0-fr13.png
../../../_images/visualization_mozillacommonvoice-10.1.0-fr14.png
../../../_images/visualization_mozillacommonvoice-10.1.0-it11.png
../../../_images/visualization_mozillacommonvoice-10.1.0-it12.png
../../../_images/visualization_mozillacommonvoice-10.1.0-it13.png
../../../_images/visualization_mozillacommonvoice-10.1.0-it14.png
../../../_images/visualization_mozillacommonvoice-10.1.0-zh11.png
../../../_images/visualization_mozillacommonvoice-10.1.0-zh12.png
../../../_images/visualization_mozillacommonvoice-10.1.0-zh13.png
../../../_images/visualization_mozillacommonvoice-10.1.0-zh14.png