Fairness language

Overall scores

w2v2-b

w2v2-L

w2v2-L-robust

w2v2-L-xls-r

w2v2-L-vox

Overall Score

83.3% passed tests (25 passed / 5 failed).

86.7% passed tests (26 passed / 4 failed).

83.3% passed tests (20 passed / 4 failed).

83.3% passed tests (25 passed / 5 failed).

80.0% passed tests (24 passed / 6 failed).

Mean Value

Threshold: 0.03

Data

Mean Value

w2v2-b

w2v2-L

w2v2-L-robust

w2v2-L-xls-r

w2v2-L-vox

mozillacommonvoice-10.1.0-de

-0.02

-0.03

-0.02

-0.02

-0.03

mozillacommonvoice-10.1.0-en

-0.05

-0.04

-0.05

-0.04

-0.04

mozillacommonvoice-10.1.0-es

0.00

0.02

0.01

0.01

0.01

mozillacommonvoice-10.1.0-fr

-0.01

-0.01

-0.00

-0.02

-0.02

mozillacommonvoice-10.1.0-it

0.07

0.05

0.05

0.06

0.06

mozillacommonvoice-10.1.0-zh

0.01

0.00

0.02

0.01

0.01

mean

0.00

-0.00

0.00

0.00

-0.00

Relative Difference Per Bin

Bins with too few samples are skipped.

Threshold: 0.1

Data

(-inf, 0.25]

(0.25, 0.5]

(0.5, 0.75]

(0.75, inf]

w2v2-b

w2v2-L

w2v2-L-robust

w2v2-L-xls-r

w2v2-L-vox

w2v2-b

w2v2-L

w2v2-L-robust

w2v2-L-xls-r

w2v2-L-vox

w2v2-b

w2v2-L

w2v2-L-robust

w2v2-L-xls-r

w2v2-L-vox

w2v2-b

w2v2-L

w2v2-L-robust

w2v2-L-xls-r

w2v2-L-vox

mozillacommonvoice-10.1.0-de

0.02

0.05

0.04

0.05

0.05

0.03

0.04

0.01

0.00

-0.01

-0.05

-0.08

-0.06

-0.05

-0.04

-0.00

-0.01

-0.00

-0.00

mozillacommonvoice-10.1.0-en

0.13

0.06

0.13

0.10

0.12

-0.05

0.02

-0.05

-0.03

-0.06

-0.08

-0.08

-0.07

-0.07

-0.06

-0.00

-0.00

-0.00

-0.00

mozillacommonvoice-10.1.0-es

-0.01

-0.05

-0.02

-0.04

-0.04

0.01

0.02

0.01

0.04

0.04

-0.00

0.02

0.00

-0.01

-0.01

0.01

0.01

0.01

0.01

mozillacommonvoice-10.1.0-fr

0.02

0.01

-0.02

0.04

0.03

0.01

0.02

0.04

-0.01

0.01

-0.03

-0.03

-0.03

-0.03

-0.03

-0.00

-0.00

-0.00

-0.00

mozillacommonvoice-10.1.0-it

-0.14

-0.07

-0.09

-0.12

-0.14

-0.00

-0.08

-0.03

-0.02

0.03

0.14

0.15

0.12

0.14

0.11

0.00

-0.00

-0.00

-0.00

mozillacommonvoice-10.1.0-zh

-0.02

0.00

-0.05

-0.03

-0.03

0.00

-0.02

0.01

0.02

-0.01

0.02

0.01

0.04

0.02

0.03

0.00

0.00

0.00

0.00

mean

-0.00

-0.00

-0.00

0.00

-0.00

-0.00

0.00

-0.00

0.00

0.00

0.00

-0.00

-0.00

0.00

-0.00

0.00

0.00

0.00

0.00

Visualization

w2v2-b

w2v2-L

w2v2-L-robust

w2v2-L-xls-r

w2v2-L-vox

../../../_images/visualization_mozillacommonvoice-10.1.0-de1.png
../../../_images/visualization_mozillacommonvoice-10.1.0-de4.png
../../../_images/visualization_mozillacommonvoice-10.1.0-de5.png
../../../_images/visualization_mozillacommonvoice-10.1.0-de6.png
../../../_images/visualization_mozillacommonvoice-10.1.0-de7.png
../../../_images/visualization_mozillacommonvoice-10.1.0-en1.png
../../../_images/visualization_mozillacommonvoice-10.1.0-en4.png
../../../_images/visualization_mozillacommonvoice-10.1.0-en5.png
../../../_images/visualization_mozillacommonvoice-10.1.0-en6.png
../../../_images/visualization_mozillacommonvoice-10.1.0-en7.png
../../../_images/visualization_mozillacommonvoice-10.1.0-es1.png
../../../_images/visualization_mozillacommonvoice-10.1.0-es4.png
../../../_images/visualization_mozillacommonvoice-10.1.0-es5.png
../../../_images/visualization_mozillacommonvoice-10.1.0-es6.png
../../../_images/visualization_mozillacommonvoice-10.1.0-es7.png
../../../_images/visualization_mozillacommonvoice-10.1.0-fr1.png
../../../_images/visualization_mozillacommonvoice-10.1.0-fr4.png
../../../_images/visualization_mozillacommonvoice-10.1.0-fr5.png
../../../_images/visualization_mozillacommonvoice-10.1.0-fr6.png
../../../_images/visualization_mozillacommonvoice-10.1.0-fr7.png
../../../_images/visualization_mozillacommonvoice-10.1.0-it1.png
../../../_images/visualization_mozillacommonvoice-10.1.0-it4.png
../../../_images/visualization_mozillacommonvoice-10.1.0-it5.png
../../../_images/visualization_mozillacommonvoice-10.1.0-it6.png
../../../_images/visualization_mozillacommonvoice-10.1.0-it7.png
../../../_images/visualization_mozillacommonvoice-10.1.0-zh1.png
../../../_images/visualization_mozillacommonvoice-10.1.0-zh4.png
../../../_images/visualization_mozillacommonvoice-10.1.0-zh5.png
../../../_images/visualization_mozillacommonvoice-10.1.0-zh6.png
../../../_images/visualization_mozillacommonvoice-10.1.0-zh7.png