Speech Translation: FLORES Leaderboard

Models blue chrf ter bleurt pl->it pl->de pl->fr pl->es pl->pr pl->th it->pl it->de it->fr it->es it->pr it->th de->pl de->it de->fr de->es de->pr de->th fr->pl fr->it fr->de fr->es fr->pr fr->th es->pl es->it es->de es->fr es->pr es->th pr->pl pr->it pr->de pr->fr pr->es pr->th th->pl th->it th->de th->fr th->es th->pr
blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt blue chrf ter bleurt
Speech Translation - Model 8 46.74 51.26 54.98 43.95 29.00 5.00 48.00 76.00 47.00 80.00 91.00 22.00 30.00 92.00 34.00 18.00 99.00 10.00 72.00 12.00 41.00 13.00 85.00 37.00 32.00 15.00 53.00 7.00 15.00 99.00 58.00 14.00 40.00 63.00 46.00 56.00 1.00 30.00 66.00 11.00 63.00 67.00 98.00 75.00 83.00 59.00 41.00 25.00 35.00 50.00 65.00 97.00 81.00 89.00 51.00 19.00 16.00 11.00 93.00 10.00 49.00 99.00 94.00 91.00 89.00 18.00 39.00 65.00 13.00 13.00 47.00 1.00 65.00 74.00 22.00 60.00 85.00 25.00 86.00 58.00 77.00 5.00 11.00 46.00 59.00 33.00 3.00 91.00 41.00 74.00 97.00 25.00 83.00 8.00 27.00 34.00 33.00 77.00 13.00 80.00 15.00 32.00 40.00 35.00 76.00 37.00 57.00 74.00 91.00 89.00 10.00 42.00 31.00 43.00 51.00 41.00 4.00 31.00 58.00 5.00 54.00 87.00 48.00 35.00 65.00 90.00 70.00 30.00 28.00 81.00 73.00 70.00 12.00 51.00 28.00 70.00 3.00 76.00 91.00 7.00 81.00 84.00 38.00 19.00 14.00 52.00 5.00 81.00 65.00 12.00 91.00 33.00 96.00 50.00 96.00 27.00 6.00 89.00 28.00 35.00 45.00 67.00 69.00 81.00 20.00 36.00 94.00 48.00 51.00 37.00 22.00 83.00
Speech Translation - Model 2 58.98 45.26 57.29 44.26 72.00 12.00 46.00 64.00 71.00 16.00 61.00 7.00 22.00 73.00 95.00 42.00 89.00 24.00 31.00 10.00 99.00 45.00 12.00 40.00 98.00 53.00 10.00 37.00 34.00 98.00 34.00 48.00 95.00 70.00 91.00 13.00 16.00 68.00 14.00 92.00 31.00 2.00 69.00 7.00 12.00 54.00 72.00 63.00 64.00 13.00 65.00 83.00 89.00 51.00 82.00 95.00 77.00 56.00 74.00 52.00 77.00 19.00 12.00 67.00 34.00 25.00 31.00 41.00 49.00 13.00 97.00 39.00 19.00 86.00 95.00 30.00 90.00 21.00 97.00 6.00 17.00 20.00 93.00 53.00 59.00 36.00 66.00 97.00 93.00 54.00 74.00 11.00 85.00 90.00 67.00 44.00 91.00 7.00 67.00 27.00 65.00 80.00 52.00 39.00 71.00 9.00 94.00 54.00 8.00 27.00 78.00 21.00 34.00 63.00 5.00 2.00 94.00 73.00 76.00 38.00 90.00 67.00 65.00 73.00 79.00 94.00 25.00 8.00 70.00 27.00 25.00 77.00 87.00 48.00 61.00 2.00 35.00 0.00 69.00 29.00 66.00 6.00 23.00 29.00 86.00 81.00 77.00 84.00 48.00 87.00 70.00 46.00 44.00 17.00 27.00 91.00 1.00 78.00 81.00 45.00 37.00 35.00 79.00 34.00 56.00 33.00 41.00 59.00 23.00 70.00 3.00 60.00
Speech Translation - Model 4 50.43 55.07 49.69 46.12 1.00 86.00 18.00 7.00 65.00 97.00 51.00 51.00 65.00 99.00 78.00 68.00 80.00 53.00 24.00 93.00 31.00 75.00 14.00 58.00 90.00 41.00 24.00 16.00 41.00 4.00 86.00 64.00 68.00 85.00 21.00 59.00 44.00 80.00 19.00 20.00 16.00 85.00 47.00 72.00 91.00 96.00 50.00 72.00 89.00 86.00 35.00 42.00 89.00 58.00 0.00 28.00 70.00 5.00 70.00 24.00 20.00 27.00 78.00 97.00 58.00 71.00 18.00 86.00 14.00 24.00 95.00 58.00 22.00 36.00 67.00 47.00 88.00 28.00 34.00 19.00 9.00 81.00 26.00 37.00 80.00 89.00 44.00 14.00 65.00 15.00 84.00 44.00 66.00 42.00 75.00 78.00 6.00 31.00 6.00 60.00 58.00 52.00 32.00 93.00 35.00 34.00 84.00 29.00 96.00 61.00 47.00 89.00 2.00 53.00 13.00 30.00 97.00 79.00 96.00 71.00 38.00 46.00 86.00 62.00 21.00 24.00 9.00 88.00 79.00 10.00 69.00 73.00 9.00 9.00 82.00 12.00 94.00 85.00 50.00 2.00 93.00 15.00 66.00 8.00 18.00 6.00 92.00 5.00 57.00 40.00 16.00 48.00 58.00 70.00 48.00 2.00 31.00 97.00 89.00 45.00 8.00 97.00 90.00 20.00 33.00 45.00 52.00 4.00 23.00 96.00 2.00 42.00
Speech Translation - Model 7 52.95 48.50 48.79 47.24 84.00 77.00 90.00 92.00 4.00 56.00 6.00 50.00 86.00 67.00 67.00 66.00 3.00 87.00 29.00 50.00 20.00 6.00 89.00 96.00 18.00 97.00 43.00 83.00 91.00 2.00 69.00 47.00 6.00 12.00 94.00 52.00 49.00 27.00 29.00 39.00 49.00 22.00 49.00 53.00 58.00 79.00 21.00 66.00 31.00 94.00 32.00 41.00 45.00 87.00 43.00 71.00 87.00 64.00 11.00 92.00 28.00 92.00 76.00 41.00 64.00 66.00 2.00 17.00 10.00 63.00 94.00 35.00 67.00 46.00 28.00 27.00 90.00 76.00 75.00 79.00 38.00 36.00 44.00 10.00 97.00 56.00 74.00 18.00 15.00 81.00 55.00 49.00 63.00 33.00 95.00 55.00 74.00 23.00 51.00 28.00 5.00 19.00 41.00 29.00 55.00 10.00 5.00 6.00 50.00 62.00 5.00 30.00 66.00 85.00 67.00 33.00 48.00 74.00 60.00 67.00 53.00 82.00 1.00 94.00 32.00 2.00 34.00 58.00 79.00 95.00 59.00 22.00 89.00 80.00 22.00 84.00 25.00 48.00 74.00 38.00 50.00 14.00 51.00 18.00 30.00 47.00 11.00 0.00 93.00 2.00 46.00 37.00 74.00 3.00 86.00 19.00 97.00 25.00 98.00 36.00 86.00 15.00 10.00 1.00 75.00 24.00 87.00 86.00 40.00 1.00 26.00 69.00
Speech Translation - Model 1 44.74 57.52 49.57 49.36 4.00 91.00 33.00 83.00 24.00 91.00 90.00 30.00 15.00 8.00 4.00 10.00 50.00 85.00 89.00 10.00 10.00 85.00 73.00 65.00 72.00 14.00 85.00 95.00 80.00 51.00 1.00 44.00 79.00 36.00 62.00 51.00 81.00 73.00 59.00 19.00 58.00 71.00 82.00 51.00 20.00 73.00 35.00 3.00 9.00 66.00 57.00 19.00 29.00 62.00 38.00 64.00 53.00 96.00 37.00 37.00 65.00 52.00 19.00 82.00 67.00 61.00 50.00 8.00 70.00 69.00 24.00 27.00 91.00 78.00 5.00 10.00 10.00 77.00 28.00 44.00 1.00 98.00 36.00 18.00 35.00 60.00 85.00 5.00 36.00 24.00 34.00 47.00 98.00 17.00 92.00 65.00 53.00 82.00 52.00 46.00 11.00 47.00 97.00 28.00 73.00 25.00 79.00 85.00 8.00 62.00 52.00 56.00 82.00 36.00 37.00 46.00 72.00 74.00 87.00 79.00 46.00 82.00 12.00 96.00 82.00 29.00 32.00 98.00 33.00 58.00 18.00 9.00 10.00 19.00 14.00 92.00 0.00 46.00 19.00 31.00 59.00 83.00 88.00 61.00 53.00 30.00 59.00 76.00 43.00 68.00 85.00 88.00 1.00 92.00 82.00 96.00 52.00 56.00 84.00 0.00 47.00 19.00 1.00 40.00 52.00 39.00 12.00 97.00 45.00 31.00 54.00 62.00
Speech Translation - Model 5 51.05 43.93 55.76 49.55 5.00 40.00 17.00 19.00 93.00 49.00 49.00 70.00 77.00 14.00 34.00 23.00 44.00 84.00 95.00 61.00 94.00 43.00 98.00 33.00 22.00 42.00 42.00 50.00 62.00 97.00 84.00 45.00 5.00 80.00 95.00 14.00 91.00 34.00 94.00 19.00 38.00 44.00 42.00 54.00 15.00 86.00 54.00 20.00 21.00 29.00 69.00 86.00 23.00 11.00 14.00 48.00 32.00 42.00 93.00 57.00 2.00 15.00 99.00 16.00 49.00 66.00 85.00 41.00 25.00 47.00 92.00 36.00 85.00 34.00 95.00 63.00 83.00 73.00 75.00 68.00 35.00 93.00 93.00 31.00 80.00 0.00 65.00 95.00 16.00 79.00 2.00 11.00 78.00 20.00 79.00 37.00 55.00 1.00 36.00 48.00 66.00 48.00 1.00 61.00 92.00 63.00 64.00 87.00 93.00 35.00 62.00 89.00 18.00 22.00 8.00 39.00 53.00 25.00 64.00 65.00 48.00 4.00 37.00 22.00 22.00 26.00 54.00 60.00 47.00 82.00 1.00 74.00 76.00 64.00 55.00 86.00 13.00 4.00 72.00 52.00 17.00 30.00 85.00 70.00 89.00 84.00 7.00 94.00 37.00 15.00 38.00 18.00 43.00 16.00 65.00 39.00 73.00 0.00 62.00 71.00 92.00 91.00 1.00 60.00 47.00 77.00 30.00 11.00 88.00 36.00 35.00 38.00
Speech Translation - Model 9 46.40 54.43 51.83 49.79 84.00 19.00 50.00 34.00 47.00 22.00 57.00 72.00 4.00 4.00 37.00 59.00 61.00 68.00 75.00 70.00 49.00 79.00 21.00 96.00 65.00 2.00 90.00 5.00 1.00 16.00 21.00 79.00 57.00 85.00 38.00 30.00 80.00 29.00 17.00 50.00 58.00 96.00 36.00 11.00 21.00 10.00 90.00 83.00 87.00 50.00 61.00 57.00 38.00 80.00 48.00 25.00 19.00 92.00 67.00 35.00 58.00 80.00 73.00 71.00 34.00 55.00 50.00 62.00 71.00 54.00 48.00 22.00 42.00 72.00 14.00 36.00 20.00 35.00 93.00 78.00 68.00 1.00 58.00 61.00 52.00 49.00 12.00 68.00 2.00 54.00 84.00 14.00 48.00 37.00 74.00 70.00 45.00 63.00 90.00 56.00 50.00 74.00 16.00 65.00 0.00 96.00 84.00 27.00 4.00 88.00 18.00 27.00 81.00 76.00 49.00 69.00 31.00 73.00 99.00 78.00 92.00 59.00 39.00 31.00 47.00 61.00 77.00 58.00 32.00 93.00 98.00 68.00 85.00 89.00 70.00 38.00 72.00 97.00 10.00 12.00 38.00 59.00 68.00 99.00 54.00 17.00 7.00 45.00 35.00 80.00 13.00 17.00 36.00 20.00 9.00 49.00 34.00 52.00 96.00 36.00 88.00 11.00 7.00 18.00 31.00 69.00 16.00 30.00 28.00 20.00 97.00 80.00
Speech Translation - Model 10 45.74 52.31 50.98 51.50 38.00 3.00 33.00 51.00 64.00 61.00 65.00 90.00 15.00 40.00 45.00 94.00 28.00 88.00 44.00 99.00 12.00 38.00 55.00 9.00 92.00 14.00 35.00 22.00 64.00 75.00 76.00 5.00 68.00 78.00 99.00 66.00 31.00 18.00 86.00 35.00 57.00 5.00 33.00 79.00 35.00 64.00 91.00 44.00 10.00 75.00 65.00 24.00 61.00 2.00 81.00 65.00 16.00 60.00 27.00 8.00 47.00 95.00 79.00 5.00 55.00 19.00 79.00 59.00 85.00 57.00 52.00 48.00 49.00 94.00 0.00 24.00 30.00 70.00 85.00 34.00 59.00 91.00 4.00 48.00 48.00 19.00 99.00 31.00 37.00 29.00 2.00 99.00 24.00 48.00 60.00 5.00 99.00 93.00 82.00 97.00 39.00 95.00 76.00 6.00 21.00 89.00 56.00 70.00 73.00 48.00 41.00 59.00 64.00 64.00 31.00 83.00 4.00 13.00 11.00 78.00 93.00 73.00 19.00 81.00 38.00 15.00 12.00 75.00 71.00 35.00 90.00 61.00 55.00 31.00 16.00 98.00 40.00 19.00 28.00 94.00 12.00 23.00 38.00 19.00 69.00 54.00 8.00 55.00 19.00 39.00 20.00 12.00 51.00 80.00 75.00 10.00 12.00 61.00 76.00 68.00 57.00 51.00 31.00 19.00 20.00 97.00 53.00 43.00 59.00 74.00 83.00 91.00
Speech Translation - Model 3 42.43 43.90 48.05 54.12 82.00 63.00 80.00 99.00 4.00 64.00 56.00 40.00 10.00 77.00 3.00 61.00 30.00 37.00 6.00 35.00 63.00 72.00 23.00 77.00 3.00 60.00 84.00 89.00 41.00 92.00 19.00 92.00 35.00 4.00 1.00 31.00 73.00 8.00 38.00 52.00 97.00 44.00 0.00 7.00 77.00 64.00 50.00 43.00 47.00 32.00 74.00 90.00 4.00 46.00 76.00 1.00 51.00 5.00 98.00 43.00 34.00 62.00 51.00 34.00 2.00 96.00 5.00 24.00 10.00 21.00 12.00 73.00 98.00 49.00 98.00 76.00 2.00 11.00 10.00 88.00 81.00 82.00 99.00 61.00 18.00 50.00 18.00 71.00 88.00 94.00 91.00 18.00 0.00 67.00 34.00 48.00 30.00 80.00 24.00 71.00 96.00 13.00 59.00 42.00 95.00 14.00 59.00 30.00 17.00 9.00 95.00 89.00 31.00 4.00 53.00 46.00 34.00 26.00 5.00 11.00 75.00 9.00 34.00 91.00 17.00 27.00 42.00 20.00 37.00 29.00 44.00 19.00 74.00 17.00 23.00 61.00 55.00 93.00 34.00 35.00 0.00 46.00 92.00 71.00 93.00 80.00 54.00 44.00 88.00 25.00 29.00 6.00 29.00 10.00 47.00 87.00 19.00 52.00 82.00 95.00 8.00 79.00 55.00 80.00 32.00 4.00 73.00 53.00 2.00 27.00 88.00 69.00
Speech Translation - Model 6 56.33 48.79 49.69 55.90 32.00 35.00 47.00 34.00 60.00 14.00 2.00 21.00 58.00 58.00 60.00 50.00 55.00 15.00 57.00 7.00 74.00 20.00 92.00 65.00 90.00 59.00 45.00 18.00 67.00 56.00 58.00 79.00 40.00 40.00 17.00 61.00 31.00 78.00 22.00 47.00 63.00 80.00 13.00 98.00 91.00 65.00 36.00 78.00 23.00 85.00 65.00 86.00 80.00 55.00 66.00 99.00 58.00 97.00 37.00 97.00 92.00 15.00 69.00 78.00 96.00 8.00 67.00 85.00 78.00 46.00 50.00 97.00 89.00 24.00 36.00 73.00 81.00 87.00 88.00 60.00 60.00 28.00 75.00 12.00 79.00 48.00 81.00 67.00 87.00 98.00 60.00 12.00 0.00 27.00 27.00 37.00 87.00 9.00 73.00 96.00 45.00 8.00 5.00 23.00 36.00 18.00 65.00 75.00 5.00 66.00 31.00 21.00 30.00 87.00 53.00 4.00 61.00 66.00 58.00 1.00 3.00 63.00 88.00 81.00 75.00 88.00 83.00 41.00 19.00 51.00 44.00 77.00 66.00 1.00 35.00 56.00 56.00 38.00 72.00 91.00 20.00 76.00 3.00 70.00 37.00 75.00 85.00 85.00 51.00 93.00 13.00 89.00 57.00 55.00 70.00 24.00 64.00 30.00 32.00 12.00 26.00 27.00 34.00 90.00 53.00 34.00 22.00 23.00 91.00 26.00 51.00 28.00