Co HolosAccent transfurma tia vusch en in pont da pronunciaziun
Sch'El legias ina frasa ad alta vusch, pliras dumondas èn impurtantas: **tge sunids has ti produsì, tge pleds has ti cumpletà, e co è il flus da la frasa?** Il nov pipeline da pontaziun da HolosAccent cumina evidenzas davart tut ils trais per generar in pont
HolosAccent·
·5 min da leger
Translatà da English · Legia l'original
Preparar tia registraziun
Primier, l’audio vegn decodà en in format standard: son mono cun campionament a 16 kHz.
Il sistem stimarà il rapport signal a bruit da la registraziun. Sche quella stimaziun è sut 25 dB e la filtraziun dal bruit è disponibla, vegn applicà in filter da reducziun dal bruit avant l’analisa. Sche il filtrà sbaglia, il process cuntinuescha cun la registraziun originala.
Suenter vegn la forma d’onda normalisada per correspunder a las pretensiuns d’entrada dal model d’analisa da la lingua. Silenzi e registraziuns pli curtas che ina mesa da secunda retschan in pont zero.
Permetter differentas pronunciaziuns
Suenter, il text da referenza vegn convertì en pronunciaziuns foneticas cun in motor da pronunciaziun. In pled po avair pliras furmas acceptadas.
Il set da pronunciaziuns cumpiglia:
- Variantas britannicas e americanas.
- Formas ridutas cuminaivlas, sco la vocal senza accent en to.
- Alternativas contextuala tschernidas.
Per exempel, la consonanta finala en close the door è diversa da quella en a close friend. Il sistem po tscherner tranter las alternativas sustegnidas durant il processament da la frasa.
Ascoltar ils sunids, betg reconstrui pleds
La registraziun passa tras in model acustic. El genera evidenzas per differents sunids da lingua cun il temp, a intervalls da circa 20 millisecondas.
Quai è ina representaziun fonetica da la registraziun. Il pontader n’utilisescha betg in model da lingua a nivel da pled per reconstrui la frasa.
Il sistem suenter examina quels outputs acoustics en duas manieras:
| Metod | Tge fa |
|---|---|
| Alinament da sunids spetgads | Chattà il temp optim per ils sunids spetgads, tschernind ina variant cumpletta da pronunciaziun per mintga pled. |
| Riconuschientscha da sunids independenta | Sia suenter ils sunids preferids dal model senza pretender la frasa da referenza. |
Entrambas vistas èn necessarias perquai che l’alinament po plaçar in sunid spetgà en ina part da la registraziun er sch’il pledader l’ha omess. La riconuschientscha da sunids independenta furnescha evidenzas supplementaras davart tge è propi vegnì dit.
Il confront tena era en consideraziun il temp, rendend pli grev che in sunid en in pled serva sco evidenza per in pled pli lunsch.
Pontar mintga sunid
Per mintga sunid alinià, il pontader calculescha ina mesira da precisiun da pronunciaziun: quant ferm il model sustegna il sunid spetgà en rapresentaziun als sunids concurrents durant quel interval.
El considerescha era:
- La probabladad maximala dal sunid spetgà.
- Sche la riconuschientscha da sunids independenta ha chattà in sunid correspundent davos.
Ina mapaziun matematica adattada transfurma questa evidenza en in valur da precisiun dal sunid tranter 0 e 100.
In sunid che manca en il resultat da la riconuschientscha independenta na recepda betg automaticamain zero. L’evidenza acustica conta anc.
Decider tge pleds basegnan attenziun
Il feedback da pleds cumina quels valurs da sunids cun controlls d’error explicits. In pled sto:
- Avair avunda evidenza che sia vegnì dit.
- Rispettar il prag da precisiun media configurà.
- Evitar substituziuns, inserziuns u grevas errurs da sunids mancants detectads.
Substituziuns cleras pretenden ina sustegn debla per il sunid spetgà e ina sustegn ferm per in sunid concurrents.
| Evidenza | Prag actual |
|---|---|
| Sustegn per il sunid spetgà | Sut 0.05 |
| Sustegn per sia substituziun | Almain 0.5 |
Quests èn prag da evidenza dal model, betg probabilitads che in udader uman giudichescha il pled sco errà.
Per pleds marcads, il sistem returna la pronunciaziun spetgada e sia stimaziun dals sunids udids, scritta en l’Alfabet Fonetich Internaziunal (IPA). Quella stimaziun po esser imperfecta, specialmain rond ils limits da pleds.
Construir il pont da la frasa
Il pont da la frasa cumenza cun ina combinaziun adattada da:
- Precisiun media dal sunid.
- La part da sunids spetgads che correspundan cun la riconuschientscha da sunids independenta.
- Il numer da sunids da lingua pronunziads per secunda.
- Pausas lungas tranter pleds.
Il calcul dal temp exclui silenzi avant il prim sunid alinià e suenter il ultim.
Questas caracteristicas contribuissan a in pont cumplain. L’implementaziun actuala na porscha betg ponts separads per fluenza, cumpletaziun u intonaziun per l’utilisader.
Co il credit da pled influenzescha il resultat
Il pontader alura applica in multiplicader da credit da pled explicit. Mintga pled è ponderà tenor il numer da sunids en sia pronunciaziun tschernida.
| Resultat dal pled | Credit ricavà |
|---|---|
| Correct | Pesa cumpletta |
| Pronunzià ma marcà | Ina quart da sia pesa |
| Omiss | Nagin credit |
Il calcul è:
word credit =
(correct sound weight + 0.25 × flagged spoken sound weight)
/ total expected sound weight
raw score =
sentence estimate, clipped to 0–100, × word credit
Consequaint, in pled lung sbaglià costa normalmain pli pli che in pled curt. Leger mo ina pitschna part da la frasa limita era il pont, er sch’il fragment sona cler.
Cumparar tes pont cun la referenza
Finalmain, il sistem po normalisar il pont brut cun ina registraziun da referenza da la medema frasa.
El pontescha la referenza sintetgada cun la medema versiun dal pontader e, sche ina basa da confront utilisabla è gia disponibla, applica:
displayed score = min(100, raw score / reference score × 100)
Per exempel, in pont brut da 80 cun in pont da referenza da 88 daventa circa 90.9.
Questa regulaziun tegna conto dal fatg che il model po attribuir anc a la registraziun da referenza damain da 100.
Basas da confront èn ligiaas a:
- La vusch da referenza e il model da generaziun da lingua.
- Il model da pontaziun.
- Il vocabular.
- La versiun da calibraziun e da reglas.
Sche ina basa da confront n’è betg disponibla u n’è betg utilisabla, il resultat mantegna il pont brut. Uschia po in empruvis prim restar senza regulaziun entant che ina basa vegn preparada per empruvaments suandants.
Tge signifitgescha tes pont
Il numer resultant è in pont da pratica sin la scala da HolosAccent.
In pont da 90 na signifitgescha betg che il 90 % da tes pleds è correct, e na stabilescha betg in nivel CEFR ni l’equivalenza cun in nativ.
La mapaziun è vegnida adattada cun registraziuns valitàdas da experts, ma il nov sistem da pontaziun resta experimental e ses critaris da acceptaziun cumplauns n’han anc betg vegnì verifitgads. El po perder errurs u marcar discurs acceptabel.
Il feedback individual da pleds e ils patterns tras empruvaments repetids furneschan context per interpretar il numer.
