Mikä on automaattinen huulien lukeminen?

Huulien lukeminen on tuskin uusi kommunikaatiomuoto: se on kuurojen yhteisön ensisijainen työkalu, puhumattakaan hyödyllisestä taidosta viestien välittämiseen äänekkään puolueen tai lasten pään yli. Uusi tekniikan muoto yrittää kuitenkin koneistaa tätä ikivanhaa viestintämenetelmää. Automaattinen huulien lukeminen, joka tunnetaan myös nimellä automaattinen puheen lukeminen, on kasvava puheentunnistustekniikan haara. Teoriassa tarkkailemalla puhujan huuliliikkeitä ja muita siihen liittyviä elementtejä erityiset tietokoneohjelmat voivat tulkita sanallisia viestejä, vaikka meluhäiriöt tai muut esteet estäisivät ihmisen äänen kuulemisen kunnolla.

Yleensä automaattinen huulten lukeminen vaatii videon kaiuttimesta. Huulien muodostamat muodot ja rytmit ovat usein tärkeimpiä tulkinnan tekijöitä, mutta myös monet muut liikkeet voivat auttaa tulkitsemaan puhujan sanoman. Kasvojen ilme ja pään liikkeet voivat olla ratkaisevia tekijöitä. Jos käytettävissä on hyödyllistä ääntä, automaattinen huulilukuprosessi helpottuu merkittävästi, koska kuultavan osan kontekstivihjeet voivat ehdottaa kuulumattomia sanoja tai puhepätkiä.

Automaattisen huulilukutekniikan kehittäminen perustuu kykyyn tunnistaa yksittäiset sanat, jotka käyttävät samoja huuliliikkeitä joka kerta kun ne puhutaan. Lip Geometry Estimation (LGE) on yksi kehittyneimmistä tietokonejärjestelmistä, joka valvoo ja tulkitsee tällaisia ​​malleja. Tutkijat ovat kehittäneet merkittävän automaattisen huulten luku- ja puheentunnistusjärjestelmän hollannin kielelle, mutta yleensä alalla on vielä paljon kehitystyötä.

Automaattinen huulien lukeminen on saanut viime aikoina kiinnostusta ja huomiota, koska se on otettu käyttöön Adolf Hitlerin arkistoiduissa kotivideoissa. Eva Braunin sodan aikana kuvaamat kerran hiljaiset elokuvat heräsivät eloon, kun kuvamateriaaliin sovellettiin puheentunnistustekniikkaa. Riippumatta siitä, ovatko tulkinnat täysin tarkkoja, automaattinen huulilukuohjelma on antanut vilauksen historialliseen hahmoon, joka epäilemättä herättää jatkuvaa kiinnostusta automaattisen huulilukemisen alalla.