Kurti algoritmus darbui su vaizdais visada buvo gana sudėtinga, tačiau daug žadanti užduotis. Kai dar rašiau savo 1999 m. Baigimo projektą, „modelio atpažinimo“tema buvo labai aktuali automatinėse valdymo ir valdymo sistemose.
- „Salik.biz“
Štai ką jie gali padaryti šiandien. Indijos kūrėjai pristatė sistemą, kuri iš neryškių vaizdų gali sukurti trumpus vaizdo įrašus. Algoritmas veikia konvoliucinių ir pasikartojančių neuronų tinklų pagrindu ir leidžia paversti judesio artefaktus vaizduose į trumpą (iki dešimties kadrų) vaizdo įrašą.
Daugiau informacijos …
Peržiūrėdamas neryškų vaizdą, žmogus gali protiškai užpildyti tai, kas vyksta. Pavyzdžiui, žiūrint į paukščio su pūkuotais sparnais nuotrauką, galima manyti, kad vaizdas susilieja dėl artefaktų, susijusių su sparnų judėjimu gaudymo metu. Tačiau kompiuterinėms regos sistemoms ši užduotis yra sunkesnė, o dauguma žinomų metodų yra skirti tik pašalinti judesio artefaktus ir išlyginti rėmus.
Indijos technologijos instituto, kuriam vadovauja AN Rajagopalan, mokslininkai pasiūlė, kad vieną neryškų vaizdą būtų galima naudoti norint sukurti visą trumpą vaizdo įrašą: tai yra, atkurti originalų judesį iš jo atvaizdo artefaktų. Norėdami tai padaryti, jie sukūrė algoritmą, pagrįstą konvoliuciniais neuroniniais tinklais, kurie aktyviai naudojami užduotims, susijusioms su automatiniu vaizdo atpažinimu, taip pat pasikartojantiems neuroniniams tinklams.
Modelis mokomas daugybės vaizdo įrašų, kurie yra padalijami į rėmus. Po to neuroninis tinklas ieško tokio rėmo, kurio artefaktai labiausiai atitinka treniruočių imties rėmelio artefaktus. Po to dekoderis „atkuria“treniruočių pavyzdžių kadrų artefaktus į judesį, užfiksuotą vaizdo įraše. Taigi, modelis kaupia duomenis apie galimus atkuriamus judesius iš kiekvieno neryškaus kadro, esančio mokymo pavyzdyje.
Reklaminis vaizdo įrašas:
Dėl šio darbo neuroninis tinklas sukuria vaizdo įrašą, rekonstruotą iš neryškaus vaizdo, sudarytą iš dešimties kadrų. Sukurtas algoritmas, anot kūrėjų, ateityje galės padėti tobulinti ne tik neryškių vaizdų, bet ir pačių vaizdo įrašų atkūrimą.
Judesio artefaktų pašalinimas iš atskirų kadrų taip pat gali pagerinti vaizdo transliaciją. Iki šiol šiam tikslui naudojami daugiausia algoritmai, skirti pritaikyti bitrate, atsižvelgiant į vaizdo įrašo greitį ir jo buferį.
Elizaveta Ivtushok