ИИ научили «читать» по губам

@RYBINSKonLine

Международная команда специалистов смогла научить нейросеть «читать» по губам. В этом им помогло специально созданное видео.

На протяжении длительного периода времени ученые думали, как им создать максимально простое приложение, которое могло бы освоить столь сложную технику. В результате эксперты все же смогли разработать программу, которая эффективно использует технологию работы распознавания звуковых фраз. Известно, что она поглощает все аудиоданные из видеозаписи, ориентируясь при этом на контекст и движения речевого аппарата спикера. Уже после этого нейросеть способна сопоставить данные на видео с полученными.

Исследователи отметили, что в данной схеме нейросеть, которую учились с помощью огромного количества информации, выступает в роли модели-учителя для нейросети-ученика. Созданный алгоритм, по мнению авторов разработки, является в разы эффективнее ранее созданных программ.