Искусственный интеллект научили читать по губам

Ученые Оксфордского университета кафедры информатики научили искусственный интеллект читать по губам. LipNet – не первая подобная программа, но на сегодняшний момент она является самой точной, распознавая до 93,4% слов. Для сравнения, максимальный результат опытного в этом деле человека составляет 52%.

На основании предыдущих исследований ученые поняли, что люди лучше читают по губам, когда произносятся более длинные слова. Поэтому вместо того, чтобы анализировать кадры чьей-то речи и разгадывать слово за словом, LipNet берет для анализа целые предложения, используя технику глубокого обучения, чтобы затем возвратиться и расшифровать каждое слово в отдельности.

На практике это устройство может стать полезным инструментом для глухих и слабослышащих людей. Даже если они уже умеют читать по губам, LipNet значительно облегчит им этот процесс.