Chatolliers

Интерактивная инсталляция демонстрирует возможность использования нейросетей для распознавания юмора по речи.

 Результат работы алгоритма выводиться на бегущую строку в формате смешно/не смешно, также полученный с микрофона аудиосигнал преобразовывается в визуальное представление акустических характеристик, а именно спектральный контраст.

Проект направлен на применение и демонстрацию возможностей использования нейросетевых алгоритмов для распознавания юмора по речи. Нейросеть обучается на двух датасетах аудиоданных: первый – речь комедийных артистов, второй – тот же самый текст, сгенерированный с помощью text-to-speech с минимальными интонационными выражениями.

Зрители могут говорить в микрофон, либо поднести к микрофону один из наушников, в которых воспроизводятся аудио комического и некомического содержания.

Проект создан в рамках магистратуры «Технологическое искусство» в НИТУ «МИСиС», 2022 год