Использование видео-последовательностей для предобучения сверточных искусственных нейронных сетей

В работе представлено исследование на тему обучения нейронной сети, выполняющей задачу определения динамики на входном изображении, а также задачу генерации следующего состояния запечатленного участка с учетом изменяющихся динамических объектов на изображении. Были построены различные нейронные сети: сверточная нейронная сеть, определяющая направление хода времени между двумя соседними кадрами видеоряда, а также генеративная сеть, предсказывающая следующий кадр по одному предыдущему. Для построения генеративной сети были рассмотрены разные подходы, одним из которых является генеративная состязательная сеть. Также, был поведен анализ внутренних слоев классифицирующей сети при помощи визуализации отдельных нейронов, который позволил выявить некоторые интересные особенности обученной сети.