Нейросеть обучили верно отображать некоторые детали графики, которые она подменяла, остальное было взято из игры. Нереалистичным оказался только зеленоватый оттенок изображения.
На YouTube появилось видео от Intel Labs с измененной нейросетью графикой GTA V. Благодаря машинной обработке езда на транспорте выглядит более реалистичной за исключением того, что изображение имеет зеленоватый оттенок.
Связано это с тем, что нейросеть обучали на кадрах, снятых на видеорегистратор в Берлине, а этот город не такой солнечный, как Калифорния, чьи пейзажи брались за основу для GTA V. Данные об освещении, объеме и расположении объектов нейросеть черпала напрямую из игры.
Нейросеть обучили отслеживать блики, правильное отображение цвета и контраста, а также траву. В результате получилась почти идеально реалистичная картинка.
Фото: Intel ISL / YouTube