Компания Apple представила новую генеративную систему FaceLit, которая способна генерировать 3D лица на основе 2D изображений без необходимости в ручной аннотации. Это революционное решение позволяет создавать фотореалистичные изображения лиц при различных условиях освещения и ракурсах, с использованием модели отражения Phong в нейронной схеме объемного рендеринга. Технология учитывает естественную статистику позы и освещенности, чтобы достичь согласованности и фотореалистичности изображений.
FaceLit позволяет генерировать фотореалистичные лица с высокой степенью управления освещением и видом на нескольких наборах данных, таких как FFHQ, MetFaces и CelebA-HQ. Метод демонстрирует самый высокий уровень фотореализма среди GAN с поддержкой 3D на наборе данных FFHQ, достигая оценки FID 3,5.