Дипфейки становятся проблемой и в космической отрасли. Специалисты обеспокоены тем, что спутниковые снимки иногда используются не по назначению и в низких целях.
Что такое дипфейки?
Дипфейки – это созданный синтетически медиаконтент, который изменяет внешний вид изображения, заменяя одну сцену другой. Такие альтернативные варианты изображения генерируются с помощью машинного обучения и, как правило, методов нейронных сетей глубокого обучения, которые изменяют изображение.
Как создаются дипфейки спутниковых снимков?
Общий набор методов, используемых для дипфейков, включает в себя генеративные состязательные сети (GAN) и циклически последовательные состязательные сети (Cycle gang), которые и используются для создания дипфейков спутниковых изображений.
Этот алгоритм применяет нейронную сеть, которая автоматически обучает image-to-image модели, переводящие местоположение x и y без парных обучающих примеров. Это неконтролируемый метод, использующий коллекцию изображений, которая находит сопоставимые изображения и может заменить изображение местоположения другим местоположением, сохраняя при этом реалистичный внешний вид всей сцены. Например, распространенные приложения включают преобразование одного животного или человека в другое похожее животное или в другого человека (например, замена лошади и зебры).
Такие алгоритмы используются для космических дипфейков, они меняют местами объекты или местоположения на спутниковых снимках с высоким разрешением. Хотя такие алгоритмы являются относительно новыми для спутниковых снимков и создания карт в целом, дипфейки являются частью манипулирования географическими данными. Другими словами, мотивы для создания дипфейков не новы, даже если используемые в настоящее время методы разработаны относительно недавно.
Обнаружение дипфейков спутниковых снимков
Дипфейки не просто используются для высмеивания людей или организаций, но рассматриваются также как потенциальная угроза странам и их безопасности. Чтобы противостоять дипфейкам, были созданы алгоритмы для определения дипфейковых изображений.
Общая сеть поддельных признаков (CFFN) – это один из методов определения дипфейковых изображений. Он часто используется наряду со стандартными сверточными нейронными сетями (CNN), которые обнаруживают потенциальные различающие признаки с помощью попарного обучения и предполагают потенциальное изменение или чередование изображения. Другие методы включают извлечение пространственных объектов с использованием SSTNet, извлекающим объекты и временные данные для изменения изображений.
В целом, исследователи противопоставили дипфейковые модели нейронных сетей другим нейронным сетям, которые могут перепроектировать или обнаруживать формы и пиксели, изменяющихся от одного кадра к другому, или просто обнаруживать изменения, отличающиеся от ожидаемых. Некоторые методы даже ищут изменения в шуме или других артефактах, распространенных в изображениях, которые могут отсутствовать или изменяться в дипфейках. Хотя многие из этих методов применяются к изображениям и видеоконтенту в Интернете, исследователи видят, что они также полезны для спутниковых снимков.