Samsung подробно описала процесс создания фотографий на Galaxy S21
Недавно Samsung рассказала, как создавался рингтон для флагманов серии Galaxy S21. Теперь же компания поделилась подробностями того, как в новых смартфонах работает искусственный интеллект при создании фотографий. В частности, разработчики объяснили, что происходит в момент нажатия кнопки спуска затвора.
При съемке селфи камера сначала определяет лица на изображении, затем отделяет их от остальных деталей кадра и применяет различные улучшения, чтобы кадр получился максимально качественным. Для этого повышается детализация волос, глаз и черт лица, а баланс белого настраивается таким образом, чтобы выдать наиболее естественные оттенки кожи в любой обстановке. Важно, что все это работает не только при использовании стандартного приложения камеры, но и сторонних программ.
Обновленный портретный режим, ранее известный как Live Focus, использует улучшенное 3D-зондирование для создания фотографий с большей глубиной. При использовании этого режима можно выбрать один из доступных эффектов, включая «Размытие», «Студийное освещение» и другие. При нажатии кнопки спуска затвора ИИ начинает сегментирование изображения. Работает это следующим образом:
- Слой сегментации: ИИ распознает людей или домашних животных в сцене, генерируя слой сегментации для каждого отдельного объекта.
- Исходный слой: на основе карты сегментации создается исходный слой объектов, к которому будут применяться выбранные эффекты. Например, на фотографии двух людей фоновая карта отделяет фон от основных объектов.
- Трехмерный слой: в ходе обработки изображения добавляется трехмерный слой поверх исходного для определения объекта, фона и областей, где они сходятся.
- Матовый слой: затем к трехмерному слою применяется матирование, чтобы выделить детали волос и черты лица объектов.
- Оценка глубины: одновременно с этим ИИ измеряет информацию о глубине, чтобы определить детали фона и глубину резкости.
Во время съемки в портретном режиме камера автоматически определяет всех людей в кадре и даже наличие животных.
На этапе создания трехмерного слоя черным цветом определяется фон, белым - объект съемки, а серым выделяются неопределенные области. На этом этапе алгоритм понимает, что размытие не нужно применять к объекту съемки. После этого создается матовый слой для уточнения деталей в серых областях. В это время ИИ использует исходную карту для уточнения этих деталей, а затем слои объединяются и масштабируются для создания окончательного снимка. Все это происходит примерно за три секунды.
Оценить возможности камеры новых флагманов можете в нашем материале.
