Apple представила ИИ, который кардинально улучшит ночную съёмку на iPhone

Исследователи Apple разработали нейросетевую модель DarkDiff, способную кардинально улучшить качество фотографий, сделанных в почти полной темноте. Ключевая инновация — интеграция алгоритма на основе диффузионной модели (аналогичной Stable Diffusion) непосредственно в конвейер обработки изображения камеры (ISP).

Традиционные алгоритмы шумоподавления в условиях недостатка света часто создают неестественно «гладкие» снимки, теряя детали. DarkDiff, обученный на миллионах изображений, анализирует сырые данные с сенсора, понимает, какие детали должны находиться в тёмных областях, и восстанавливает их, сохраняя естественную текстуру и цвет.

Технология показала превосходство над современными аналогами в тестах на реальных фотографиях, сделанных с очень короткой выдержкой. Однако у неё есть существенные ограничения: высокая требовательность к вычислениям и проблемы с распознаванием неанглоязычного текста в темноте.

В настоящее время работа остаётся исследовательской и не означает скорого появления DarkDiff в iPhone. Тем не менее, она демонстрирует стратегический фокус Apple на развитии вычислительной фотографии — области, критически важной для рынка смартфонов, где физические ограничения камеры преодолеваются программными алгоритмами.