La fonction Nightography de Samsung vous permet de prendre de superbes photos dans l’obscurité. Si vous aimez prendre des photos la nuit, mais que vous détestez la façon dont elles deviennent floues et ternes, Samsung a une solution pour vous. La fonction Nightography de la société a été introduite pour la première fois dans la série Galaxy S22. Et amélioré pour la série Galaxy S23. Il utilise l’intelligence artificielle avancée et l’imagerie informatique pour fournir des photos vives et hautement optimisées, même dans des conditions de faible luminosité.
Selon les chercheurs de Samsung, Nightography combine plusieurs images d’expositions différentes. Et applique des algorithmes de réduction du bruit et de mappage des tons pour créer une image unique qui conserve les détails et les couleurs. La fonctionnalité s’adapte en outre à différents scénarios, tels que les paysages urbains, les paysages ou les portraits, et ajuste la luminosité et le contraste en conséquence.
La nightographie est l’art de capturer la beauté cachée de l’obscurité, pas seulement de la faire paraître un peu moins sombre. Il s’agit de capturer l’ambiance et l’atmosphère de la nuit avec des couleurs réalistes et des tons de peau naturels, a déclaré le Dr Lee Seung-hwan, responsable du laboratoire de photographie computationnelle de Samsung Research. Il a ajouté que leur objectif était de fournir aux utilisateurs la possibilité de capturer des photos de nuit à couper le souffle qu’ils peuvent partager en toute confiance avec leurs proches. »
John Seok-Jun Lee et Narasimha Gopalakrishna Pai dirigent les équipes caméra et IA de Samsung en Amérique et en Inde. Ils ont parlé de la façon dont ils ont travaillé ensemble pour faire transpirer Nightography.
Les chercheurs s’attaquent à la fonctionnalité révolutionnaire S23
John Seok-Jun Lee a déclaré que Nightography permet aux utilisateurs d’obtenir des photos définitives dans des environnements peu éclairés. La caméra S23 collecte une série d’images avec différents niveaux de luminosité, puis applique la technologie de traitement multi-images (MFP). Cette technologie examine les images et élimine les images avec du bruit ou du flou. Et fusionne ensuite les images restantes en une seule photo claire avec HDR. Ensuite, un algorithme ISP alimenté par l’IA sur NPU améliore la couleur, le ton et les détails de la photo.
En plus de cela, Narasimha Gopalakrishna Pai a déclaré que la qualité d’image de Nightography sur le Galaxy S23 a connu une remarquable amélioration de la luminosité. Également sans compromettre le contrôle du bruit, de la clarté et de la saturation autour des sources lumineuses telles que les enseignes au néon. L’équipe SRI-B a utilisé le Snapdragon 8 Gen 2, qui est exclusif à la série Galaxy S23. Ainsi, pour optimiser le pipeline multi-frame et accélérer les modèles Al. Cela s’est traduit par un traitement plus rapide et une utilisation de la mémoire inférieure à celle du Galaxy S22.
Lire également-Samsung One UI 5.1 arrive sur la série actuelle et la nouvelle série Galaxy S23
Collaboration R&D réussie pour la nuitographie entre MPI et SRI-B
Grâce à l’analyse et à la fusion de plusieurs entrées capturées, des améliorations sont apportées au rapport signal/bruit (SNR) et à la plage dynamique. Tout en optimisant le flou causé par les mouvements de caméra ou d’objet. Pour améliorer davantage les détails des photos et supprimer les niveaux de bruit élevés, SRA MPI a collaboré avec l’équipe de solutions visuelles MX. Par conséquent, pour développer et optimiser le traitement du signal d’image Al (ISP).
SRI-B a été chargé de développer et d’optimiser le pipeline d’algorithmes, ainsi que d’accélérer les modèles Al en utilisant toutes les unités de calcul disponibles sur le plate-forme, y compris CPU multicœur, NPU et GPU. De plus, SRI-B a conçu un module de débruitage Al qui réduit efficacement le flou de mouvement dans la sortie finale. De plus, SRI-B a créé Night Portrait, qui permet à l’appareil photo selfie Galaxy S23 de capturer de superbes photos de nuit.
A lire également-Avec Galaxy Experience Space, Samsung apporte des expériences épiques en personne
Surmonter les défis croissants
John Seok-Jun Lee a déclaré lorsqu’on lui a demandé comment ils avaient surmonté les défis auxquels ils étaient confrontés lors du développement de cette fonctionnalité étonnante. Il a déclaré que les caméras des smartphones captent beaucoup moins de lumière la nuit que pendant la journée ou dans les scènes d’intérieur, ce qui se traduit par des images d’entrée plus sombres avec des niveaux de bruit plus élevés, un flou et une plage dynamique plus étroite. Le simple fait d’augmenter la luminosité de ces images peut entraîner des effets indésirables tels que le bruit, le flou et la distorsion des couleurs. C’est là que la technologie AI MFP de Nightography entre en jeu, exécutant des tâches d’analyse complexes pour déterminer les points de réglage optimaux et tirant parti d’un FAI alimenté par Al pour analyser chaque pixel et produire des images nocturnes spectaculaires.
De plus, Narasimha Gopalakrishna Pai a ajouté que Nightography utilise une méthode multi-images pour capturer et traiter de nombreuses images. De plus, jetez ceux qui possèdent du flou et des artefacts. Pour garantir à l’utilisateur une expérience transparente lors de la capture de photos, l’équipe SRI-B a produit un pipeline informatique hétérogène qui exploite toutes les unités de calcul disponibles sur le CPU, le NPU et le GPU pour un traitement MFP rapide. De plus, SRI-B a relevé le défi de développer et d’optimiser des modèles Al haute résolution pour les smartphones. Ceci est accompli en travaillant en étroite collaboration avec les équipes de SRA MPI et MX Visual Solutions.
Lire aussi-La série Galaxy Book3, la dernière gamme phare de PC Windows 11 de Samsung
Objectifs futurs pour la série S23 et séries à venir
SRA MPI prévoit de relever le défi de la photographie en basse lumière dans les appareils photo mégapixels élevés en tirant parti de la technologie Al MFP de nouvelle génération. De plus, l’équipe vise à améliorer la qualité de la vidéo Nightography pour qu’elle corresponde à celle de la photo Nightography. L’objectif ultime est d’améliorer la qualité d’image et l’expérience utilisateur en améliorant continuellement Nightography et Expert RAW pour toutes les résolutions d’image. En outre, l’équipe prévoit d’explorer le potentiel d’application de Nightography à d’autres appareils haut de gamme au-delà de la série Galaxy S23.
Lire également-Samsung Electronics expose la traduction automatique primée au WMT