Multi-caméra au lieu de mégapixels

La photographie dans les téléphones portables a déjà dépassé la grande guerre des mégapixels, que personne ne pouvait gagner, car il y avait des limitations physiques dans les capteurs et la taille des smartphones qui empêchaient une miniaturisation supplémentaire. Maintenant, il existe un processus similaire à un concours, qui mettra le plus à la caméra (1). Dans tous les cas, au final, la qualité des photos est toujours importante.

Au premier semestre 2018, en raison de deux nouveaux prototypes d'appareils photo, une société inconnue Light a parlé assez fort, qui propose une technologie multi-objectifs - pas pour son époque, mais pour d'autres modèles de smartphones. Bien que l'entreprise, comme MT l'écrivait à l'époque, déjà en 2015 modèle L16 avec seize objectifs (1), ce n'est que depuis quelques mois que la multiplication des caméras dans les cellules est devenue populaire.

Appareil photo plein d'objectifs

Ce premier modèle de Light était un appareil photo compact (pas un téléphone portable) de la taille d'un téléphone conçu pour offrir la qualité d'un reflex numérique. Il tournait à des résolutions allant jusqu'à 52 mégapixels, offrait une plage de focales de 35 à 150 mm, une haute qualité en basse lumière et une profondeur de champ réglable. Tout est rendu possible en combinant jusqu'à seize caméras de smartphone dans un seul boîtier. Aucun de ces nombreux objectifs ne différait de l'optique des smartphones. La différence était qu'ils étaient collectés dans un seul appareil.

2. Caméras lumineuses multi-objectifs

Pendant la photographie, l'image a été enregistrée simultanément par dix appareils photo, chacun avec ses propres réglages d'exposition. Toutes les photographies prises de cette manière ont été combinées en une seule grande photographie, qui contenait toutes les données d'expositions uniques. Le système permettait de modifier la profondeur de champ et les points de mise au point de la photographie finale. Les photos ont été enregistrées aux formats JPG, TIFF ou RAW DNG. Le modèle L16 disponible sur le marché n'avait pas le flash typique, mais les photographies pouvaient être éclairées à l'aide d'une petite LED située dans le corps.

Cette première en 2015 avait le statut de curiosité. Cela n'a pas attiré l'attention de nombreux médias et du grand public. Cependant, étant donné que Foxconn a agi en tant qu'investisseur dans Light, les développements ultérieurs n'ont pas été une surprise. En bref, cela reposait sur l'intérêt croissant pour la solution des entreprises coopérant avec l'équipementier taïwanais. Et les clients de Foxconn sont à la fois Apple et, notamment, Blackberry, Huawei, Microsoft, Motorola ou encore Xiaomi.

Ainsi, en 2018, des informations sont apparues sur le travail de Light sur les systèmes multi-caméras dans les smartphones. Ensuite, il s'est avéré que la startup a collaboré avec Nokia, qui a présenté le premier téléphone à cinq caméras au monde au MWC de Barcelone en 2019. Modèle 9 PureView (3) équipé de deux caméras couleur et de trois caméras monochromes.

Sveta a expliqué sur le site Web de Quartz qu'il existe deux différences principales entre le L16 et le Nokia 9 PureView. Ce dernier utilise un système de traitement plus récent pour assembler des photos à partir d'objectifs individuels. De plus, la conception de Nokia comprend des caméras différentes de celles utilisées à l'origine par Light, avec des optiques ZEISS pour capter plus de lumière. Trois caméras ne capturent que la lumière noire et blanche.

Le réseau de caméras, chacune avec une résolution de 12 mégapixels, offre un meilleur contrôle sur la profondeur de champ de l'image et permet aux utilisateurs de capturer des détails qui sont normalement invisibles pour une caméra cellulaire conventionnelle. De plus, selon les descriptions publiées, le PureView 9 est capable de capturer jusqu'à dix fois plus de lumière que les autres appareils et peut produire des photos avec une résolution totale allant jusqu'à 240 mégapixels.

Le démarrage brutal des téléphones multi-caméras

La lumière n'est pas la seule source d'innovation dans ce domaine. Un brevet de la société coréenne LG daté de novembre 2018 décrit la combinaison de différents angles de caméra pour créer un film miniature rappelant les créations Apple Live Photos ou les images des appareils Lytro, dont MT a également parlé il y a quelques années, capturant un champ lumineux avec un champ de vision réglable. .

Selon le brevet LG, cette solution est capable de combiner différents ensembles de données provenant de différents objectifs pour découper des objets de l'image (par exemple, dans le cas du mode portrait ou même d'un changement complet d'arrière-plan). Bien sûr, ce n'est qu'un brevet pour l'instant, sans aucune indication que LG envisage de l'implémenter dans un téléphone. Cependant, avec l'escalade de la guerre de la photographie sur smartphone, les téléphones dotés de ces fonctionnalités pourraient arriver sur le marché plus rapidement que nous ne le pensons.

Comme nous le verrons en étudiant l'histoire des appareils multi-objectifs, les systèmes à deux chambres ne sont pas nouveaux du tout. Cependant, le placement de trois caméras ou plus est la chanson des dix derniers mois..

Parmi les principaux fabricants de téléphones, le chinois Huawei a été le plus rapide à commercialiser un modèle à triple caméra. Déjà en mars 2018, il avait fait une offre Huawei P20 Pro (4), qui offrait trois objectifs - normal, monochrome et télézoom, introduit quelques mois plus tard. Maté 20, également avec trois caméras.

Cependant, comme cela s'est déjà produit dans l'histoire des technologies mobiles, il suffisait d'introduire audacieusement de nouvelles solutions Apple dans tous les médias pour commencer à parler d'une percée et d'une révolution. Comme le premier modèle iPhone' en 2007, le marché des smartphones précédemment connus a été "lancé", et le premier IPad (mais pas la première tablette du tout) en 2010, l'ère des tablettes s'est ouverte, donc en septembre 2019, les iPhones multi-lentilles "eleven" (5) de la société avec une pomme sur l'emblème pourraient être considérés comme un début abrupt de l'ère des smartphones multi-caméras.

11 Pro раз 11 par max équipé de trois caméras. Le premier a un objectif à six éléments avec une distance focale plein format de 26 mm et une ouverture f / 1.8. Le fabricant affirme qu'il dispose d'un nouveau capteur de 12 mégapixels avec une mise au point à 100 % sur les pixels, ce qui pourrait signifier une solution similaire à celles utilisées dans les appareils photo Canon ou les smartphones Samsung, où chaque pixel est constitué de deux photodiodes.

Le deuxième appareil photo a un objectif grand angle (avec une distance focale de 13 mm et une luminosité de f / 2.4), équipé d'une matrice avec une résolution de 12 mégapixels. En plus des modules décrits, il existe un téléobjectif qui double la distance focale par rapport à un objectif standard. Il s'agit d'une conception d'ouverture f/2.0. Le capteur a la même résolution que les autres. Le téléobjectif et l'objectif standard sont équipés d'une stabilisation optique de l'image.

Dans toutes les versions, on retrouvera les téléphones Huawei, Google Pixel ou encore Samsung. mode nuit. C'est aussi une solution caractéristique pour les systèmes multi-objectifs. Cela consiste dans le fait que l'appareil photo prend plusieurs photos avec une compensation d'exposition différente, puis les combine en une seule photo avec moins de bruit et une meilleure dynamique tonale.

L'appareil photo dans le téléphone - comment est-ce arrivé ?

Le premier téléphone avec appareil photo était le Samsung SCH-V200. L'appareil est apparu dans les rayons des magasins en Corée du Sud en 2000.

Il pouvait se souvenir vingt photos avec une résolution de 0,35 mégapixels. Cependant, l'appareil photo avait un sérieux inconvénient - il ne s'intégrait pas bien au téléphone. Pour cette raison, certains analystes le considèrent comme un appareil séparé, enfermé dans le même boîtier, et non comme faisant partie intégrante du téléphone.

La situation était tout autre dans le cas de J-Phone', c'est-à-dire un téléphone que Sharp a préparé pour le marché japonais à la fin du dernier millénaire. L'équipement prenait des photos avec une très faible qualité de 0,11 mégapixels, mais contrairement à l'offre de Samsung, les photos pouvaient être transférées sans fil et facilement visualisées sur l'écran d'un téléphone portable. J-Phone est équipé d'un écran couleur qui affiche 256 couleurs.

Les téléphones portables sont rapidement devenus un gadget extrêmement tendance. Cependant, pas grâce aux appareils Sanyo ou J-Phone, mais aux propositions des géants du mobile, principalement à l'époque Nokia et Sony Ericsson.

Nokia 7650 équipé d'un appareil photo de 0,3 mégapixels. C'était l'un des premiers téléphones photo largement disponibles et populaires. Il s'est également bien comporté sur le marché. Sony Ericsson T68i. Pas un seul appel téléphonique avant lui ne pouvait recevoir et envoyer des messages MMS en même temps. Cependant, contrairement aux modèles précédents examinés dans la liste, l'appareil photo du T68i devait être acheté séparément et fixé au téléphone mobile.

Après l'introduction de ces appareils, la popularité des appareils photo dans les téléphones mobiles a commencé à croître à un rythme effréné - déjà en 2003, ils étaient vendus dans le monde entier plus que les appareils photo numériques standard.

En 2006, plus de la moitié des téléphones portables dans le monde avaient un appareil photo intégré. Un an plus tard, quelqu'un a eu l'idée de placer deux lentilles dans une cellule...

De la télévision mobile à la 3D pour une photographie de mieux en mieux

Contrairement aux apparences, l'histoire des solutions multi-caméras n'est pas si courte. Samsung propose dans son modèle B710 (6) double objectif en 2007. Bien qu'à cette époque plus d'attention ait été accordée aux capacités de cet appareil photo dans le domaine de la télévision mobile, le système à double objectif a permis de capturer des souvenirs photographiques dans effet 3D. Nous avons regardé la photo finie sur l'écran de ce modèle sans avoir besoin de porter des lunettes spéciales.

Au cours de ces années, il y avait une grande mode pour la 3D, les systèmes de caméras étaient considérés comme une opportunité de reproduire cet effet.

LG Optimus 3D, dont la première a eu lieu en février 2011, et HTC Evo 3D, sorti en mars 2011, utilisait deux objectifs pour créer des photographies 3D. Ils ont utilisé la même technique que celle utilisée par les concepteurs de caméras 3D "ordinaires", en utilisant deux objectifs pour créer une impression de profondeur dans les images. Cela a été amélioré avec un affichage 3D conçu pour visualiser les images reçues sans lunettes.

Cependant, la 3D s'est avérée n'être qu'une mode passagère. Avec son déclin, les gens ont cessé de penser aux systèmes multicaméras comme un outil pour obtenir des images stéréographiques.

En tout cas pas plus. Le premier appareil photo à offrir deux capteurs d'image à des fins similaires à celles d'aujourd'hui était HTC One M8 (7), publié en avril 2014. Son capteur principal UltraPixel 4MP et son capteur secondaire 2MP ont été conçus pour créer une impression de profondeur dans les photos.

Le deuxième objectif a créé la carte de profondeur et l'a incluse dans le résultat final de l'image. Cela signifiait la possibilité de créer un effet flou d'arrière-plan , recentrez l'image d'une simple pression sur le panneau d'affichage et gérez facilement les photos tout en gardant le sujet net et en changeant l'arrière-plan même après la prise de vue.

Cependant, à cette époque, tout le monde ne comprenait pas le potentiel de cette technique. Le HTC One M8 n'a peut-être pas été un échec du marché, mais il n'a pas non plus été particulièrement populaire. Un autre bâtiment important dans cette histoire, LG G5, est sorti en février 2016. Il comportait un capteur principal de 16 MP et un capteur secondaire de 8 MP, qui est un objectif grand angle de 135 degrés sur lequel l'appareil pouvait être commuté.

En avril 2016, Huawei proposait le modèle en collaboration avec Leica. P9, avec deux caméras à l'arrière. L'un d'eux a été utilisé pour capturer les couleurs RVB (), l'autre a été utilisé pour capturer les détails monochromes. C'est sur la base de ce modèle que Huawei a ensuite créé le modèle P20 susmentionné.

En 2016, il a également été introduit sur le marché iphone 7 plus avec deux caméras à l'arrière - toutes deux de 12 mégapixels, mais avec des focales différentes. Le premier appareil photo avait un zoom de 23 mm et le second un zoom de 56 mm, inaugurant l'ère de la téléphotographie sur smartphone. L'idée était de permettre à l'utilisateur de zoomer sans perte de qualité - Apple voulait résoudre ce qu'il considérait comme un problème majeur avec la photographie sur smartphone et a développé une solution qui correspondait au comportement des consommateurs. Il reflétait également la solution de HTC, offrant des effets bokeh utilisant des cartes de profondeur dérivées des données des deux objectifs.

L'arrivée du Huawei P20 Pro début 2018 signifiait l'intégration de toutes les solutions testées jusqu'à présent dans un seul appareil avec une triple caméra. Un objectif à focale variable a été ajouté au système de capteur RVB et monochrome, et l'utilisation de intelligence artificielle il offrait bien plus que la simple somme d'optiques et de capteurs. De plus, il existe un mode nuit impressionnant. Le nouveau modèle a été un grand succès et au sens du marché, il s'est avéré être une percée, et non un appareil photo Nokia aveuglant par le nombre d'objectifs ou un produit Apple familier.

Précurseur de la tendance à avoir plus d'un appareil photo sur un téléphone, Samsung (8) a également introduit un appareil photo à trois objectifs en 2018. C'était dans le modèle Samsung Galaxy A7.

8. Module de fabrication à double objectif Samsung

Cependant, le fabricant a décidé d'utiliser des lentilles : régulières, grand angle et troisième œil pour fournir des "informations de profondeur" peu précises. Mais un autre modèle Galaxy A9, un total de quatre objectifs sont proposés : ultra-large, téléobjectif, appareil photo standard et capteur de profondeur.

C'est beaucoup parce que Pour l'instant, trois verres sont toujours de série. En plus de l'iPhone, les modèles phares de leurs marques tels que le Huawei P30 Pro et le Samsung Galaxy S10+ ont trois caméras à l'arrière. Bien sûr, nous ne comptons pas le plus petit objectif selfie orienté vers l'avant..

Google semble indifférent à tout cela. Le sien pixel 3 il possédait l'un des meilleurs appareils photo du marché et pouvait « tout » faire avec un seul objectif.

Les appareils Pixel utilisent un logiciel personnalisé pour fournir des effets de stabilisation, de zoom et de profondeur. Les résultats n'étaient pas aussi bons qu'ils auraient pu l'être avec plusieurs objectifs et capteurs, mais la différence était faible, et les téléphones Google ont compensé les petits écarts avec d'excellentes performances en basse lumière. Comme il semble, cependant, récemment dans le modèle pixel 4, même Google est finalement tombé en panne, bien qu'il ne propose toujours que deux objectifs : normal et télé.

Pas arrière

Qu'est-ce qui donne l'ajout de caméras supplémentaires à un smartphone? Selon les experts, s'ils enregistrent à différentes distances focales, définissent différentes valeurs d'ouverture et capturent des lots entiers d'images pour un traitement algorithmique ultérieur (compositing), cela offre une augmentation notable de la qualité par rapport aux images obtenues à l'aide d'un seul appareil photo de téléphone.

Les photos sont plus nettes, plus détaillées, avec des couleurs plus naturelles et une plus grande plage dynamique. Les performances en basse lumière sont également bien meilleures.

De nombreuses personnes qui lisent sur les possibilités des systèmes multi-objectifs les associent principalement au flou de l'arrière-plan d'un portrait bokeh, c'est-à-dire rendant flous les objets au-delà de la profondeur de champ. Mais ce n'est pas tout.

Les caméras de ce type exécutent une gamme de fonctions de plus en plus large, y compris une cartographie XNUMXD plus précise, introduisant réalité augmentée et une meilleure reconnaissance des visages et des paysages.

Auparavant, à l'aide d'applications et d'intelligence artificielle, les capteurs optiques des smartphones assumaient des tâches telles que l'imagerie thermique, la traduction de textes étrangers à partir d'images, l'identification de constellations d'étoiles dans le ciel nocturne ou l'analyse des mouvements d'un athlète. L'utilisation de systèmes multi-caméras améliore considérablement les performances de ces fonctionnalités avancées. Et, surtout, il nous rassemble tous en un seul paquet.

L'histoire ancienne des solutions multi-objectifs montre une recherche différente, mais le problème difficile a toujours été les exigences élevées en matière de traitement des données, de qualité des algorithmes et de consommation d'énergie. Dans le cas des smartphones d'aujourd'hui, qui utilisent à la fois des processeurs de signaux visuels plus puissants qu'auparavant, ainsi que des processeurs de signaux numériques économes en énergie, et même des capacités de réseau neuronal améliorées, ces problèmes ont été considérablement réduits.

Un haut niveau de détail, de grandes possibilités optiques et des effets bokeh personnalisables figurent actuellement en tête de liste des exigences modernes pour la photographie sur smartphone. Jusqu'à récemment, pour les remplir, l'utilisateur de smartphone devait s'excuser à l'aide d'un appareil photo traditionnel. Pas forcément aujourd'hui.

Avec les grands appareils photo, l'effet esthétique est naturel lorsque la taille de l'objectif et la taille de l'ouverture sont suffisamment grandes pour obtenir un flou analogique là où les pixels sont flous. Les téléphones portables ont des lentilles et des capteurs (9) qui sont trop petits pour que cela se produise naturellement (dans l'espace analogique). Par conséquent, un processus d'émulation logicielle est en cours de développement.

Les pixels plus éloignés de la zone de mise au point ou du plan focal sont artificiellement flous à l'aide de l'un des nombreux algorithmes de flou couramment utilisés dans le traitement d'image. La distance de chaque pixel à la zone de mise au point est la meilleure et la plus rapide mesurée par deux photographies prises à environ 1 cm d'intervalle.

Avec une longueur de division constante et la possibilité de prendre les deux vues en même temps (en évitant le bruit de mouvement), il est possible de trianguler la profondeur de chaque pixel d'une photographie (en utilisant l'algorithme stéréo multi-vues). Il est maintenant facile d'obtenir une excellente estimation de la position de chaque pixel par rapport à la zone de mise au point.

Ce n'est pas facile, mais les téléphones à double caméra facilitent le processus car ils peuvent prendre des photos en même temps. Les systèmes avec un seul objectif doivent soit prendre deux photos consécutives (sous des angles différents), soit utiliser un zoom différent.

Existe-t-il un moyen d'agrandir une photo sans perdre en résolution ? téléobjectif ( optique). Le zoom optique réel maximum que vous pouvez actuellement obtenir sur un smartphone est de 5× sur le Huawei P30 Pro.

Certains téléphones utilisent des systèmes hybrides qui utilisent à la fois des images optiques et numériques, vous permettant de zoomer sans perte apparente de qualité. Le Google Pixel 3 mentionné utilise pour cela des algorithmes informatiques extrêmement complexes, il n'est pas surprenant qu'il n'ait pas besoin d'objectifs supplémentaires. Cependant, le Quartet a déjà été mis en œuvre, il semble donc difficile de se passer d'optique.

La physique de conception d'un objectif typique rend très difficile l'installation d'un zoom dans le corps mince d'un smartphone haut de gamme. En conséquence, les fabricants de téléphones ont pu atteindre un maximum de 2 ou 3 fois le temps optique grâce à l'orientation traditionnelle capteur-objectif du smartphone. L'ajout d'un téléobjectif signifie généralement un téléphone plus gros, un capteur plus petit ou l'utilisation d'une optique pliable.

Une façon de traverser le point focal est la soi-disant optique complexe (Dix). Le capteur du module caméra est situé verticalement dans le téléphone et fait face à l'objectif avec l'axe optique longeant le corps du téléphone. Le miroir ou le prisme est placé à angle droit pour réfléchir la lumière de la scène vers l'objectif et le capteur.

10. Optique sophistiquée dans un smartphone

Les premières conceptions de ce type comportaient un miroir fixe adapté aux systèmes à double objectif tels que les produits Falcon et Corephotonics Hawkeye qui combinent un appareil photo traditionnel et un téléobjectif sophistiqué dans une seule unité. Cependant, des projets d'entreprises telles que Light commencent également à entrer sur le marché, utilisant des miroirs mobiles pour synthétiser les images de plusieurs caméras.

Tout le contraire du téléobjectif photographie grand angle. Au lieu de gros plans, une vue grand angle montre davantage ce qui se trouve devant nous. La photographie grand angle a été introduite comme deuxième système d'objectif sur le LG G5 et les téléphones suivants.

L'option grand angle est particulièrement utile pour capturer des moments passionnants, comme être dans une foule lors d'un concert ou dans un endroit trop grand pour être capturé avec un objectif plus étroit. Il est également idéal pour capturer des paysages urbains, des immeubles de grande hauteur et d'autres choses que les objectifs ordinaires ne peuvent tout simplement pas voir. Il n'est généralement pas nécessaire de passer d'un "mode" à l'autre, car l'appareil photo bascule lorsque vous vous rapprochez ou vous éloignez du sujet, ce qui s'intègre parfaitement à l'expérience normale de l'appareil photo intégré. .

Selon LG, 50 % des utilisateurs de double appareil photo utilisent un objectif grand angle comme appareil photo principal.

Actuellement, toute la gamme de smartphones est déjà équipée d'un capteur conçu pour l'exercice. photos monochromesc'est-à-dire en noir et blanc. Leur plus grand avantage est la netteté, c'est pourquoi certains photographes les préfèrent ainsi.

Les téléphones modernes sont suffisamment intelligents pour combiner cette netteté avec les informations des capteurs de couleur pour produire un cadre qui est théoriquement éclairé avec plus de précision. Cependant, l'utilisation d'un capteur monochrome est encore rare. S'il est inclus, il peut généralement être isolé des autres lentilles. Cette option se trouve dans les paramètres de l'application appareil photo.

Étant donné que les capteurs de l'appareil photo ne captent pas les couleurs par eux-mêmes, ils nécessitent une application filtres de couleur sur la taille des pixels. Par conséquent, chaque pixel n'enregistre qu'une seule couleur, généralement le rouge, le vert ou le bleu.

La somme de pixels résultante est créée pour créer une image RVB utilisable, mais il y a des compromis dans le processus. Le premier est la perte de résolution causée par la matrice de couleur, et puisque chaque pixel ne reçoit qu'une fraction de la lumière, la caméra n'est pas aussi sensible qu'un appareil sans matrice de filtre de couleur. C'est là que le photographe sensible à la qualité vient à la rescousse avec un capteur monochrome capable de capturer et d'enregistrer en pleine résolution toute la lumière disponible. La combinaison de l'image de la caméra monochrome avec l'image de la caméra RVB principale donne une image finale plus détaillée.

Le deuxième capteur monochrome est parfait pour cette application, mais ce n'est pas la seule option. Archos, par exemple, fait quelque chose de similaire au monochrome ordinaire, mais en utilisant un capteur RVB supplémentaire à plus haute résolution. Étant donné que les deux caméras sont décalées l'une de l'autre, le processus d'alignement et de fusion des deux images reste difficile et l'image finale n'est généralement pas aussi détaillée que la version monochrome à plus haute résolution.

Cependant, du coup, on obtient une nette amélioration de la qualité par rapport à une photo prise avec un seul module caméra.

Capteur de profondeur, utilisé dans les caméras Samsung, entre autres, permet des effets de flou professionnels et un meilleur rendu AR en utilisant à la fois les caméras avant et arrière. Cependant, les téléphones haut de gamme remplacent progressivement les capteurs de profondeur en intégrant ce procédé dans des appareils photo capables également de détecter la profondeur, comme les appareils dotés d'objectifs ultra-larges ou téléobjectifs.

Bien sûr, les capteurs de profondeur continueront probablement à apparaître dans des téléphones plus abordables et ceux qui visent à créer des effets de profondeur sans optique coûteuse, tels que moto G7.

Réalité Augmentée, c'est-à-dire vraie révolution

Lorsque le téléphone utilise des différences d'images provenant de plusieurs caméras pour créer une carte de distance à partir de celle-ci dans une scène donnée (communément appelée carte de profondeur), il peut ensuite l'utiliser pour alimenter application de réalité augmentée (AR). Il l'assistera, par exemple, dans le placement et l'affichage d'objets synthétiques sur les surfaces de la scène. Si cela se fait en temps réel, les objets pourront prendre vie et bouger.

Apple avec son ARKit et Android avec ARCore fournissent des plates-formes AR pour les téléphones multi-caméras. 

L'un des meilleurs exemples de nouvelles solutions émergeant avec la prolifération des smartphones avec plusieurs caméras est les réalisations de la startup Lucid de la Silicon Valley. Dans certains cercles, il peut être connu comme le créateur Caméra lucide VR180 et la pensée technologique de la conception révolutionnaire de l'appareil photo Rouge 8K 3D. 

Des spécialistes de Lucid ont créé une plateforme Effacer la fusion 3D (11), qui utilise l'apprentissage automatique et des données statistiques pour mesurer rapidement la profondeur des images en temps réel. Cette méthode permet des fonctionnalités qui n'étaient pas disponibles auparavant sur les smartphones, telles que le suivi avancé des objets AR et la gesticulation dans les airs à l'aide d'images haute résolution. 

11. Visualisation de la technologie lucide

Du point de vue de l'entreprise, la prolifération des caméras dans les téléphones est un domaine extrêmement utile pour les capteurs de réalité augmentée intégrés dans les ordinateurs de poche omniprésents qui exécutent des applications et sont toujours connectés à Internet. Déjà, les caméras des smartphones sont capables d'identifier et de fournir des informations supplémentaires sur ce que nous visons. Ils nous permettent de collecter des données visuelles et de visualiser des objets de réalité augmentée placés dans le monde réel.

Le logiciel Lucid peut convertir les données de deux caméras en informations 3D utilisées pour la cartographie en temps réel et l'enregistrement de scènes avec des informations de profondeur. Cela vous permet de créer rapidement des modèles 3D et des jeux vidéo XNUMXD. La société a utilisé sa LucidCam pour explorer l'élargissement de la gamme de vision humaine à une époque où les smartphones à double caméra ne représentaient qu'une petite partie du marché.

De nombreux commentateurs soulignent qu'en se concentrant uniquement sur les aspects photographiques de l'existence des smartphones multi-caméras, on ne voit pas ce qu'une telle technologie peut réellement apporter avec elle. Prenez l'iPhone, par exemple, qui utilise des algorithmes d'apprentissage automatique pour numériser des objets dans une scène, créant une carte de profondeur XNUMXD en temps réel du terrain et des objets. Le logiciel l'utilise pour séparer l'arrière-plan du premier plan afin de se concentrer sélectivement sur les objets qu'il contient. Les effets bokeh qui en résultent ne sont que des astuces. Quelque chose d'autre est important.

Le logiciel qui effectue cette analyse de la scène visible crée simultanément fenêtre virtuelle sur le monde réel. Grâce à la reconnaissance des gestes de la main, les utilisateurs pourront interagir naturellement avec le monde de la réalité mixte à l'aide de cette carte spatiale, l'accéléromètre du téléphone et les données GPS détectant et pilotant les changements dans la façon dont le monde est représenté et mis à jour.

donc L'ajout de caméras aux smartphones, un plaisir apparemment vide et une compétition pour savoir qui donne le plus, peut éventuellement affecter fondamentalement l'interface de la machine, puis, qui sait, les modes d'interaction humaine..

Cependant, revenant au domaine de la photographie, de nombreux commentateurs notent que les solutions multi-caméras peuvent être le dernier clou dans le cercueil de nombreux types d'appareils photo, tels que les appareils photo reflex numériques. Briser les barrières de la qualité d'image signifie que seul l'équipement photographique spécialisé de la plus haute qualité conservera sa raison d'être. La même chose peut arriver avec les caméras d'enregistrement vidéo.

En d'autres termes, les smartphones équipés d'ensembles de caméras de différents types remplaceront non seulement les simples clichés, mais également la plupart des appareils professionnels. Il est encore difficile de juger si cela se produira réellement. Jusqu'à présent, ils le considèrent comme un succès.

Voir aussi: