O truque de mágica mais deslumbrante de iOS 27que será lançado ainda este ano, é um novo modo de edição de fotos isso é como algo saído de Blade Runner. Com um brilho, uma imagem estática torna-se mutável. Você pode virar o ângulo e a imagem se torna 3D. Você pode mudar um pouco a cena e o ambiente será redesenhado ao seu redor.
Como usuário de dispositivos VR/AR há anos e alguém que passa muito tempo em Apple Visão Probalancei a cabeça quando vi a revelação em WWDC 2026 da Apple evento para desenvolvedores. Eu posso ver os tópicos. Esse recurso está flexibilizando ferramentas 3D com as quais a Apple já vem brincando há algum tempo, expandindo-as de maneiras fascinantes. E, como acontece com aquela foto 3D inclinada e reenquadrada espacialmente, que agora estou experimentando em minhas próprias fotos na versão beta do desenvolvedor do iOS 27, quero ver o que mais está por vir.
É mais do que apenas editar fotos, eu acho. Muito mais.
Sou eu entre Jeff Norris e Steve Sinclair da Apple depois de uma reunião no fone de ouvido no ano passado, discutindo Personas enquanto incorporava Personas. Este ano, o Vision Pro usará tecnologia semelhante de respingos gaussianos para converter fotos panorâmicas em ambientes 3D no fone de ouvido com VisionOS 27.
Um passo em direção a mundos escaneáveis
O conjunto de ferramentas que a Apple usa para fazer esses efeitos 3D acontecerem, chamado de respingos gaussianos, é exatamente o mesmo modelo de IA que faz meu corpo torne-se um avatar Persona 3D nos fones de ouvido Vision Pro e o que faz com que o Apple Maps agora mostre mapas 3D notavelmente mais claros. É uma tecnologia que vejo surgir há anos, que já transforma objetos e ambientes 3D (e até vídeos) em mundos de passagem chocantemente convincentes.
Os aplicativos do Vision Pro já apresentam splats gaussianos que cobrem quarteirões inteiros da cidade capturados e convertidos em mundos incríveis. EU apresentou um Prêmio Polys para alguns dos melhores neste inverno, na verdade. (Você pode explorar o premiado Praça Pfarrkirche Kefermarktcaptura de tela abaixo, para ver um belo exemplo.) Fones de ouvido Meta’s Quest pode escanear seu espaço e crie réplicas 3D que podem ser percorridas usando a tecnologia também, com um efeito impressionante.
Para mim, representa o futuro rumo à fotografia e aos vídeos e a forma como podemos representar as nossas memórias. Mas para a Apple, essa tecnologia ainda não surgiu em seu próprio aplicativo de câmera.
A Apple está jogando lentamente os respingos gaussianos em sua própria tecnologia, introduzindo-a de maneiras criteriosas e variadas. Este ano na WWDC, a Apple apresentou isso em Spatial Reframing no iOS, além de um novo ferramenta de conversão de fotos panorâmicas no Vision Pro, que transforma panoramas capturados anteriormente em ambientes 3D envolventes nos quais você pode trabalhar, e visualizações de mapas 3D renovadas que não fizeram um movimento imersivo em nenhum modo Vision Pro, embora os mapas 3D do Google tenham sido o que mais me impressionou. Galaxy XR da Samsung fone de ouvido, lançado no ano passado.
O Pfarrkirche Kefermarkt, que ganhou o Prêmio Polys este ano, é uma digitalização completa em 3D de uma igreja usando splats gaussianos.
Pedaços se formando nas bordas
EU conversou com a equipe Vision da Apple no ano passado sobre Personas no Vision Pro, quando a Apple discutiu pela primeira vez o uso de respingos gaussianos como o ingrediente secreto para fazer essas capturas faciais impressionantes acontecerem. A Apple está usando os mesmos modelos de respingos gaussianos nos novos recursos do iOS 27/VisionOS 27 desta vez, mas com novos efeitos.
O reenquadramento espacial, para mim, é muito parecido com uma versão mais interativa das cenas espaciais nas quais as fotos poderiam ser transformadas no ano passado e vistas em um impressionante 3D inclinando a cabeça no Vision Pro (ou inclinando o telefone para frente e para trás). Ele também tem limites semelhantes, pois você não pode realmente ir tão fundo em uma foto ou realmente mudar tudo. É uma gama gradual de ângulos, criada pela IA, gerando o que pode estar um pouco atrás de alguém ou apenas fora do alcance.
A liberdade de fixar novamente um novo ângulo e torná-lo permanente, porém, é nova, e esse nível de controle dá um pouco mais daquela sensação que tenho quando entro em capturas de respingos gaussianos em 3D.
É claro que digitalizações maiores precisam de mais fotos para serem unidas. Esse poderia ser o próximo truque da Apple, já que os desenvolvedores já estão fazendo isso em outros lugares.
Eu adoraria que várias fotos de um lugar fossem unidas pela Apple em uma cena inteira ou recriasse um espaço onde eu pudesse entrar. A ferramenta de conversão de panorama no VisionOS 27 agora, que ainda não experimentei, quase chega lá. Ele envolve uma foto e torna a experiência envolvente, sem a caminhada.
Eu acho que está chegando. Mas a maçã precisa de óculos imersivos ou fones de ouvido que sejam realmente acessíveis primeiro, e a Apple nem tem óculos inteligentes esperados até o próximo ano – esses modelos podem nem ter telas integradas para começar. Mas os headsets Vision Pro, de US$ 3.500, poderiam facilmente fazer varreduras em toda a sala de uma forma que a Apple poderia fazer com seus próprios aplicativos. E os iPhones também poderiam evoluir suas ferramentas de câmera.
Eventualmente, será o futuro do que vídeos e fotos envolventes realmente significam. E agora, estamos dando uma espiada em tudo isso à vista de todos.
