Estou olhando para um prato de sushi pairando na minha frente em 3D. A chef termina a cobertura de rolinhos de cauda amarela e atum, conversando comigo enquanto trabalha. Parece vívido. Parece real. A parte incrível é que eu mesmo gravei esse vídeo, momentos antes, em um iPhone 15 Pro. E agora é uma experiência de VR que estou assistindo em um belo 3D no headset Vision Pro da Apple.
Deslizo com os dedos e assisto a outros vídeos fantasmagóricos fornecidos pela Apple. Famílias em uma casa caminhando pela grama. Abraçando-se juntos. Tudo em 3D realista. Sinto que estou espiando a vida deles, o que é estranho e íntimo. Mas a vivacidade é inegável.
Estou experimentando o novo recurso de câmera Spatial Video do iPhone da Apple, agora disponível no novo iOS 17.2 beta público da Apple, com a versão final sendo lançada em 17.2 ainda este ano. Ele permite gravar vídeos em 3D, mas para usá-lo você precisará do melhor telefone da Apple, o de US$ 1.000 iPhone 15 Pro. E para assistir aos vídeos em 3D você precisará de US$ 3.500 Visão Profissional fone de ouvido, que será lançado no início do próximo ano.
Os vídeos ficam ótimos e o 3D é incrivelmente realista. Eles também são fáceis de gravar e podem ser salvos como vídeos que serão reproduzidos em 2D em formato de vídeo normal. Mas, em última análise, esse recurso foi criado para um produto de 2024 que, por US$ 3.500, é seguro dizer que a maioria das pessoas não comprará tão cedo. Ainda assim, a experiência é impressionante.
Vê isto: Editor CNET reage ao vídeo espacial do Vision Pro
Vision Pro me impressionou mais uma vez
EU usei pela primeira vez o Vision Pro na conferência WWDC da Apple em junho, e mais uma vez me lembrei de suas extraordinárias capacidades de exibição. Fotos e vídeos ficam fantásticos nos fones de ouvido da Apple. Eu até me atrevo a dizer que o Vision Pro supera qualquer tela que tenho em minha casa no momento. Sim, eu gostaria de ver vídeos e fotos – 3D e outros – se tivesse um Vision Pro.
Meu segundo mergulho no Vision Pro, completo com lentes de prescrição ajustadas que atendiam às minhas necessidades, me lembra o quanto o fone de ouvido era menor do que eu lembrava. E também como a interface é fácil.
Configurar o rastreamento ocular foi um processo rápido; Olhei para os pontos ao redor de um círculo e bati neles. Também experimentei um novo conjunto de gestos de zoom, apertando os dedos e esticando-os para expandir as fotos. O gesto funciona com rastreamento ocular, então para onde quer que eu olhasse, a imagem se expandia. Parecia telepatia. Pude examinar algumas fotos de teste no aplicativo Fotos e reproduzi-las em Memórias. Depois de ter usado um Quest 3 recentemente, as câmeras de passagem e a resolução da tela da Apple estão em outro planeta.
As fotos panorâmicas foram uma surpresa. Eles se abriram e me envolveram, pareciam janelas para outros lugares – quase em 3D, na verdade. E os vídeos espaciais também ficam bonitos. Sua qualidade de reprodução 3D, quase fantasmagórica, parece ter como objetivo uma memória envolvente, mais do que uma reprodução direta de vídeo. Mas encontrei alguns limites mesmo na minha breve demonstração da experiência.
Infelizmente, não há nenhuma captura do que vi ou gravei aqui: as fotos são todas fornecidas pela Apple, então você terá que apenas acompanhar e ler sobre minha experiência.
As câmeras lado a lado gravam vídeo 3D a 1080p e 30fps, combinando as informações em um único arquivo que pode ser reproduzido em 2D em qualquer outro lugar, caso você não tenha um Vision Pro no próximo ano.
Vídeos espaciais no iPhone 15 Pro: como funcionam
Os vídeos espaciais precisam ser gravados segurando o telefone horizontalmente. O iPhone 15 Pro usa suas câmeras principal e ultralarga lado a lado no modo paisagem para criar o vídeo 3D. Ele grava dois vídeos 1080p e 30fps ao mesmo tempo, resolvendo as diferenças de lente e distância com fotografia computacional. O arquivo é salvo no formato HEVC, semelhante a outros arquivos de vídeo da Apple, com tamanho de armazenamento de cerca de 130 MB por minuto. Isso não é tão ruim, provavelmente porque os arquivos são limitados a resolução e taxa de quadros relativamente baixas de 1080p e 30fps.
Os videoclipes espaciais podem ser compartilhados via Mensagens ou AirDrop, mas pode haver casos em que os arquivos são compactados em outros aplicativos, perdendo os dados 3D. Ainda assim, os videoclipes devem ser utilizáveis em qualquer lugar como um arquivo de vídeo do dia a dia, o que é uma ótima notícia para quem está se perguntando (inclusive eu) se seria necessário escolher um formato de vídeo 3D “especial”.
Você precisa ativar o modo Vídeo Espacial, nas configurações do aplicativo Câmera da Apple ou com um botão em forma de máscara Vision Pro no próprio aplicativo Câmera. Isso limita a resolução do vídeo e a taxa de quadros e também significa que você precisa filmar em paisagem. Desculpe, não há vídeos verticais em 3D.
O aplicativo da câmera faz recomendações sobre como virar a câmera de lado e manter uma certa distância do objeto. Disseram-me para ficar a uma distância de 3 a 8 pés do que estava filmando para um bom vídeo espacial, mas quando fiz minha gravação de teste de alguém fazendo sushi em uma mesa, cheguei mais perto e parecia perfeitamente bom. Também gravei em uma sala bem iluminada, mas aparentemente o modo de gravação de vídeo espacial impede ajustes de brilho e contraste, o que significa que a gravação com pouca luz pode ficar mais granulada do que os vídeos normais.
A gravação de vídeo espacial integrada da Apple alterna para o aplicativo Câmera básico, mas você precisa de um iPhone 15 Pro para gravar em 3D.
Como o vídeo espacial evoluirá ou será editado?
Não há API para o formato de vídeo 3D HEVC da Apple, o que significa que os arquivos ainda não foram projetados para que aplicativos de terceiros possam reconhecê-los. Mas é possível que os desenvolvedores de aplicativos descubram algum tipo de solução. Além disso, é decepcionante que não haja outra maneira de visualizar os vídeos em 3D do que em um Vision Pro.
A gravação 3D estéreo teoricamente soa como um processo que poderia ser adaptado para outros fones de ouvido VR, como o Meta Quest 3. de US $ 500. É um vídeo estéreo simples e não usa lidar ou detecção de profundidade para qualquer tipo de captura espacial de movimento completo. Infelizmente, isso não está nos planos da Apple.
Não há limite de gravação nos vídeos, então você poderia, teoricamente, fazer um longa-metragem em 3D com vídeo espacial. Mas os clipes só poderão ser cortados, seja no iPhone ou no Vision Pro. O Final Cut Pro, software de edição de vídeo da Apple, terá suporte para edição de vídeo espacial, mas só no próximo ano. Enquanto isso, se você tentar editar esses arquivos de vídeo em um editor de vídeo Mac ou iOS, eles acabarão sendo convertidos em arquivos somente 2D.
Também é um pouco decepcionante que os vídeos não possam ser gravados em resolução 4K. O fone de ouvido Vision Pro da Apple tem qualidade e resolução surpreendentes, o que ficou claro mais uma vez quando eu olhei as fotos do iPhone no fone de ouvido e as ampliei, ou vi fotos panorâmicas em um modo envolvente que me fez sentir como se estivesse em uma recreação vívida e envolvente de um local, semelhante a uma foto em 360 graus. Os vídeos espaciais parecem muito bons, mas senti vontade de vê-los em 60fps mais fluidos, 4K ou ambos. Talvez algum dia.
Memórias para um futuro 3D
Muitas vezes a Apple parece estar tentando se tornar não apenas um estilo de vida, mas uma empresa de memória. As coleções automatizadas de fotos já são chamadas de “Memórias”. E é assim que os vídeos espaciais 3D parecem no Vision Pro: com bordas nebulosas, como lembranças digitais em algum Relatório Minoritário ou no futuro do Bladerunner. Isso também me lembrou um pouco do realismo 3D envolvente que tive usando as conversas de campo de luz 3D em tempo real do Google em Projeto Starlinemas neste caso eu estava apenas assistindo vídeos.
A escolha da Apple de enquadrar os vídeos espaciais em um quadro confuso faz com que pareça mais que os vídeos estão sendo lançados quase holograficamente na sala, e as bordas meio que se dissolvem um pouco. Mas eu adoraria ver uma maneira de os vídeos também terem um quadro padrão ao seu redor.
O formato de vídeo espacial da Apple aparece em uma nova categoria própria no aplicativo Fotos e ainda não aparecerá em Memórias. Talvez esta nova guia de vídeo espacial em Fotos se torne o repositório ideal para novas experiências 3D. No momento, a Apple não permite fotos espaciais 3D no iPhone 15 Pro, apenas vídeos, embora o Vision Pro possa capturar fotos sozinho. Mas a Apple pretende claramente que todos comecem a gravar no formato antes da chegada do fone de ouvido, construindo uma biblioteca de vídeos capazes.
Isso significa que você terá que se lembrar de ativar o vídeo espacial e ter cuidado ao usá-lo. Os proprietários do Future Vision Pro terão esse recurso ativado por padrão no iPhone 15 Pro, mas isso é uma pequena parte dos proprietários de iPhone. Vou ativá-lo porque quero ver como ficarão meus vídeos no próximo ano em um Vision Pro. Mas, a menos que você esteja planejando comprar um Vision Pro, há poucos motivos para gravar vídeo espacial agora, mesmo que seja possível, algum dia no futuro, você pode se arrepender de não ter filmado aquela festa de aniversário em 3D. Já estou pensando que gravei um vídeo no bat mitzvah da minha sobrinha na semana passada e como teria sido se eu pudesse ver em 3D também. Essa nova alternância de câmera de vídeo espacial já está sendo reproduzida no meu futuro FOMO.
