O fone de ouvido Futuristic Vision Pro da Apple atingiu a marca de um ano, mas durante o ano inicial, ainda parecia que estava faltando alguns recursos importantes. Agora, a Apple está abordando alguns desses recursos, pelo menos em pequenos passos, com o Visionos 2.4. A Apple Intelligence está finalmente chegando ao Vision Pro, juntamente com alguns aplicativos conectados e recursos do modo de convidado para iPhones e iPads.
A nova atualização do sistema operacional pode ser testada em uma beta do desenvolvedor chegando hoje, mas a atualização oficial do sistema operacional não está chegando até abril. Estou esperando por esses novos recursos por um tempo.
A Apple Intelligence pode ser o recurso mais chamativo, mas não é provável que ainda seja o mais significativo-os extras de IA lançados nessa onda não incluem nenhum recurso multimodal de inteligência visual habilitado para câmera, como o Google Gemini, flexionará o Android XR. Mas deve ser pelo menos um pé na porta em direção a mais IA sendo adicionado ao longo do tempo. Estou mais animado que o Vision Pro vai funcionar melhor com iPhones e iPads. Não necessariamente de todas as maneiras que eu quero, mas um novo aplicativo e um recurso de modo de convidado devem dar ao fone de ouvido funções de acesso remoto que o fone de ouvido da Meta’s Quest tem há anos.
O Genmoji (e outras ferramentas de inteligência da Apple) estão chegando ao Vision Pro, mas ainda não à Inteligência Visual.
AppleApple Intelligence: Ferramentas de texto e imagem, mas nenhuma inteligência visual ou nova Siri ainda
Os recursos de inteligência da Apple que vêm para o Vision Pro são familiares; Eles espelham principalmente o que já está em Macs, iPhones e iPads. A chegada deles está atrasada: eu esperava eles no ano passado. As ferramentas de escrita, um modo integrado a vários aplicativos, estão de volta para resumir ou gerar texto. Existem resumos de mensagens e o ChatGPT pode ser chamado para obter assistência extra. Há a AI generativa da Apple, Genmoji, que torna o emoji sob demanda, e o Image Playground, que faz imagens 2D. Nada disso gerará nada 3D no Vision Pro … ainda não. E o recurso de memória de memória acionado por IA da Apple, que pode gerar galerias de fotos e vídeos sob demanda, não mostra filmes ou fotos “espaciais” em 3D ainda. Isso é uma chatice.
Ainda assim, o grande falta é a inteligência visual. O AI habilitado para câmera da Apple funciona nos iPhones, que são convocados usando o botão da câmera, digitalizam o mundo e pesquisem ou identifiquem o que está em vista. A Inteligência Visual faria sentido no Vision Pro, que é literalmente uma exibição vestível gigante com câmeras de visão de mundo cravejadas em todos os lugares. No momento, porém, não há recurso de inteligência visual no mix. Ou novo Siri, nesse caso. A Siri renovada da Apple deve fazer parte do iOS 18.4, mas não estará no Vision Pro com esta atualização do sistema operacional.
Enquanto isso, o Google já está integrando uma AI multimodal de Gemini assistida por câmera no Android XR, aparentemente em curso para estar disponível no primeiro dia desse lançamento da OS.
A Apple ainda pode introduzir inteligência visual ainda este ano. É um provável candidato ao Visionos 3, que deve ser anunciado na conferência de desenvolvedores da Apple WWDC, geralmente realizada em junho. Mas, pelo menos, a Apple Intelligence chegando ao Vision Pro – como a Apple já indicou que seria – mostra que o hardware atual pode fazer mais do que a Apple permitiu.
Orientar as pessoas através das experiências do Vision Pro será mais fácil com os melhores controles de experiência do iPhone e iPad.
Josh Goldman/Cneta Vision Pro Phone App e um modo de visualização de visualização remota
Fiquei frustrado por o Vision Pro nunca ter um bom relacionamento de trabalho, ou mesmo uma conexão, com iPhones. Os fones de ouvido da Meta’s Quest possuem aplicativos para telefones por anos que podem navegar e de download remoto para o fone de ouvido, sincronizar notificações por telefone e fones de ouvido de missão de controle remoto para ajudar os aplicativos de demonstração de pessoas enquanto você assiste à experiência na tela do seu telefone.
A Apple está adicionando muito disso com o Visionos 2.4 e iOS 18.4. Um aplicativo para o iPhone Pro Vision Pro iPhone permite que você permite que os aplicativos de download remoto e descubram experiências chegando ao Visionos. O aplicativo também armazenará detalhes sobre o fone de ouvido e as inserções de lente de prescrição. De acordo com a Apple, o aplicativo aparece automaticamente no seu iPhone com iOS 18.4 se você possui um Vision Pro, mas também pode ser baixado na App Store.
Há também uma nova experiência no modo convidado para compartilhar o fone de ouvido. O processo atual da Apple é estranho e desajeitado, e não permite que você observe remotamente o que está acontecendo no fone de ouvido para ajudar. O novo modo entra em ação quando alguém coloca o fone de ouvido e seu iPhone ou iPad próximo tem um botão para iniciar uma conexão. Ele possui um seletor de aplicativos que só fará com que alguns filmes ou aplicativos apareçam no fone de ouvido e inicia um fluxo de airplay para assistir o que seu convidado estiver fazendo para que você possa guiá -los.
É um pouco estranho que a nova experiência de convidado não seja lançada no aplicativo Vision Pro e, no momento, o aplicativo não permite que você inicie ou pausie os aplicativos remotamente; É um fluxo de airplay passivo. Mas, novamente, é um começo – e parece muito melhor do que o Vision Pro tinha antes.
Um aplicativo de vídeo 3D chamado Galeria Espacial
A Apple também está introduzindo um novo aplicativo curioso chamado Spatial Gallery, que é descrito como uma vitrine com curadoria de fotos e vídeos 3D gravados usando o formato de captura “espacial” baseado no iPhone. O aplicativo soa como uma maneira de encontrar outro conteúdo 3D para assistir no Vision Pro, o que é estranho, já que a Apple já mostrou-se otimista, mas lentamente, também mostrou seu formato de vídeo imersivo em 180 graus no fone de ouvido.
Provavelmente, isso é um diz que a produção imersiva de conteúdo de vídeo está enfrentando um gargalo. É um formato caro para fotografar e editar, exigindo câmeras de ponta muito específicas. Enquanto isso, com vídeos 3D mais básicos gravados em um iPhone ou outras câmeras e editados com alguns aplicativos que suportam edição de vídeo espacial (Final Cut Pro, Davinci Resolve), parece que a Apple está dividindo a diferença para oferecer mais experiências prontas para o Vision Pro-Reading o mais rápido possível.
Em um mundo ideal, o futuro provavelmente envolve câmeras para iPhone desenvolvendo melhores formatos de captura 3D imersivos para criar conteúdo mais impressionante para VR. O presente, no entanto, é dividido entre os telefones com captura 3D aceitável e câmeras profissionais de ponta desenvolvendo uma camada diferente. Prefiro ver a Apple fazer mais investimentos em aplicativos imersivos úteis, mas parece que o vídeo espacial será o movimento de conteúdo mais viável da Apple no curto prazo.
