Quando o Google introduziu o Night Sight no Pixel 3, foi uma verdadeira revelação.
Era como se alguém literalmente acendesse as luzes em suas fotos com pouca luz. Fotos anteriormente impossíveis agora são possíveis – sem a necessidade de um tripé ou flash nos faróis.
Cinco anos depois, tirar fotos no escuro está desatualizado – quase todos os telefones em toda a faixa de preços vêm com algum tipo de modo noturno. Mas o vídeo é uma história diferente. Os modos noturnos para imagens estáticas capturam vários quadros para criar uma imagem mais brilhante, e não é possível copiar e colar a mecânica desse recurso no vídeo, que por sua natureza é na verdade Uma série de fotos. A resposta, ao que parece recentemente, é a inteligência artificial.
Quando o Pixel 8 Pro foi lançado neste outono, o Google anunciou um recurso chamado Video Boost with Night Sight, que chegará em uma futura atualização de software. Ele usa IA para processar seus vídeos – trazendo mais detalhes e melhorando as cores, o que é especialmente útil para clipes com pouca luz. Só há um problema: esse processamento acontece na nuvem, nos servidores do Google, e não no seu telefone.
Como prometido, o Video Boost começou a chegar aos dispositivos há algumas semanas com a atualização do Pixel de dezembro, incluindo nossa unidade de análise do Pixel 8 Pro. isso é bom! Mas não é o momento decisivo que foi o Night Sight original. Isso mostra o quão excelente o Night Sight era quando foi lançado, bem como os desafios especiais que o vídeo apresenta para um sistema de câmera de smartphone.
O Video Boost funciona assim: primeiro e mais importante, você deve ter um telefone Pixel 8 vanguarda, não um telefone Pixel 8 normal – o Google não respondeu à minha pergunta sobre o motivo disso. Você pode ativá-lo nas configurações da câmera quando quiser usá-lo e começar a gravar seu vídeo. Uma vez feito isso, o backup do vídeo deve ser feito em sua conta do Google Fotos, de forma automática ou manual. Então você espera. E espere. E, em alguns casos, continue esperando – o Video Boost funciona em vídeos de até dez minutos, mas mesmo um clipe de apenas alguns minutos pode levar horas para ser processado.
Dependendo do tipo de vídeo que você está gravando, essa espera pode ou não valer a pena. Documentação de suporte do Google Ele diz que foi projetado para permitir “criar vídeos em seu telefone Pixel com qualidade superior e com melhor iluminação, cores e detalhes” em qualquer luz. Mas não Principal O que o Video Boost oferece é um vídeo melhor com pouca luz – foi o que o gerente de produto do grupo, Isaac Reynolds, me disse. “Pense nisso como um vídeo do Night Sight, porque todos os ajustes nos outros algoritmos visam alcançar o Night Sight.”
Todos os processos que fazem com que nossos vídeos tenham uma aparência melhor com boa iluminação – estabilização e mapeamento de tons – param de funcionar quando você tenta gravar vídeo com pouca luz. Mesmo, Reynolds explica Gentilmente A quantidade de desfoque obtida em vídeos com pouca luz varia. “O.I.S [optical image stabilization] Ele pode estabilizar o quadro, mas apenas até um determinado comprimento.” Vídeo com pouca luz requer quadros mais longos, e isso é um grande desafio para estabilizar. “Quando você começa a andar com pouca luz, com quadros muito longos, você pode obter um certo tipo de desfoque dentro do quadro é apenas o resto que o OIS pode compensar.” Em outras palavras, é muito complicado.
Tudo isso ajuda a explicar o que vejo nos meus vídeos do Video Boost. Com boa iluminação, não vejo muita diferença. Algumas cores se destacam um pouco mais, mas não vejo nada que me obrigue a usá-las regularmente quando a luz disponível é abundante. em Em toda a extensão Com pouca luz, o Video Boost pode recuperar completamente algumas das cores e detalhes perdidos em um vídeo padrão. Mas não é tão dramático quanto a diferença entre uma imagem normal e uma imagem do Night Sight nas mesmas condições.
Há um ponto ideal entre esses dois extremos, onde posso ver o Video Boost se tornando realmente útil. Em um clipe eu estava andando por um caminho ao anoitecer dentro de uma pérgula escura Habitação Coby BellHá uma melhoria notável nos detalhes das sombras e na estabilidade após o aprimoramento. Quanto mais você usar o Video Boost em iluminação interna normal, média e baixa, mais verá as condições certas para isso. Você começa a ver como os vídeos padrão ficam desbotados nessas condições – como meu filho brincando com caminhões no chão da sala de jantar. Ativar o Video Boost restaurou um pouco da vivacidade que eu havia esquecido que estava perdendo.
O Video Boost é limitado à câmera traseira principal do Pixel 8 Pro e grava em 4K (padrão) ou 1080p a 30fps. Usar o Video Boost cria dois clipes – um arquivo inicial de “visualização” que não é otimizado e está imediatamente disponível para compartilhamento e, eventualmente, um segundo arquivo “aprimorado”. No entanto, há muita coisa acontecendo nos bastidores.
Reynolds me explicou que o Video Boost usa um pipeline de processamento completamente diferente que retém muitos dados de imagem capturados que normalmente seriam descartados ao gravar um arquivo de vídeo padrão – um pouco como a relação entre arquivos RAW e JPEG. Um arquivo temporário mantém essas informações no seu dispositivo até que sejam enviadas para a nuvem; E então ele é excluído. Isso é bom, porque os arquivos temporários podem ser enormes – vários gigabytes para clipes mais longos. No entanto, os vídeos finais aprimorados têm um tamanho muito mais razoável – 513 MB para um clipe de três minutos que gravei contra 6 GB para um arquivo temporário.
Minha reação inicial ao Video Boost foi que parecia uma solução temporária – uma demonstração de um recurso que precisa da nuvem para funcionar agora, mas será portado para o dispositivo no futuro. A Qualcomm exibiu uma versão semelhante no aparelho neste outono, então este deve ser o jogo final, certo? Reynolds diz que não é assim que ele pensa. “As coisas que você pode fazer na nuvem sempre serão mais impressionantes do que as que você pode fazer no telefone.”
A distinção entre o que o seu telefone pode fazer e o que um servidor em nuvem pode fazer desaparecerá em segundo plano
Caso em questão: no momento, diz ele, os telefones Pixel executam várias versões menores e aprimoradas do modelo HDR Plus do Google no dispositivo. Mas o modelo HDR Plus “nativo” completo que o Google vem desenvolvendo na última década para seus telefones Pixel é grande demais para ser executado de forma realista em qualquer telefone. Os recursos de IA no dispositivo melhorarão com o tempo, então é provável que isso aconteça alguns Coisas que só podem ser feitas na nuvem serão transferidas para nossos dispositivos. Mas da mesma forma, o que é possível na nuvem também mudará. Reynolds diz acreditar que a nuvem é apenas “mais um componente” das capacidades do Tensor.
Nesse sentido, o aprimoramento de vídeo Ele é Um vislumbre do futuro – É apenas um futuro onde a IA do seu telefone funciona junto com a IA na nuvem. Mais funções serão gerenciadas por uma combinação de IA dentro e fora do dispositivo, e a distinção entre o que seu telefone pode fazer e o que um servidor em nuvem pode fazer desaparecerá em segundo plano. Não é o momento “aha” que o Night Sight foi, mas mesmo assim marcará uma grande mudança na forma como pensamos sobre as capacidades de nossos telefones.
