Video Boost é uma ferramenta de vídeo com pouca luz no Google Pixel 8 Pro

Quando o Google introduziu o Night Sight no Pixel 3, foi uma revelação.

Parece que alguém acendeu as luzes em suas fotos com pouca luz. Cenas anteriormente impossíveis tornaram-se possíveis – não é necessário flash de tripé ou de cervo nos faróis.

Cinco anos depois, tirar fotos no escuro é algo ultrapassado – todos os telefones de qualquer faixa de preço vêm com algum tipo de modo noturno. No entanto, o vídeo é uma história diferente. Os modos noturnos para fotos capturam vários quadros para criar uma imagem brilhante e, por sua própria natureza, é impossível copiar e colar a dinâmica desse recurso no vídeo. Já Uma série de fotos. A resposta, tal como está ultimamente, é recorrer à IA.

Quando o Pixel 8 Pro foi lançado neste outono, o Google anunciou um recurso chamado Video Boost with Night Sight, que chegará em uma futura atualização de software. Ele usa IA para processar seus vídeos – e aprimora detalhes e cores, o que é especialmente útil para clipes com pouca luz. Só há um problema: esse processamento não ocorre no seu telefone, mas na nuvem, nos servidores do Google.

Como prometido, o Video Boost começou a ser lançado em dispositivos há algumas semanas com a atualização do Pixel de dezembro, incluindo minha unidade de análise do Pixel 8 Pro. E isso é bom! Mas este não é exatamente o momento decisivo que foi o Night Side original. Ele fala sobre o quão impressionante o Night Sight foi quando foi lançado e os desafios específicos que o vídeo apresenta para o sistema de câmera do smartphone.

Veja como funciona o Video Boost: primeiro e mais importante, você precisa ter um Pixel 8 Prof., não o Pixel 8 normal – o Google não respondeu à minha pergunta sobre o motivo. Quando quiser usá-lo basta ativá-lo nas configurações da câmera e começar a gravar seu vídeo. Quando terminar, o backup do vídeo deverá ser feito automática ou manualmente em sua conta do Google Fotos. Então você espera. E espere. Às vezes, espere – o Video Boost funciona em vídeos de até dez minutos, mas o processamento de um clipe de dois minutos pode levar horas.

Dependendo do tipo de vídeo que você está gravando, essa espera pode ou não valer a pena. Documentação de suporte do Google Ele foi projetado para permitir que você crie “vídeos em seu telefone Pixel em alta qualidade e com ótima iluminação, cores e detalhes” em qualquer iluminação. Mas o Importante Video Boost é um ótimo serviço de vídeo com pouca luz, disse-me o gerente de produto da equipe, Isaac Reynolds. “Pense nisso como um vídeo do Night Sight, porque todas as alterações dos outros algoritmos são em busca do Night Sight.”

Todos os processos que fazem com que nossos vídeos tenham uma ótima aparência com boa iluminação – estabilização, mapeamento de tons – param de funcionar quando você tenta gravar vídeo com pouca luz. Reynolds explica misericórdia O vídeo borrado que você obtém com pouca luz é diferente. “OIS [optical image stabilization] Um quadro pode ser confirmado, mas apenas até um determinado comprimento. O vídeo com pouca luz requer quadros mais longos e representa um desafio maior para a estabilização. “Quando você começa a andar com pouca luz, você pode obter um certo tipo de desfoque intraquadro com esses quadros longos, que é um resíduo que o OIS pode compensar.” Em outras palavras, é mais complexo.

Tudo isso ajuda a explicar o que vejo em meus próprios videoclipes. Com boa luz, não vejo muita diferença. Algumas cores aparecem um pouco mais, mas não vejo nada que me obrigue a usá-las regularmente quando há bastante luz. Em Muito O Low Light Video Boost pode restaurar algumas das cores e detalhes que foram completamente perdidos em um videoclipe padrão. Mas não é tão dramático quanto a diferença entre uma foto normal e uma foto noturna na mesma posição.

Porém, há um ponto ideal entre esses extremos, onde posso ver que o Video Boost realmente é útil. Em um clipe eu entro em uma pérgula escura ao anoitecer Casa Kobe Bell, há uma melhoria significativa nos detalhes das sombras e na estabilização pós-reforço. Quanto mais eu usava o Video Boost em iluminação interna média-baixa típica, mais eu via um argumento para isso. Você começa a ver como os vídeos estáticos desaparecem nessas condições – como meu filho brincando com caminhões no chão da sala de jantar. Ativar o aumento de vídeo trouxe de volta um pouco da vibração que estava faltando.

O Video Boost é limitado à câmera traseira principal do Pixel 8 Pro e pode gravar em 4K (padrão) ou 1080p a 30fps. Usar o Video Boost resulta em dois clipes – um arquivo inicial de “visualização” que não é aprimorado e está disponível para compartilhamento imediato e, finalmente, um segundo arquivo “boost”. Há muito mais acontecendo sob o capô.

Reynolds me explicou que o Video Boost usa um pipeline de processamento completamente diferente que retém muitos dos dados da imagem capturada que normalmente seriam descartados quando você grava um arquivo de vídeo padrão – semelhante à relação entre arquivos RAW e JPEG. Um arquivo temporário mantém essas informações no seu dispositivo até que sejam enviadas para a nuvem; Depois disso, ele será excluído. Isso é bom, porque os arquivos temporários podem ser enormes – vários gigabytes para clipes longos. No entanto, os vídeos finais aprimorados têm um tamanho bastante razoável – 513 MB para um clipe de três minutos e 6 GB para o arquivo temporário que gravei.

Minha reação inicial ao Video Boost foi que parecia um paliativo – uma demonstração de um recurso que exige que a nuvem funcione agora, mas que será transferido para o dispositivo no futuro. A Qualcomm exibiu uma versão de um dispositivo semelhante neste outono, e esse deve ser o fim do jogo, certo? Reynolds diz que não pensa assim. “As coisas que você pode fazer na nuvem são sempre mais interessantes do que as que você pode fazer no telefone.”

Caso em questão: atualmente, os telefones Pixel executam várias versões menores e otimizadas do modelo HDR Plus do Google no dispositivo, diz ele. Mas o modelo HDR Plus “pai” completo que o Google vem construindo para seus telefones Pixel na última década é grande demais para qualquer telefone funcionar de forma realista. E os recursos de IA do dispositivo irão melhorar com o tempo, então é possível Alguns Coisas que só podem ser feitas na nuvem serão transferidas para nossos dispositivos. Mas da mesma forma, o que é possível na nuvem está mudando. Reynolds diz que vê a nuvem como “outro elemento” das capacidades do Tensor.

Dessa forma, aumento de vídeo Há Um vislumbre do futuro – um futuro onde a IA no seu telefone funciona de mãos dadas com a IA na nuvem. Funções adicionais são controladas pela IA do dispositivo ligada e desligada, e a diferença entre o que o seu telefone pode fazer e o que um servidor em nuvem pode fazer fica em segundo plano. Não é exatamente o momento “uau” que foi o Knight Side, mas será uma mudança significativa na forma como pensamos sobre as capacidades do nosso telefone.