Microsoft Hyperlapse: vídeo de estabilização 3D

Muitas coisas interessantes serão apresentadas na próxima conferência SIGGRAPH. A Microsoft não ficará para trás, que anunciou seus planos com antecedência. Ela mostrará a tecnologia Hyperlapse para estabilização eficaz da imagem e união de vídeos incomuns e bonitos em lapso de tempo na primeira pessoa.

A Microsoft trabalha nesta tecnologia há vários anos, apresentou um relatório científico sobre Hyperlapse no SIGGRAPH 2014. Agora tudo funciona. Você pode instalar o aplicativo móvel e experimentar o Hyperlapse na prática (para instalar a versão para Android, por exemplo, você precisa ingressar na comunidade e se registrar como testador).



Em uma página separada, a Microsoft explica em detalhes como seu aplicativo difere do aplicativo Instagram Hyperlapse, lançado recentemente para o iPhone. Parece ser chamado o mesmo e funciona sobre o mesmo.

A Microsoft diz que eles trabalharam de forma totalmente independente e descobriram o programa de seus concorrentes apenas alguns dias atrás. Como o estudo mostrou, as duas tecnologias têm várias diferenças fundamentais. O programa do Instagram é semelhante aos estabilizadores regulares quando a borda de um quadro se sobrepõe a outro para compensar a trepidação da câmera. Ao contrário dos programas existentes Adobe After Effects ou estabilizador de vídeo do Youtube, no entanto, o programa do Instagram não analisa quadros, mas usa informações do giroscópio embutido. Para evitar artefatos nas bordas, ela amplia a imagem.

Tudo isso funciona apenas com uma ligeira instabilidade, diz a Microsoft, por exemplo, se você segurar o smartphone com as duas mãos e se mover suavemente. Mas quando você o insere no capacete e embarca em uma viagem, tudo desmorona completamente.

O Microsoft Hyperlapse implementa um método fundamentalmente diferente. Aqui, toda a rota da câmera é reconstruída em 3D e um modelo do mundo é compilado. Isso permite que a câmera se mova mais suavemente no espaço-tempo e gere o vídeo final, onde a câmera se move a uma velocidade constante. Ou seja, fragmentos "lentos" serão cortados automaticamente, como se estivessem em uma luz vermelha.



O que é muito importante, o Microsoft Hyperlapse pode preencher os fragmentos ausentes de quadros, emprestando pixels não de um quadro vizinho, mas de vários quadros.

Para uma explicação técnica de como o Microsoft Hyperlapse funciona, consulte o vídeo.