Tecnologia

A Microsoft dá um toque especial às fotos panorâmicas

  O Microsoft ICE une fotos estáticas ou quadros de vídeo em uma única imagem panorâmica. A versão 2.0 pode preencher lacunas para que você não't have to crop as much.

A Microsoft adicionou na quinta-feira novas opções criativas ao seu software ICE para criar cenas panorâmicas a partir de uma coleção de fotos - e agora também de um vídeo.

ICE (Editor de Composição de Imagem) 2.0, atualizado pela última vez em 2011, é um programa um tanto experimental do Windows que há muito precisa de uma atualização. Felizmente para os entusiastas da fotografia, existem alguns ótimos novos recursos na nova versão:

  • Você pode criar panoramas a partir de um vídeo, com o ICE unindo quadros estáticos desenhados a partir dele.
  • Se você tiver uma figura recorrente nesse vídeo - digamos, um skatista que você rastreou percorrendo a cena - você pode designar onde gostaria de ter aparições repetidas dessa figura no panorama.
  • Quando você cria um vídeo com lacunas estranhas - uma consequência comum quando você não mantém a câmera nivelada enquanto percorre uma cena - o ICE 2.0 pode 'completar automaticamente' para preencher as partes que faltam.
  • E se você tirou fotos para um panorama de 360 ​​graus, pode criar uma visão de 'mundo pequeno' que transforma suas fotos em um planeta diminuto.

Ao borrar os limites entre imagens únicas e múltiplas e entre fotos e vídeos, o ICE mostra quanto potencial inexplorado existe no domínio da fotografia computacional. Esse campo de pesquisa aplica técnicas de processamento de computador para ir muito além de apenas tirar uma única foto com uma câmera.

  O Microsoft ICE 2.0 pode criar um panorama a partir de um vídeo panorâmico, com o assunto aparecendo várias vezes.

Fotografia computacional

Por exemplo, a fotografia computacional levou a imagens de gigapixel nas quais você pode mergulhar com controles de zoom e panorâmica, a imagens de alta faixa dinâmica (HDR) que preenchem sombras e realçam detalhes combinando exposições múltiplas, a câmeras que podem corrigir problemas ópticos de lentes, e até mesmo para as câmeras de campo de luz da Lytro que permitem que as pessoas foquem uma foto depois de tirada.



'Há uma tonelada de oportunidades para levar o desenvolvimento da fotografia além da câmera para as experiências de visualização dos usuários', disse Matt Uyttendaele, gerente do grupo de fotografia computacional da Microsoft Research.

A fotografia computacional significa novas oportunidades para desafiar os operadores históricos, como a Lytro está tentando fazer com suas câmeras. No entanto, muitas fotografias computacionais seguem as mesmas câmeras antigas e adicionam software de pós-processamento. Embora o Adobe Photoshop tenha uma ferramenta HDR há anos, os fotógrafos ainda oferecem suporte a programas especializados como Photomatix Pro da HDRsoft , PhotoEngine de Oloneo e O HDR Efex Pro da Nik -- agora parte do Google.

  O Microsoft ICE pode criar"small world" images from a suitable 360-panorama. The best source images have even skies above and bland ground at the bottom.

Para Uyttendaele, a fronteira mais empolgante da fotografia computacional é o smartphone – especialmente com os fabricantes de câmeras abrindo acesso aos dados brutos do sensor de imagem antes de serem processados ​​em JPEG.

'É a primeira vez que realmente temos uma câmera hackeável. Estamos obtendo cada vez mais acesso ao pipeline de desenvolvimento de pixels. Isso é super empolgante', disse ele. 'O nível de computação que podemos aplicar no momento da formação da imagem abrirá muitos aplicativos interessantes.'

Imagens panorâmicas são cada vez mais comuns nos dias de hoje, com aplicativos de smartphone tornando mais fácil varrer uma cena e combinar instantaneamente as fotos em uma única visualização por meio de fotografia computacional. As habilidades do software ICE vão um passo além do que os smartphones normalmente oferecem.

GELO em ação

O trabalho principal do ICE é examinar imagens para descobrir como elas se unem em um grupo. Com isso, achei o ICE muito capaz na maior parte. Em mais de uma dúzia de testes de meus próprios originais panorâmicos, as imagens costuradas não apresentavam problemas como descontinuidades no horizonte, galhos de árvores incompatíveis. Apenas em um caso eu detectei mudanças de tom perturbadoras no céu.

  O Microsoft ICE 2.0 pode preencher lacunas de panorama para que você não't have to crop off the tops of mountains. It can show repeated scenery, though, such as periodic patterns in the lower right of this autofilled image.

Minha maior reclamação foi que, em dois casos, o ICE não conseguiu descobrir como algumas imagens se encaixam em um todo, deixando uma borda ou outra do meu panorama cortada. Principalmente, porém, ele lidou bem com panoramas verticais e horizontais, incluindo alguns panoramas de grade com uma matriz retangular de imagens de origem. Minha segunda queixa é que as imagens pareciam um pouco moles em comparação com os originais.

Para os fãs de fotos, a maior novidade é a capacidade de preencher as lacunas inevitáveis ​​dos panoramas. Achei a função de preenchimento automático um sucesso ou um fracasso, mas ainda muito útil quando funcionou.

  Panorama vertical do Microsoft ICE

Com áreas indefinidas, como céu azul ou um primeiro plano de granito salpicado, o preenchimento automático tem um trabalho fácil. Mas quando os padrões de imagens eram complicados, os artefatos de copiar e colar do ICE podem tornar suas fotos elegíveis para publicação em Desastres do Photoshop . Mais flagrantemente, fatias de árvores ou edifícios às vezes aparecem flutuando no ar, e grandes manchas de cenário duplicado parecem uma falha na matriz.

Mas é difícil ficar muito magoado com o preenchimento automático. Afinal, é difícil criar dados de imagem que não estão lá em primeiro lugar. E várias vezes, usar o preenchimento automático para adicionar um pouco de céu azul em uma parte de uma imagem me salvou de cortar o topo de um pico de montanha em outro lugar. Uma boa abordagem para usá-lo era deixá-lo fazer seu melhor palpite e, em seguida, simplesmente cortar o que era inaceitável. Você também pode exportar a imagem e trazê-la para um editor de alta potência como o Adobe Photoshop, cujo recurso de preenchimento com reconhecimento de conteúdo pode fazer um trabalho melhor com as peças que faltam.

Uyttendaele tem ideias sobre como melhorar o preenchimento automático. Uma intrigante - supondo que as questões de direitos autorais tenham sido resolvidas - é aproveitar a vasta oferta de imagens já disponíveis na Internet.

'Você pode ir para a Web e procurar pixels para preencher ainda melhor', disse Uyttendaele.

As técnicas de vídeo também adicionam muito mais tempero. Adoro a ideia de automatizar o processo de puxar a mesma pessoa várias vezes para uma imagem panorâmica. Isso geralmente requer muito trabalho manual. A Microsoft tem um exemplo particularmente convincente com um malabarista jogando paus para si mesmo de um lado do quadro para o outro.

O novo ICE também recebe uma interface de usuário renovada, a capacidade de exportar panoramas para o site Photosynth da Microsoft e zoom de 100% para melhor visualização.

Da Pesquisa da Microsoft

ICE, de Grupo de Mídia Visual Interativa da Microsoft Research , não é um produto de software comum da empresa. Em vez disso, serve como um veículo para desenvolver tecnologias que aparecem em outros produtos da Microsoft. A tecnologia da ICE, por exemplo, é usada em seu software Photosynth de colagem de fotos e em seu serviço Bing Maps, onde inúmeras imagens individuais devem ser unidas em um todo.

O objetivo da ICE é impulsionar o que a Microsoft Research pode fazer - e incentivar outras partes da empresa a adotar a tecnologia.

'Estou em pesquisa há 15 anos. Quando comecei, tinha essa imagem cor-de-rosa de como a transferência de produtos iria da pesquisa para os produtos da Microsoft: escreveríamos um ótimo artigo, teríamos algum código de protótipo e o ideia seria tão grande que o projeto se venderia sozinho', disse Uyttendaele. 'Na realidade, ainda há muito trabalho a fazer, desde um protótipo de pesquisa até um produto que nossos clientes possam usar. O Microsoft ICE, onde finalizamos a tecnologia até o ponto em que as pessoas podem baixá-la e usá-la, nos obriga a aprimorá-la para que os grupos de produtos possam tirar isso de nós.'

  O Microsoft ICE 2.0 criou esta imagem de um malabarista jogando tacos para si mesmo a partir de um vídeo.

Fotossintetizador para Android?

Dada essa missão, é difícil imaginar a Microsoft dedicando muitos recursos a uma versão do ICE para Mac, por exemplo. Mover o mecanismo principal é fácil, mas alguns aspectos da interface do usuário estão vinculados ao Windows, disse Uyttendaele.

Mas os produtos derivados do ICE são uma questão diferente, principalmente na era do CEO Satya Nadella, que está mais disposto do que seu antecessor a levar software da Microsoft para sistemas operacionais não Windows, como o iOS da Apple.

Então, que tal o Photosynth para Android, por exemplo?

'Podemos fazer isso. Não posso prometer nada', disse Uyttendaele. 'A Microsoft está escrevendo cada vez mais coisas para outras plataformas.'