A ferramenta de IA de edição de imagens do MIT substitui facilmente o plano de fundo em qualquer imagem
Esta ferramenta de edição de imagens assistida por IA do MIT pode alterar o plano de fundo de qualquer imagem
Por muito tempo, o Photoshop tem sido o programa que muitos de nós usamos para fazer nossas fotos parecerem ótimas com correções rápidas e aprimoramentos criativos.
Agora, pesquisadores do Laboratório de Ciência da Computação e Inteligência Artificial (CSAIL) do MIT desenvolveram uma ferramenta de edição de imagens assistida por IA que automatiza muitas partes do processo de edição de fotos. Isso facilitará o trabalho de edição de fotos.
"Em vez de precisar de um editor especializado para gastar vários minutos ajustando uma imagem quadro a quadro e pixel a pixel, gostaríamos de tornar o processo mais simples e rápido para que a edição de imagens possa ser mais acessível a usuários casuais", diz Yagiz Aksoy, pesquisador visitante do CSAIL do MIT.
"A visão é chegar a um ponto em que basta um único clique para os editores combinarem imagens para criar esses mundos de fantasia realistas e completos. ”
Chamado de "Semantic Soft Segmentation" (SSS), esse método usa IA (inteligência artificial) para separar automaticamente objetos em uma imagem que permite uma fácil edição de imagens. Por exemplo, usando essa técnica, você pode alterar a aparência do plano de fundo ou mesclar imagens de primeiro plano e plano de fundo em uma cena totalmente nova.
Como funciona o SSS?
A ferramenta estuda a textura e a cor da imagem original e as combina com informações coletadas por uma rede neural sobre o que realmente são os objetos dentro da imagem. A rede neural processa os recursos da imagem e detecta "transições suaves", como cabelo e grama.
"Uma vez que esses segmentos suaves são calculados, o usuário não precisa alterar manualmente as transições ou fazer modificações individuais na aparência de uma camada específica de uma imagem", diz Aksoy. "Tarefas de edição manual, como substituir planos de fundo e ajustar cores, seriam muito mais fáceis. ”
Os pixels na imagem são então associados uns aos outros por cor. Essas informações são combinadas com os recursos detectados pela rede neural para estimar as camadas de imagem. No entanto, essa tarefa não é simples, pois os computadores precisam ser ensinados a fazer isso.
"O complicado sobre essas imagens é que nem todo pixel pertence apenas a um objeto", acrescentou Aksoy, que apresentou o artigo na conferência anual de computação gráfica SIGGRAPH em Vancouver na semana passada. "Em muitos casos, pode ser difícil determinar quais pixels fazem parte do plano de fundo e quais fazem parte de uma pessoa específica. ”
Onde o SSS pode ser usado?
De acordo com Aksoy, o SSS em sua iteração atual poderia ser usado por plataformas sociais como Instagram e Snapchat para tornar seus filtros mais realistas, principalmente para alterar os planos de fundo em selfies ou simular tipos específicos de câmeras.
Planos para o futuro
No futuro, os pesquisadores planejam trabalhar para diminuir o tempo necessário para calcular uma imagem de minutos para segundos e tornar as imagens ainda mais realistas, melhorando a capacidade do sistema de combinar cores e lidar com coisas como iluminação e sombras.
Fonte: CSAIL