Este ano, como parte do Next Reality 30, em parceria com a Snap, estamos destacando um inovador em ascensão em realidade aumentada. Especificamente, estávamos procurando por um desenvolvedor ou criador independente que incorporasse o espírito de ponta da RA e sua capacidade de aproveitar o aprendizado de máquina. O homenageado deste ano é Aidan Wolf.
• Não perca: 30 pessoas da próxima realidade para assistir em realidade aumentada em 2020
Quando o Magic Leap chegou às mãos dos desenvolvedores, um grupo informal conhecido como Leap Squad formou-se rapidamente em torno da plataforma. Um de seus membros era Aidan Wolf, um desenvolvedor independente que passou a alavancar o aprendizado de máquina para publicar alguns dos aplicativos móveis de realidade aumentada mais exclusivos que existem sob sua marca Kevaid.
Naqueles primeiros dias, Wolf trabalhou em um aplicativo chamado Project Play, uma ferramenta de modelagem 3D, animação e criação de jogos. Embora não tenha trabalhado com o Magic Leap como funcionário ou mesmo contratado, ele recebeu suporte da empresa, incluindo um fone de ouvido Magic Leap One e assistência para o desenvolvimento.
Volte ao meu aplicativo Magic Leap "Project Play", onde você pode desenhar, animar e programar qualquer coisa! Eventualmente, DoodleLens incluirá esses conceitos, apenas de uma maneira muito mais fácil pic.twitter.com/KCIDN7Q9I5
No final das contas, o Project Play não chegou à loja de aplicativos Magic Leap World, mas Wolf acabaria por alavancar o trabalho para o desenvolvimento de outros aplicativos de RA móvel.
“Foi divertido durante a ascensão, mas depois que o Magic Leap mudou do consumidor para o empresarial, o espírito que impulsionava a comunidade realmente explodiu, então não tenho mais contato com meus colegas Leapers desde então”, disse Wolf. "Eu ainda vejo as coisas incríveis que eles têm feito, então estou feliz em ver que o espírito ainda está muito vivo, mas em outros lugares do XR indústria e além. "
Nascido na zona rural de Connecticut, Wolf aprendeu a jogar para passar o tempo em sua juventude. “Eu sou de uma pequena e pacata cidade rural no oeste de Connecticut e, tendo o luxo do tédio enquanto crescia, perdi muito do meu tempo fazendo jogos de computador”, diz Wolf. Seu interesse em jogos acabou evoluindo para o desenvolvimento de jogos
“Não tenho um histórico formal em nada que faço, nunca me formei na escola ou consegui um emprego legal, mas posso fazer jogos e aplicativos para viver desde os 16 anos”, diz Wolf.
Wolf começou em AR com Capsule, um aplicativo social baseado em geolocalização que ele desenvolveu por meio de um programa de aceleração em Kentucky. Depois de atingir o beta, o Capsule ficou sem financiamento e foi encerrado em 2015.
“Embora aquela empresa não tenha dado certo, a experiência alterou muito a trajetória da minha vida e me trouxe até onde estou hoje”, diz Wolf. "Nos últimos seis anos, estive completamente obcecado por RA e, felizmente, tive alguns projetos legais funcionando."
Um desses projetos é o Blue Sky Paint para iOS. O aplicativo segue o conceito de rabiscos de RA, mas usa o céu como tela. Wolf escreveu um algoritmo de aprendizado de máquina que identifica o céu e o segmenta para a projeção de AR, com ARKit e APIs de sensor auxiliando no esforço.
"Basicamente, [the algorithm accounts for] coisas realmente gerais que são verdadeiras sobre o mundo na maior parte do tempo: o céu está sempre alto, então se seu telefone estiver apontado para cima, provavelmente ele está olhando para o céu. O céu é geralmente azul (até mesmo as nuvens), enquanto o solo é geralmente iluminado diretamente pelo sol, dando-lhe uma tonalidade amarela ", diz Wolf." O GPS e a orientação da bússola são usados, mas temos um algoritmo de re-projeção que redesenha o desenho para combinar diferentes perspectivas e distâncias. O divertido de usar o céu é que podemos nos safar com muitas distorções de GPS, já que o céu está a 2,5 km do solo. "
Seu seguimento, DoodleLens, construído no algoritmo para Blue Sky Paint e seu trabalho no Project Play, foi misturado com alguma inspiração de outro criador.
“Era uma noite de sábado e em vez de trabalhar no meu projeto paralelo, eu estava procrastinando no YouTube para assistir a um vídeo de um dos meus criadores favoritos, James Rolfe (também conhecido como YouTuber Angry Video Game Nerd).
aqui está o vídeo que me inspirou a fazer doodlelens pic.twitter.com/moC6QlQqhE
O vídeo cobriu várias câmeras que Rolfe usou, incluindo uma camcorder dos anos 90 com um recurso chamado "Memory", que poderia gravar imagens monocromáticas em filme para fazer cartões de título e outros gráficos. Rolfe o usou para adicionar efeitos aos seus filmes de um homem só.
"Eu imediatamente vi a tradução para AR", disse Wolf. "Depois de tirar meu queixo do chão, eu imediatamente abri o Unity, ajustei meu algoritmo de segmentação do céu do Blue Sky Paint para detectar papel e acabei fazendo a primeira versão do DoodleLens em apenas algumas horas. Publiquei naquela noite antes de ir para a cama, e o resto é história. "
Como o Blue Sky Paint, o DoodleLens (anteriormente denominado Doodle Cam) usa um algoritmo de aprendizado de máquina, mas, em vez de identificar o céu, usa um sombreador de computação para segmentar a visualização da câmera com base em contrastes de cores e corta as áreas com cores mais escuras. Isso permite aos usuários recortar desenhos, logotipos, texto e outras imagens do mundo real, modificá-los no aplicativo e, em seguida, colá-los em outro lugar no reino físico. Wolf continuou a adicionar novos recursos ao aplicativo, permitindo aos usuários criar animações de RA, gravar vídeos e compartilhá-los em todo o cenário de mídia social.
Wolf também mergulhou na plataforma AR relativamente nova conhecida como Snapchat's Lens Studio. Wolf e seu parceiro criativo, Kevin Habich, foram aceitos no programa de residência para criadores de AR do Snap, que proporcionou a oportunidade de aprender com as equipes de criação internas do Snapchat e receber algum financiamento para desenvolver seu projeto.
“A residência Snap AR Creator foi incrível, eu nunca tinha feito uma residência antes, então eu descreveria a experiência como uma espécie de 'Programa Acelerador de Lente'”, disse Wolf. "Basicamente, deixei de saber nada sobre o Lens Studio ou como a plataforma de AR do Snapchat opera para saber que é o futuro do espaço de AR e, desde então, adquiri um vício saudável na criação de lentes."

O resultado da residência foi o Glam Quest, que já está disponível no Snapchat. O Lens não é seu típico rosto ou efeito de mundo, mas sim um jogo de RA com uma dúzia de personagens animados, diálogos cinematográficos, ambientes virtuais e um sistema de combate de rastreamento de mãos, todos conseguindo caber no limite de 4 MB do Snapchat Lens.
"Com este Lens, ficamos obcecados em obliterar as noções preconcebidas das pessoas sobre o que um Lens poderia ser", disse Wolf. "Agora estamos retrocedendo um pouco e planejamos dividir o Glam Quest em pedaços menores de jogabilidade em um novo conceito que chamamos de Adventure Cards."
Seu próximo projeto, de codinome Troubletown, busca subverter as noções preconcebidas de RA mais uma vez. É uma série de desenhos animados que se desenrola no mundo real por meio de RA, em vez dos limites de uma tela bidimensional. A série piloto é sobre Blorp, um alienígena e membro da Beam Bois, uma "boy band intergaláctica".
“Eles precisam da sua ajuda para fazer o melhor show de todos os tempos, em um planeta cujo governo está empenhado em garantir que ninguém saiba que eles existem”, disse Wolf. "Ele tem um componente físico legal que permite aos jogadores ancorar a jogabilidade e os momentos da história em locais específicos do mundo real, com nosso objetivo final ser confundir os limites entre os jogos e a realidade e fazer com que as pessoas de fora joguem e se aventurem juntas."

* Isenção de responsabilidade editorial: Snap não teve nenhum papel ou contribuição na seleção do homenageado deste ano, a seleção foi feita exclusivamente a critério dos editores e redatores da Next Reality.
Fonte Adicione ao Google Notícias


