O bolsista do MAD Alexander Htet Kyaw conecta humanos, máquinas e o mundo físico usando IA e realidade aumentada.
O bolsista MAD do MIT Alexander Htet Kyaw é um estudante de pós-graduação que busca mestrado duplo em estudos de arquitetura em computação e em engenharia elétrica e ciência da computação. Créditos: Foto: Adelaide Zollinger
A velocidade com que novas tecnologias chegam ao mercado não se compara à velocidade com que pesquisadores talentosos encontram maneiras criativas de usá-las, treiná-las e até mesmo transformá-las em coisas sem as quais não podemos viver. Um desses pesquisadores é Alexander Htet Kyaw , bolsista MAD do MIT, um estudante de pós-graduação cursando mestrado duplo em estudos arquitetônicos em computação e em engenharia elétrica e ciência da computação.
Kyaw usa tecnologias como inteligência artificial, realidade aumentada e robótica e as combina com gestos, fala e reconhecimento de objetos para criar fluxos de trabalho de IA humana que têm o potencial de interagir com nosso ambiente construído, mudar a maneira como compramos, projetar estruturas complexas e fazer coisas físicas.
Uma de suas inovações mais recentes é o Curator AI, pelo qual ele e seus parceiros estudantes de pós-graduação do MIT ganharam o primeiro prêmio — US$ 26.000 em produtos OpenAI e dinheiro — na conferência MIT AI Build: Generative Voice AI Solutions, um hackathon de uma semana no MIT com apresentações finais realizadas no último outono em Nova York. Trabalharam com Kyaw Richa Gupta (arquitetura) e Bradley Bunch, Nidhish Sagar e Michael Won — todos do Departamento de Engenharia Elétrica e Ciência da Computação (EECS) do MIT.
O Curator AI foi projetado para agilizar a compra de móveis online, fornecendo recomendações de produtos contextualizadas usando IA e RA. A plataforma usa RA para medir as dimensões de um cômodo, incluindo a localização de janelas, portas e móveis existentes. Os usuários podem então falar com o software para descrever os novos móveis que desejam, e o sistema usará um modelo de IA com linguagem de visão para pesquisar e exibir várias opções que correspondam tanto às solicitações do usuário quanto às características visuais do cômodo.
“Os compradores podem escolher entre as opções sugeridas, visualizar produtos em realidade aumentada e usar linguagem natural para solicitar modificações na busca, tornando o processo de seleção de móveis mais intuitivo, eficiente e personalizado”, diz Kyaw. “O problema que estamos tentando resolver é que a maioria das pessoas não sabe por onde começar ao mobiliar um ambiente, então desenvolvemos o Curator AI para fornecer recomendações inteligentes e contextuais com base na aparência do seu ambiente.” Embora o Curator AI tenha sido desenvolvido para a compra de móveis, ele pode ser expandido para uso em outros mercados.
Outro exemplo do trabalho de Kyaw é o Estimate, um produto que ele e outros três alunos de pós-graduação criaram durante o hackathon da Conferência de Tecnologia de Produtos Sloan do MIT, em março de 2024. O foco da competição era ajudar pequenas empresas; Kyaw e sua equipe decidiram basear seu trabalho em uma empresa de pintura em Cambridge, que emprega 10 pessoas. O Estimate utiliza realidade aumentada e uma tecnologia de IA com reconhecimento de objetos para tirar as medidas exatas de um cômodo e gerar uma estimativa detalhada do custo de uma reforma e/ou pintura. Ele também utiliza IA generativa para exibir imagens do cômodo ou cômodos como eles ficariam após a pintura ou reforma, e gera uma fatura após a conclusão do projeto.
A equipe venceu o hackathon e ganhou US$ 5.000 em dinheiro. Os companheiros de equipe de Kyaw eram Guillaume Allegre, May Khine e Anna Mathy, todos formados pelo MIT em 2024 com mestrado em análise de negócios.
Em abril, Kyaw dará uma palestra no TedX em sua alma mater, a Universidade Cornell, na qual descreverá o Curator AI, o Estimate e outros projetos que usam IA, RA e robótica para projetar e construir coisas.
Um desses projetos é o Unlog, no qual Kyaw conectou realidade aumentada com reconhecimento de gestos para construir um software que recebe informações do toque da ponta do dedo na superfície de um material, ou mesmo no ar, para mapear as dimensões dos componentes de uma construção. Foi assim que surgiu o Unlog — uma imponente escultura de arte feita de troncos de freixo, localizada no campus da Cornell.
O Unlog representa a possibilidade de construir estruturas diretamente a partir de uma tora inteira, em vez de a tora ser transportada para uma serraria para ser transformada em tábuas ou tábuas de madeira de dois por quatro, e depois enviada para um atacadista ou varejista. É uma boa representação do desejo da Kyaw de usar materiais de construção de forma mais sustentável. Um artigo sobre este trabalho, " Reconhecimento Gestual para Fabricação de Realidade Mista Baseada em Feedback: Um Estudo de Caso da Torre UnLog ", foi publicado por Kyaw, Leslie Lok, Lawson Spencer e Sasa Zivkovic nos Anais da 5ª Conferência Internacional sobre Design Computacional e Fabricação Robótica, em janeiro de 2024.
Outro sistema desenvolvido por Kyaw integra simulação física, reconhecimento de gestos e realidade aumentada para projetar estruturas de flexão ativa construídas com varas de bambu. O reconhecimento de gestos permite que os usuários manipulem módulos digitais de bambu em realidade aumentada, e a simulação física é integrada para visualizar como o bambu se curva e onde fixar as varas de bambu de forma a criar uma estrutura estável. Este trabalho foi publicado nos Anais do 41º evento de Educação e Pesquisa em Design Arquitetônico Assistido por Computador na Europa, em agosto de 2023, como " Flexão Ativa em Realidade Mista Baseada em Física: O Design e a Fabricação de um Sistema Modular de Bambu Reconfigurável ".
Kyaw apresentou uma ideia semelhante, usando módulos de bambu para criar estruturas implantáveis no ano passado, ao MITdesignX, um programa de MAD do MIT que seleciona startups promissoras e fornece treinamento e financiamento para lançá-las. Desde então, Kyaw fundou a BendShelters para construir abrigos modulares e pré-fabricados de bambu e espaços comunitários para refugiados e pessoas deslocadas em Mianmar, seu país natal.
“Onde eu cresci, em Mianmar, vi muitos efeitos cotidianos das mudanças climáticas e da pobreza extrema”, diz Kyaw. “Há uma enorme crise de refugiados no país, e quero pensar em como posso retribuir à minha comunidade.”
Seu trabalho com a BendShelters foi reconhecido pelo MIT Sandbox, PKG Social Innovation Challenge e pelo Prêmio Amazon Robotics para o Bem Social.
No MIT, Kyaw está colaborando com o professor Neil Gershenfeld, diretor do Centro de Bits e Átomos, e a doutoranda Miana Smith para usar reconhecimento de fala, IA generativa 3D e braços robóticos para criar um fluxo de trabalho que permite a construção de objetos de forma acessível, sob demanda e sustentável. Kyaw é bacharel em arquitetura e ciência da computação pela Universidade Cornell. No ano passado, recebeu uma bolsa SJA do Arquivo Steve Jobs, que financia projetos na interseção entre tecnologia e artes.
“Gosto de explorar diferentes tipos de tecnologias para projetar e fabricar coisas”, diz Kyaw. “Fazer parte do MAD me fez refletir sobre como todo o meu trabalho se conecta e ajudou a esclarecer minhas intenções. Minha visão de pesquisa é projetar e desenvolver sistemas e produtos que permitam interações naturais entre humanos, máquinas e o mundo ao nosso redor.”