IKEA lança experiência de design com inteligência synthetic (sem almôndegas suecas incluídas)

Para a IKEA, o que há de mais recente em transformação virtual tem tudo a ver com design de casa impulsionado por inteligência synthetic (IA) – menos as famosas almôndegas suecas do varejista de móveis e decoração para casa.

Hoje, lançou o IKEA Kreativ, uma experiência de design destinada a unir o comércio eletrônico e as jornadas do cliente na loja, impulsionada pelos mais recentes desenvolvimentos de IA em computação espacial, aprendizado de máquina e tecnologias de realidade mista 3-D. Disponível no aplicativo e on-line, a tecnologia major do IKEA Kreativ foi desenvolvida pela Geomagical Labs, uma empresa de varejo da IKEA, que o Ingka Workforce (a protecting que controla 367 lojas de 422 lojas IKEA) adquiriu em abril de 2020.

IKEA Kreativ é o próximo passo na longa jornada da IKEA em direção à transformação virtual. De acordo com a empresa, é a primeira experiência de design de autoatendimento de realidade mista com recursos completos do setor de varejo doméstico para um design realista e preciso de espaços reais profundamente integrados na jornada de compra virtual. Um usuário pode usar imagens de inspiração IKEA do showroom virtual ou suas próprias imagens capturadas para colocar móveis e móveis, experimentar opções e muito mais.

“A tecnologia 3-D e IA desenvolvida pela Geomagical Labs será usada para destacar digitalmente a singularidade da IKEA”, Phil Guindi, chefe de produtos da Geomagical Labs. “Este é um momento essential na jornada de transformação da IKEA, à medida que continuamos a desenvolver e inovar para atender o cliente e suas necessidades, onde quer que estejam.”

Como a IKEA Kreativ oferece exploração orientada por IA

O design de uma casa pode ser difícil, disse Guindi, porque as pessoas geralmente compram sem contexto, confiando em sua imaginação. “Na verdade, 87% dos nossos clientes dizem que querem se sentir bem em sua casa, mas apenas metade deles sabe como fazê-lo”, disse ele.

A IKEA Kreativ transforma fotografias de salas em impressionantes “salas de jogos digitais” interativas que qualquer pessoa pode usar para explorar ideias de design. “Ao entender uma cena fotografada em grande detalhe – incluindo a geometria 3-D da cena, os objetos na cena, a iluminação na cena e os materiais na cena – os clientes podem projetar interativamente as imagens da sala, permitindo que eles adicionem móveis e decoração de parede e remover móveis existentes digitalmente”, disse ele.

A tecnologia central é sob medida e proprietária, disse ele. “Sempre que possível, padrões abertos modernos e código aberto foram usados, em vez de serviços licenciados ou de fornecedores, para maximizar a liberdade de inovar e minimizar o aprisionamento.” ele disse.

Os aplicativos móveis e da Internet se conectam a uma plataforma escalonável, conteinerizada e baseada em nuvem de microsserviços e pipelines de IA, hospedada pelo Google Cloud Platform.

De acordo com Guindi, quando um cliente escaneia uma sala, os dados de fotografia e sensor do telefone são enviados para o pipeline de IA na nuvem, onde são processados ​​em um cluster de computação de GPU altamente paralelizado para criar imagens de grande angular com dados espaciais para permitir aplicativos cliente para projetar e editar interativamente as cenas.

“Ao descarregar cálculos complexos para a nuvem, permitimos que dispositivos móveis menos caros e de baixa potência executem algoritmos de IA complexos e alcancem mais clientes da IKEA”, disse ele.

Tecnologia de rede neural semelhante a carros autônomos

A IA da IKEA Kreativ foi desenvolvida usando as mesmas tecnologias de rede neural de IA visible dos carros autônomos, para entender os espaços domésticos usando a visualização em escala, de acordo com o comunicado de imprensa da empresa.

Guindi explicou que isso é semelhante aos carros autônomos porque, para operar com segurança, os veículos robóticos precisam formar alguma compreensão do espaço ao seu redor, chamado de ‘percepção espacial’ ou ‘percepção de cena’.

“Os veículos robóticos usam várias tecnologias para entender o mundo ao seu redor, como SLAM visual-inercial para estimar a posição do veículo no espaço, visão estéreo para estimar a profundidade de pixels em uma imagem de vídeo, estimativa de profundidade neural para estimar a profundidade de imagens de vídeo e segmentação semântica para reconhecer e delinear objetos importantes no espaço”, disse ele.

A compreensão de uma cena interna compartilha algumas semelhanças com um veículo que detecta seu ambiente. A nova experiência virtual da IKEA inspira-se nestes métodos – embora as aplicações de design internal enfrentem desafios únicos e difíceis. Por exemplo, o treinamento de redes neurais para aplicativos veiculares não funcionará bem em ambientes fechados porque as salas e as cidades parecem muito diferentes e contêm objetos diferentes.

“Você precisa treinar redes especialmente em grandes volumes de dados de treinamento interno para fornecer resultados internos utilizáveis”, disse Guindi.

Salas internas e visão computacional 3-D

As salas internas também são notoriamente difíceis de reconstruir geometricamente por algoritmos de visão computacional 3-D porque muitas superfícies são cuidadosamente pintadas para ficarem em branco (sem recursos visuais rastreáveis), são brilhantes (os reflexos do espelho confundiram os estimadores de distância), têm padrões repetidos de fábrica ( que confundem os rastreadores de recursos visuais) ou falham porque as salas são muito mais escuras do que os ambientes externos.

“Como implementamos uma solução de realidade mista para harmonizar objetos virtuais com fotografia actual, precisamos ter uma compreensão muito melhor da iluminação dentro de uma sala”, explicou Guindi. “Queremos ‘apagar objetos’ das fotos de casa, por isso precisamos de tecnologia para poder estimar a geometria e as imagens escondidas atrás dos móveis.” E, embora os veículos robóticos possam pagar por {hardware} de detecção caro, como sensores de profundidade a laser, radar e matrizes de várias câmeras, a IKEA valoriza a acessibilidade, acrescentou: “Queremos que todos usem os aplicativos em smartphones comuns, sem exigir {hardware} exótico ou especializado”.

Depois que uma visualização é digitalizada e processada pelo pipeline Cloud AI, os consumidores podem projetar uma sala de qualquer lugar em qualquer dispositivo, seja no navegador da Internet de desktop, navegador da Internet do computer e no aplicativo móvel da IKEA.

“Quando eles iniciam uma experiência de design, eles verão uma foto 3-D imersiva de grande angular da sala digitalizada”, disse Guindi. Os consumidores podem navegar em um painel de catálogo de produtos IKEA e escolher qualquer número de produtos para adicionar à sala, que aparecerão dentro da foto, com tamanho, perspectiva, oclusão e iluminação realistas. O usuário pode mover e girar produtos, empilhar detalhes decorativos em cima de outros produtos e pendurar arte de parede nas paredes. Os clientes também podem editar sua sala unique removendo digitalmente itens que não desejam mais, como um sofá antigo que desejam substituir.

A IKEA Kreativ enfrentou muitos desafios

A IKEA Kreativ enfrentou muitos desafios antes de ser lançada no mercado, disse Guindi. Por um lado, foi um desafio dar vida aos produtos IKEA de uma forma inspiradora e realista.

“Isso requer estimativas detalhadas de iluminação e geometria da cena e requer o uso de renderização de gráficos 3-D para renderizar os materiais”, disse ele. “E isso requer a produção de representações 3-D com eficiência de memória e visualmente bonitas da arte da linha de produtos IKEA.”

Além disso, a IKEA precisa entender uma cena fotografada com precisão suficiente para que o cliente possa projetar seu espaço com sucesso. “Isso significa detectar a existência e a localização 3-D de pisos, paredes e superfícies onde se pode colocar móveis, para que eles possam vê-los no tamanho e na perspectiva certos”, explicou Guindi. Por exemplo, isso significa ter objetos em primeiro plano na sala, objetos incrivelmente obscuros que você transfer atrás deles. Também inclui estimar as fontes de luz na cena para projetar sombras e reflexos.

Melhorias que virão com o pace

A tecnologia de percepção de cena de IA é um tópico pesquisado ativamente e continua sendo um desafio muito difícil, continuou Guindi. “O produto de hoje pode parecer mágico, mas não é perfeito”, disse ele. “Pode ficar confuso, por exemplo, se não vir muito chão, ou se as paredes estiverem completamente em branco.”

Ainda assim, o IKEA Kreativ “é um grande salto para a IKEA e para nossos clientes, pois oferece recursos aos clientes que antes não eram possíveis”, disse ele. “Estamos vendo nossos clientes alcançarem resultados impressionantes e avaliamos o produto e a tecnologia em centenas de milhares de salas diversas onde vimos os algoritmos funcionarem bem na grande maioria dos casos.”

Melhorias adicionais serão lançadas ao longo do pace, acrescentou ele, incluindo a capacidade de alterar as cores das paredes em seu próprio espaço e adicionar móveis montados na parede e no teto, além de maneiras mais colaborativas de projetar uma casa com outras pessoas.