O vento que sopra nas árvores sente-se nas mãos.  Só pode ser início de ano porque as amendoeiras estão floridas, a lembrar um nevão num qualquer reino nórdico. A ponta dos dedos arrefece. Além do cheiro, na boca nota-se o sabor a amêndoa. Visitar um museu ou exposição, por exemplo, sobre a lenda das amendoeiras em flor, atira-nos para dentro do quadro. Parece ficção, mas já é realidade. É a conjugação da criatividade e da tecnologia “made in Algarve”. Uma empresa em Loulé teve a ideia, um grupo de engenheiros e outros especialistas da Universidade do Algarve desenvolveu a tecnologia. O M5SAR chegou para mexer com os sentidos.

Há uma aplicação e um pequeno aparelho que se liga ao telemóvel. Software e hardware foram pensados para o uso em museus e exposições, mas podem ser adaptados a produtos, marcas e um sem-fim de utilizações. João Rodrigues é uma das cabeças que partiu pedra a desenvolver a ideia de Paulo Bica. Um é professor e vice-reitor na Universidade do Algarve, o outro lidera a SPIC, uma empresa parceira do meio académico em vários projetos. Desta vez, o desafio era dar aos museus uma ferramenta que tirasse proveito dos telemóveis que andam nos bolsos de todos e oferecer mais do que os habituais áudio-guias ou panfletos. O sistema foi desenvolvido de forma a conciliar a integração de realidade aumentada, a tecnologia de image recognition e um dispositivo sensorial acoplado a um telefone móvel.

“A ideia era ter uma experiência mais interativa e personalizada”, diz o especialista em engenharia eletrónica e computação. “A pessoa, ao inscrever-se na aplicação, define as suas características e preferências e o sistema consegue definir o percurso ideal. Se estivermos perante um perito em arte, vai querer informação mais pormenorizada de algumas peças e basta apontar o telemóvel para o quadro ou objeto e esses dados são-lhe disponibilizados. Se for uma criança ou alguém com dificuldade de locomoção, o percurso poderá ser outro.  Consoante os interesses do visitante, as peças a destacar também podem mudar”. O utilizador tem total autonomia para definir o percurso que quer e reforçar o conhecimento através de conteúdo digital. “Se a pessoa disser que quer ver peças da época Romana e a aplicação se aperceber pela georeferenciação que está a fazer paragens na sala do espólio grego, automaticamente, o percurso é adaptado”, acrescenta João Rodrigues. Ao apontar, também, o telemóvel para as peças é-lhe dada mais informação sobre o que está a ver. Quanto mais peças apontar, melhor vai sendo ajustado o percurso. Trata-se de uma interação em tempo real, através da utilização sensitiva e cognitiva. Com o reconhecimento de imagens bidimensionais e 3D consegue-se uma espécie de diálogo instantâneo entre a obra e quem a visita. Há, ainda, as portas que se abrem com a tecnologia da Realidade Aumentada, que dá ao utilizador informação adicional prática, teórica, estética e simbólica. O acesso aos conteúdos de informação pode englobar dados sobre a obra, o artista, a técnica ou o contexto histórico, através de texto, fotografia e materiais audiovisuais.

Outra vantagem deste guia sensorial para museus é que ninguém se perde. “No caso de uma família, é possível o pai e a mãe estarem numa sala a ver parte da exposição e os filhos noutra mais adaptada, sendo que os pais sabem sempre onde estão os miúdos. O mesmo se aplica a visitas de grupos”.

A tecnologia de microlocalização através de sensores permite aprimorar a experiência dos visitantes. É possível interagir com as salas do museu em qualquer ponto, identificar e receber notificações automáticas dos locais por onde passa. Visitar uma exposição com algumas destas soluções pode tornar a experiência numa espécie de jogo ou competição. Mas apesar destes componentes serem interessantes em termos de oferta de serviço, a grande inovação foi desenvolver um dispositivo que agregado a um telemóvel permite criar a sensação dos cinco sentidos.

Não se limite a ver. Sinta tudo à sua volta!

O desafio na página da M5SAR já diz ao que vem. Se a visão e a audição são amplamente exploradas em qualquer smartphone, pelos vídeos e áudios a que acedemos, o dispositivo AMtop, que integra o sistema desenhado pela equipa da universidade do Algarve, junta-lhe mais três sentidos humanos. São criadas sensações de tato, olfato e paladar. É possível agarrar no dispositivo e sentir o quente e o frio, com micro dispersores de cheiro percebem-se fragrâncias e é possível também ter a sensação do paladar através de sabores vaporizados. João Rodrigues pega na lenda das amendoeiras em flor para exemplificar: ”é possível ao longo da exposição sentir o cheiro das amêndoas, a sensação térmica do frio ou, se a peça estiver ligada a sabores, ‘provar’, por exemplo, uma amêndoa. Não haverá o fruto em si para trincar, mas o dispositivo, à semelhança de um cigarro eletrónico, tem uma palhinha agregada e a pessoa tem a sensação do sabor”, explica. O sistema tem um doseamento individual e cumpre todos os critérios de higiene e segurança.

A construção dos protótipos envolveu duas componentes e três mãos cheias de diferentes especialistas. Houve a parte do laboratório, centrada na inteligência artificial, no hardware e no software. Trabalho sobretudo de engenheiros eletrotécnicos, informáticos e matemáticos. Outra etapa envolveu uma equipa mais multidisciplinar, com engenheiros alimentares, designers e da área da museologia.

Faltavam sentidos

A SPIC olhou para os museus e percebeu que boa parte da oferta era igual a um grande bocejo. As infraestruturas tecnológicas e interativas tinham uma opção reduzida e a orientação dos visitantes no espaço era suportada por guias, suportes tradicionais em papel ou audioguias. Isto num mundo em que todos têm a tecnologia na ponta dos dedos em qualquer dispositivo móvel. Paulo Bica explica o raciocínio: “a popularidade e evolução dos dispositivos móveis poderia permitir que a visita fosse mais autónoma, com vários diretórios de informação e uma experiência mais imersiva e completa”.

Desenvolvido o produto, começou a pensar-se no mercado.” O projeto surgiu direcionado para unidades museológicas, mas as tecnologias sensoriais, em especial, permitem alcançar diferentes mercados. Além de priorizar o setor dos museus, tem uma enorme aplicabilidade em atrações turísticas tecnológicas, eventos, experiências de marcas”.

Explosão de minas, reconhecimento facial e máscaras digitais no mercado

A SIPC investiu cerca de 200 mil euros, metade dos quais suportados por fundos comunitários num projeto que ficou concluído em 2018, com o protótipo   preparado para ser lançado. A pandemia, no entanto, veio atrapalhar os planos.

O M5SAR tinha apontado a mira aos museus, mas esta vertente do produto ainda precisa ser limada. Paulo Bica admite que “existem necessidades de desenvolvimento adicional que permitam criar uma solução comercial mais funcional. Neste momento está a ser efetuada a reestruturação do produto, tendo por base tecnologias mais atuais e otimizadas”.

Ainda assim, a sua aplicabilidade pode ser vista no Parque Mineiro de Aljustrel, onde foram criadas várias instalações interativas, entre as quais a experiência sensorial. “Foi criada uma simulação de uma explosão mineira que permite aos visitantes verem-se envolvidos na experiencia que desperta todos os sentidos”, explica o administrador da Spic “a solução apresenta um sistema de som envolvente, com integração de sensores e difusores de fumo e cheiros. O resultado final apresenta um elevado fator emocional, tornando a visita mais memorável”.

Das tecnologias identificadas e afinadas durante a execução do projeto, algumas estão já comercializadas. Para a Vodafone e HBO, a SPIC criou uma estrutura interativa que processa informações biométricas dos utilizadores, via reconhecimento facial, para uma espécie de match com personagens da guerra dos tronos, através de “image recognition”. Depois, mediante um processo de morphing, consegue-se um pequeno vídeo com a transformação do rosto do utilizador, que é enviado por e-mail.

Outra aplicação da tecnologia de Realidade Aumentada foi usada num sistema criado para a Fidelidade Seguros que dá ao utilizador a possibilidade de pintar o rosto, com máscaras digitais, em tempo real, sem o inconveniente das tintas.

A solução integrada do M5SAR esteve presente no Museu de Faro como prova de conceito e demonstração ao público. Atualmente a experiencia completa pode ser realizada com a SPIC/UALG.

Foto: DR.