Virtual Marionette

Artificial Intelligence (AI) motion capture represents a significant advancement in the capture and manipulation of human motion, offering a more accessible and cost-effective approach to creating lifelike animations and interactions within digital media. The advent of AI-driven motion capture has democratized this technology, introducing numerous low-cost or free solutions that empower artists to explore innovative and abstract visual approaches. This project undertakes a comparative study of low-cost AI motion capture solutions to assess their suitability for artistic purposes, helping artists to choose which platform to use. Both quantitative and qualitative analyses are conducted, and the captured movements taken from these AI solutions are integrated into prototypes that explore abstract and non-representational visual interpretations

The video below show a comparison between eleven AI motion capture applications with the Xsens inertial motion capture system.

Video comparing different AI Mocap Applications

Unboxing was an Artistic Residence exploring new approaches to puppetry, combining puppetry manipulation in particular camera based manipulation, with real-time generation and mixing of visuals, lights and sound.

This artistic residence took place in May 2022 in Alma d’Arame with Âmandio Anastácio and Luís Grifu.

A tounchdesigner interface was created to manipulate the visuals and mix the performance.

Music: As Salamu Alaykum by Echo

Participation in a colective Art Exchibition at Fórum da Maia de 4 from 17th March till 17th April 2022.

An adaptation of the interactive installation Ditador which was developed to the “Abílio-José Santos. Revelação: Concretos e Visuais” exhibition.

This installation was developed by Grifu, Luís Aly and Marco Jerónimo using eMotion, Qlab, Kinect.

4 de março a 17 de abril
(Terça a domingo, das 10h00 às 22h00)
Inauguração: 4 de março às 19h00
Fórum da Maia
“No vasto universo das imagens”
Arte Contemporânea na Coleção da Câmara Municipal da Maia

Inserida no objetivo da promoção e valorização do património histórico e cultural, a Câmara Municipal da Maia apresenta, através do seu Pelouro da Cultura, a exposição “No vasto universo das imagens” – Arte Contemporânea na Coleção da Câmara Municipal da Maia.
Com curadoria de José Maia, “No vasto universo das imagens” advém de uma seleção de obras do núcleo de Arte Contemporânea cujo coletivo, adquirido no âmbito das inúmeras exposições promovidas pelo Município, resulta, essencialmente, da sua política cultural, assente na promoção e incentivo de jovens talentos, evidenciando, sempre que possível, os autóctones.
Organizada por núcleos distintos – Arte Contemporânea, Arte Naïf, Arte Pública e Intervenções Urbanas – a coleção de Arte da Câmara Municipal da Maia reúne obras de diversos criadores, de períodos diferentes, realizadas em áreas como a pintura, a escultura, a instalação, o vídeo, a fotografia, o grafiti ou tapeçaria.
Figurativas ou abstratas, simbólicas ou metafóricas, as criações refletem uma heterogeneidade de temáticas, entre as quais: a história e a memória, a cidadania e ambiente, a arte, o sistema e o papel dos agentes artísticos.
A exposição compreende um percurso entre o Fórum da Maia, os espaços circundantes, o edifício da Câmara Municipal e Parque Central.

ARTISTAS
Abílio-José Santos, Álvaro Siza Vieira, Ana Rainha, Ana Vidigal, Carlos Vidal, Felícia Teixeira e João Brojo, Francisco Tropa, Gil Madeira, Isaque Pinheiro, João Campolargo Teixeira, João Jacinto, Luís Aly, Luís Grifu, Marco Jerónimo, Marta Wengorovius, Miguel Leal, Miguel Palma, Moradavaga, Paulo Scavullo, Pedro Cabrita Reis, Pedro Ruiz, Robert Schad, Rui Serra, Rui Toscano, Sara Rodrigues e Rodrigo Camacho, Sérgio Leitão, Sobral Centeno, Zulmiro de Carvalho, entre outros.

PROGRAMAÇÃO
A Exposição
“No vasto universo das imagens”
Arte Contemporânea na Coleção da Câmara Municipal da Maia

No início do mês de março de 2022, as portas do Fórum da Maia irão abrir para dar a conhecer “No vasto universo das imagens”.
“Uma exposição que se torna única pelos distintos elementos que conjuga num agora. Parte do núcleo de obras concebidas pelo artista Pedro Ruiz, aqui expostas no Fórum da Maia juntamente com a coleção de Arte Contemporânea, permitem um alinhamento no tempo com a sua carreira, construída paralelamente com a produção artística e curadoria do próprio Fórum. José Maia assina a curadoria sensível de uma exposição num lugar que tão bem conhece (Bienal da Maia 2015 e 2021), e cria uma narrativa que ativa o olhar de todos, através de ligações metafóricas, que vão buscar obras que já cá estão e nos pertencem, ao mesmo tempo que provoca um novo olhar a obras de arte integradas na coleção, nem sempre acessíveis aos seus visitantes.
Esta é uma história da cidade da Maia, dos seus habitantes, e dos artistas que por cá passaram entre 1997 e 2021, entre exposições coletivas e individuais, que se expande ao exterior, incluindo a arte pública e intervenções urbanas, num diálogo de simbiose do qual raramente temos oportunidade de fazer parte. Vamos todos.”
Joana Mendonça

In the international day of the marionette Alma d’Arame promoted a round table to discuss about puppetry and the essence of the marionette.

The discussion panel was constituted by researchers, artists and by the Regional Director of Cultural of Alentejo.

Christine Zurbach was the moderador (PhD in Literatura Comparada / Estudos de Tradução). The guests were: Ana Paula Amendoeira (Regional Director of Cultural of Alentejo), Amândio Anastácio (Mestre em Teatro, Art Director of Alma d’Arame), Paulo Simões Rodrigues (Professor Auxiliar na Universidade de Évora e Presidente do CHAIA), Luís Grifu (Director of the Multimedia Departamento and Director of the Master Degree in Interactive Media at ESMAD)

Interview to the “Ler o Mundo em Português” magazine directed by Carlos Fragateiro about the new technologies and the invention of the future. Perspectives on how to make things in the future.

The interview can be accessed directly through this page!

Instalação Ditador fez parte da exposição “Abílio-José Santos. Revelação: Concretos e Visuais” aberta ao público de 4 de julho a 8 de setembro de 2019 no Fórum Maia.

The interactive installation Ditador was at the “Abílio-José Santos. Revelação: Concretos e Visuais” exhibition from July to September 2019.

This installation was developed by Grifu, Luís Aly and Marco Jerónimo using eMotion, Qlab, Kinect.

Ditador

Instalação Voa ave voo fez parte da exposição “Abílio-José Santos. Revelação: Concretos e Visuais” aberta ao público de 4 de julho a 8 de setembro de 2019 no Fórum Maia.

The interactive installation Voa ave voo was at the  “Abílio-José Santos. Revelação: Concretos e Visuais” exhibition from July to September 2019.

This installation was developed by Grifu, Luís Aly and Marco Jerónimo using Unity3D, FMOD and LeapMotion.

Ave

Raw video without sound.

The paper “Solitária – Gestural Interface for Puppetry Performance” was presented today (10.03.2020) at the fifth International Conference on Live Interfaces in Trondheim, Norway.

The program can be accessed in https://live-interfaces.github.io/liveinterfaces2020/program/

Solitária performance will be presented today (16.11.2019 – 22h) at teatro Helena Sá e Costa included in the program of Festival Internacional de Marionetas do Porto 2019 (FIMP’19)

info: https://2019.fimp.pt/pt/programa#/Solit%C3%A1ria

Artistic residence in Montemor-o-Novo with Amândio in alma d’Arame.

Exploring interactive media with body manipulation and puppetry.

Sound, visuals, lights and video. Working with Kinect, Webcams, Leapmotion and video mapping using Touchdesigner, Ableton Live and Mad Mapper.