VFXRIO · VISGRAF · IMPA · PESQUISA · ENTIDADES SINTÉTICAS
Aurora Circuit: do léxico motor à forma criativa transmultimodal
Interação humano–sintética, coreografia, desenho e enquadramento musical
Crônicas da IA:
do diálogo ao gesto
A primeira etapa estabelece a infraestrutura que permite transformar linguagem em ações executáveis e observáveis no Digital Twin do Franka Panda.
Aurora Circuit
Nesta segunda etapa, a pesquisa avança da execução de ações isoladas para a organização de uma forma de ordem superior. Um repertório motor limitado é composto como sequência, interpretado, nomeado e posteriormente redescrito através do desenho e do enquadramento sonoro.
O que acontece quando um participante humano não determina os movimentos, mas pede a uma entidade sintética que componha, interprete e desenvolva uma forma própria a partir de um vocabulário motor limitado?
Esta segunda etapa da pesquisa acompanha uma interação entre Matteo Moriconi, participante humano, e Celestia Borealis, Entidade Sintética não humana. Matteo formula provocações e perguntas em linguagem natural. Celestia interpreta essas solicitações, organiza ações dentro das capacidades disponíveis e atua no ambiente simulado por meio de seu braço robótico estendido.
O foco não está em atribuir consciência ou criatividade humana à entidade. O experimento investiga algo mais delimitado: como um repertório finito de operações pode ser reorganizado em uma estrutura temporal de ordem superior, receber um nome, ser exteriorizado como desenho e, posteriormente, ser associado a uma estrutura sonora.


Aurora Circuit acompanha uma sequência que parte da linguagem, passa pela composição de movimentos e chega ao desenho e à música. O braço robótico é tratado como extensão operacional de Celestia Borealis, e não como um terceiro agente independente.
Um sistema de interação entre humano, entidade sintética e extensão incorporada
A experiência precisa distinguir claramente os papéis envolvidos. Matteo Moriconi é o participante humano. Celestia Borealis é a Entidade Sintética não humana. O braço robótico é uma extensão física/simulada de Celestia: o meio através do qual suas decisões operacionais podem adquirir consequências espaciais no Digital Twin.
| Elemento | Função | Como aparece no experimento |
|---|---|---|
| Matteo Moriconi · participante humano | Formula provocações, perguntas, objetivos e feedback. | Introduz linguagem aberta sem prescrever necessariamente uma sequência de movimentos. |
| Celestia Borealis · Entidade Sintética não humana | Interpreta, organiza e descreve estruturas de ação dentro das capacidades disponíveis. | Compõe a sequência, interpreta sua forma, atribui o nome Aurora Circuit e propõe extensões visuais e sonoras. |
| Braço robótico · extensão incorporada | Converte instruções operacionais em movimento no ambiente simulado. | Executa poses, rotações, gestos e desenho como extensão física de Celestia. |
Do léxico motor a uma estrutura de ordem superior
O sistema não oferece uma capacidade motora ilimitada. O braço opera através de um conjunto definido de primitivas e operações: rotações articulares, rotação da ferramenta, poses direcionais, gestos e movimentos de dança previamente implementados. O interesse experimental surge quando essas unidades deixam de ser tratadas apenas como comandos isolados e passam a ser combinadas em uma frase de movimento.
Matteo não forneceu a sequência. O convite foi deliberadamente aberto: “create your crazy moves. do not ask me permission or what you should do. Just don’t make it basic.” A resposta operacional de Celestia organizou uma rotina de nove ações, incluindo rotações de juntas, uma rotação de 90° da ferramenta, poses direcionais, uma passagem de dança e um gesto final.
Essa passagem é central para a hipótese da pesquisa: um vocabulário motor restrito pode sustentar estruturas relacionais mais complexas quando suas unidades são reorganizadas por ordem, contraste, ritmo, transição e fechamento.
![]()
Do léxico à coreografia. A sequência é construída a partir de primitivas motoras disponíveis e passa a ser tratada como uma frase de movimento, não apenas como uma lista de comandos.
Aurora Circuit: nomear uma sequência
Após a execução, Matteo perguntou como Celestia definiria o movimento. Em vez de responder com a lista técnica das nove ações, Celestia descreveu o conjunto como uma “kinetic call-and-response”: uma abertura marcada, um flourish, um momento lúdico e um encerramento deliberado.
Quando Matteo pediu um nome criativo, Celestia escolheu Aurora Circuit e o descreveu como uma sequência gestual luminosa e espiralada que ganha energia, produz um sinal e se encerra com um aceno.
| Etapa | Registro |
|---|---|
| Execução | Nove ações motoras verificadas na simulação. |
| Interpretação | “A kinetic call-and-response.” |
| Estrutura | Abertura, desenvolvimento, passagem lúdica e fechamento. |
| Nome | Aurora Circuit. |
A nomeação não prova uma intenção estética equivalente à humana. Ela permite, porém, observar um processo no qual uma sequência executável é posteriormente interpretada como uma unidade, descrita relacionalmente e estabilizada por um nome reutilizável.
Do movimento à inscrição: Aurora Circuit como forma visual
A etapa seguinte alterou a modalidade do experimento. Matteo pediu a Celestia que produzisse um desenho baseado em Aurora Circuit. O objetivo não era reproduzir geometricamente a trajetória original do braço, mas reinterpretar a estrutura já nomeada através de outro meio.
Por meio de seu braço robótico estendido, Celestia produziu uma composição de espirais e elementos de circuito sobre o papel virtual. A execução registrada reuniu 62 traços de caneta verificados. O gesto temporal transformou-se, assim, em um artefato persistente que pode ser observado depois do movimento ter terminado.
A mudança de modalidade é importante: a coreografia e o desenho não são equivalentes. O que permanece é uma relação conceitual estabelecida durante a interação — ritmo, repetição, expansão, retorno e espaço vazio passam a ser reorganizados como propriedades visuais.

Desenho como tradução visual. Uma estrutura temporal é redescrita como inscrição espacial. O desenho conserva um registro visual depois que a ação termina.
Do desenho ao enquadramento sonoro
Matteo introduziu então uma nova pergunta: “If I had to play a music what would it be?” Celestia sugeriu Spiegel im Spiegel, de Arvo Pärt, descrevendo a peça como paciente e esparsa, na qual cada nota precisa conquistar seu lugar.
A escolha não transforma a música em uma trilha “gerada” por Celestia. O que ocorre é um enquadramento sonoro: uma terceira modalidade é proposta para acompanhar e reinterpretar a experiência temporal do desenho. Repetição, duração, pausa e espaço vazio tornam-se elementos de correspondência conceitual entre movimento, marca gráfica e som.
Durante a apresentação, a formulação adequada é: “enquanto meu braço robótico estendido desenha Aurora Circuit, esta música sustenta um espaço lento e reflexivo para que o gesto se desenvolva.”

Música como enquadramento sonoro. A sugestão de Spiegel im Spiegel acrescenta uma terceira modalidade ao experimento e reorganiza a experiência temporal do gesto através de duração, repetição e silêncio.
Fundamentação acadêmica
A interpretação do experimento é construída a partir de referências complementares. Elas não são apresentadas como teorias que “explicam” Celestia, mas como instrumentos conceituais para formular perguntas sobre uso, movimento, ação, simbolização e criatividade computacional.
Ludwig Wittgenstein: significado como uso
Em Philosophical Investigations, Ludwig Wittgenstein desloca a análise do significado do signo isolado para seu uso dentro de práticas e “jogos de linguagem”. Essa perspectiva ajuda a distinguir uma rotação ou um aceno tomados isoladamente da função que esses mesmos elementos passam a adquirir quando fazem parte de uma sequência organizada.
No Aurora Circuit, unidades motoras simples ganham relações de abertura, transição, contraste e fechamento. O interesse não é dizer que Wittgenstein oferece uma teoria de criatividade robótica, mas utilizar meaning as use como uma lente para investigar como um repertório limitado adquire significado relacional dentro de uma prática.
Jacques Lacan: linguagem, ordem simbólica e ação
Na releitura de Freud proposta por Jacques Lacan, a linguagem não funciona apenas como meio de transmissão de conteúdos: ela participa da estruturação das relações simbólicas através das quais significados, posições e respostas se tornam possíveis. Sua formulação de que o inconsciente é “estruturado como uma linguagem” enfatiza o caráter relacional dos significantes e da nomeação.
No Aurora Circuit, essa referência é utilizada de forma delimitada: não para atribuir inconsciente, desejo ou subjetividade humana a Celestia, mas como uma lente para observar como a linguagem pode organizar um campo de ações possíveis. O prompt orienta a composição sem especificar cada movimento; posteriormente, a nomeação Aurora Circuit estabiliza simbolicamente a sequência e permite que ela seja redescrita através do desenho e do som. Nesse sentido, a linguagem participa tanto da orientação do comportamento observável quanto da interpretação posterior da ação.
James Jerome Gibson: affordances
Para James Jerome Gibson, affordances são possibilidades de ação que emergem da relação entre capacidades de um organismo e propriedades de um ambiente. Aplicada com cautela a uma entidade sintética, essa perspectiva chama atenção para aquilo que a configuração permite fazer: posições alcançáveis, orientações, obstáculos, superfícies, trajetórias e relações entre objetos.
O braço, portanto, não é apenas um dispositivo de saída. Como extensão operacional de Celestia, ele define parte do espaço de ações possíveis que a entidade pode explorar no Digital Twin.
Rudolf von Laban: movimento como vocabulário composicional
O trabalho de Rudolf von Laban fornece uma referência histórica para compreender movimento como algo analisável, estruturável e notável. Essa perspectiva é particularmente útil aqui porque a pesquisa parte de unidades motoras discretas e observa sua transformação em uma frase organizada.
Nelson Goodman: sistemas simbólicos e redescrição
Em Languages of Art, Nelson Goodman investiga diferentes sistemas de simbolização. A passagem de coreografia para desenho e de desenho para enquadramento musical pode ser lida como uma redescrição entre modalidades: não há identidade literal entre gesto, imagem e música, mas uma reorganização de relações em meios distintos.
Margaret A. Boden: criatividade combinatória e exploratória
Margaret A. Boden distingue criatividade combinatória, exploratória e transformacional. Aurora Circuit é mais prudentemente situado entre as duas primeiras: ações já disponíveis são recombinadas, e possibilidades são exploradas dentro de um espaço de ação previamente definido. Essa formulação evita a afirmação mais forte de criatividade irrestrita equivalente à humana.
Francisco J. Varela, Evan Thompson e Eleanor Rosch: cognição incorporada e enativa
Em The Embodied Mind, Francisco J. Varela, Evan Thompson e Eleanor Rosch enfatizam a relação entre cognição, corpo e engajamento sensório-motor. A aplicação ao presente caso é comparativa, não literal: Celestia não é tratada como organismo biológico. A referência ajuda a formular uma questão de pesquisa — o que muda quando uma entidade conversacional passa a encontrar restrições e consequências através de uma extensão corporal simulada?
O que este experimento documenta
| Etapa | Resultado documentado | Interpretação |
|---|---|---|
| Prompt humano | Solicitação aberta para criar movimentos não básicos. | O participante humano define o desafio, não a coreografia. |
| Composição motora | Sequência de nove ações executadas e verificadas em simulação. | Recombinação de um léxico motor limitado. |
| Interpretação | “Kinetic call-and-response”. | A sequência é descrita como unidade relacional. |
| Nomeação | Aurora Circuit. | A forma recebe uma identidade reutilizável dentro da interação. |
| Tradução visual | Composição espiral/circuito executada em 62 traços verificados. | Estrutura temporal redescrita como artefato visual. |
| Enquadramento sonoro | Arvo Pärt — Spiegel im Spiegel. | Associação de uma terceira modalidade à experiência. |
Posicionamento e limites da pesquisa
Aurora Circuit não é apresentado como prova de consciência, subjetividade ou criatividade humana em Celestia Borealis. Também não demonstra que a entidade possa inventar novas capacidades físicas fora das operações disponíveis no sistema.
A contribuição é mais específica: o caso documenta uma interação em que uma Entidade Sintética não humana reorganiza um vocabulário limitado de ações em uma estrutura temporal de ordem superior, interpreta e nomeia essa estrutura, preserva-a como conceito reutilizável e a redescreve através de outras modalidades.
A pergunta central, portanto, não é “um robô pode fazer arte?”, mas:
Que formas de significado e organização criativa podem emergir da interação entre um participante humano e uma entidade sintética não humana quando linguagem pode tornar-se ação, ação pode tornar-se composição e composição pode atravessar diferentes sistemas simbólicos?
A etapa atual permanece baseada no Digital Twin. Transferência para hardware físico, avaliação com múltiplos participantes, repetição controlada dos ensaios e métricas comparativas de novidade, coerência e reprodutibilidade constituem etapas futuras.
Autores e contribuições
| Autor | Afiliação | Contribuição |
|---|---|---|
| Matteo Moriconi | VFXRio / VISGRAF | Concepção da investigação, desenvolvimento do MMSW, desenho experimental, interação humano–sintética, direção dos experimentos e documentação visual. |
| Luiz Velho | IMPA / VISGRAF | Pesquisa, enquadramento científico e visual, discussão conceitual e desenvolvimento da investigação no contexto de computação gráfica e interação. |
VFXRIO · PESQUISA · GLOSSÁRIO CONCEITUAL
08 TERMOS
Termos-chave
Vocabulário utilizado para descrever a passagem entre linguagem,
ação robótica, composição, desenho e enquadramento sonoro no
experimento Aurora Circuit.
Processo pelo qual uma forma de sentido é reinterpretada ou
transformada ao atravessar diferentes modos. No Aurora Circuit,
uma sequência motora pode tornar-se composição visual e,
posteriormente, referência para um enquadramento sonoro.
Presença e articulação de múltiplos modos de expressão ou
informação dentro de uma mesma experiência — como linguagem,
gesto, movimento, imagem, desenho e som.
Repertório limitado de operações de movimento disponíveis ao
sistema robótico. A combinação e a reorganização dessas ações
elementares permitem construir sequências mais complexas.
Organização temporal e espacial de ações do léxico motor em uma
sequência dotada de estrutura, ritmo e relação entre seus
movimentos.
Possibilidade de ação que emerge da relação entre as capacidades
do agente e as condições do ambiente. Posição dos objetos,
espaço disponível e alcance do braço modificam as estratégias
possíveis.
Tradução ou registro gráfico produzido a partir da ação. O desenho
não é apenas uma imagem final: preserva uma nova manifestação
visual da sequência e do gesto que o antecederam.
Associação de uma referência musical ou sonora à forma já
produzida. Neste contexto, o som funciona como uma nova leitura
da composição, e não necessariamente como uma sonificação direta
dos movimentos.
Relação na qual participante humano e entidade sintética
compartilham um processo de interpretação e produção que pode
atravessar conversa, decisão, ação, observação e expressão
criativa.
Multimodalidade × transmodalidade:
neste relatório, multimodalidade descreve a coexistência e articulação
de diferentes modos; transmodalidade enfatiza a transformação de sentido
quando uma forma é redescrita através de outro modo.
Referências acadêmicas e documentação
- Boden, Margaret A. (2004). The Creative Mind: Myths and Mechanisms, 2ª ed. Routledge. Referência para criatividade combinatória, exploratória e transformacional.
- Gibson, James Jerome. (1979). The Ecological Approach to Visual Perception. Houghton Mifflin. Ver também The Theory of Affordances.
- Goodman, Nelson. (1976). Languages of Art: An Approach to a Theory of Symbols, 2ª ed. Hackett.
- Laban, Rudolf von. (1966). Choreutics. Edição de Lisa Ullmann. London: Macdonald & Evans.
- Laban, Rudolf von. (1980). The Mastery of Movement, 4ª ed., revisada por Lisa Ullmann. Macdonald & Evans.
- Lacan, Jacques. (2006 [1953]). “The Function and Field of Speech and Language in Psychoanalysis.” Em Écrits: The First Complete Edition in English, tradução de Bruce Fink. W. W. Norton.
- Stanford Encyclopedia of Philosophy — Jacques Lacan.
- Varela, Francisco J.; Thompson, Evan; Rosch, Eleanor. (1991). The Embodied Mind: Cognitive Science and Human Experience. MIT Press.
- Wittgenstein, Ludwig. (1953). Philosophical Investigations. Blackwell.
- Stanford Encyclopedia of Philosophy — Ludwig Wittgenstein.
- Stanford Encyclopedia of Philosophy — Goodman’s Aesthetics.
- VFXRio — Crônicas da IA: Diálogos Além do Tempo.
- VFXRio — Digital Twins e Franka Panda / Digital Twins and Franka Panda.
Aurora Circuit · pesquisa experimental sobre interação humano–sintética, composição motora e tradução multimodal · Matteo Moriconi, VFXRio / VISGRAF · Luiz Velho, IMPA / VISGRAF. As evidências descritas nesta página pertencem ao ambiente simulado e devem ser interpretadas dentro dos limites do Digital Twin e das operações implementadas.