illusio: um instrumento musical digital opensource e colaborativo

32
I L L U S I O U MA F ERRAMENTA M ULTITOQUE PARA PROCESSAMENTO DE ÁUDIO EM T EMPO R EAL aluno Jerônimo Barbosa [email protected] orientador Geber Ramalho [email protected]

Upload: jeraman

Post on 14-Dec-2014

1.146 views

Category:

Documents


0 download

DESCRIPTION

apresentação utilizada no Simpósio Arte Cibernética, que aconteceu no dia 1º de Julho, no Itaú Cultural, em São Paulo

TRANSCRIPT

Page 1: Illusio: um instrumento musical digital opensource e colaborativo

I L L U S I O!U M A F E R R A M E N T A M U L T I T O Q U E P A R A PROCESSAMENTO DE ÁUDIO E M T E M P O R E A L !

aluno Jerônimo Barbosa [email protected] orientador Geber Ramalho [email protected]

Page 2: Illusio: um instrumento musical digital opensource e colaborativo

o q u e t e r i a o s s e g u i n t e s c e n á r i o s e m c o m u m ?

Page 3: Illusio: um instrumento musical digital opensource e colaborativo

DJ AM...!

Page 4: Illusio: um instrumento musical digital opensource e colaborativo

JONNY GREENWOOD...!

Page 5: Illusio: um instrumento musical digital opensource e colaborativo

...E O LIVE CINEMA!!

Page 6: Illusio: um instrumento musical digital opensource e colaborativo

C O M P U T A D O R E S !

M Ú S I C A!P E R F O R M A N C E !

F E R R A M E N T A S P A R A P R O C E S S A M E N T O D E Á U D I O E M T E M P O R E A L!

Page 7: Illusio: um instrumento musical digital opensource e colaborativo

FERRAMENTAS DE PROCESSAMENTO DE ÁUDIO EM TEMPO REAL !primórdios da computação musical: CSIRAC, de Trevor Pearcey e Maston Beard (1950) e Music I , de Max Mathews (1957).

Page 8: Illusio: um instrumento musical digital opensource e colaborativo

E ATUALMENTE?!bastante populares entre per formers (músicos, DJs, ar tistas de novas mídias)

milhares de ferramentas no mercado

MAS...!porque algumas ferramentas são tão complicadas de usar? ou, quando fáceis, acabam não sendo poderosas?

onde entra a colaboratividade nessa história toda?

qual a diferença, sob o ponto de vista do observador, entre o trabalho de um burocrata e de um per former?

Page 9: Illusio: um instrumento musical digital opensource e colaborativo

OU BUROCRATA DJ?

E ATUALMENTE?!bastante populares entre per formers (músicos, DJs, ar tistas de novas mídias)

milhares de ferramentas no mercado

MAS...!porque algumas ferramentas são tão complicadas de usar? ou, quando fáceis, acabam não sendo poderosas?

onde entra a colaboratividade nessa história toda?

qual a diferença, sob o ponto de vista do observador, entre o trabalho de um burocrata e de um per former?

Page 10: Illusio: um instrumento musical digital opensource e colaborativo

CSOUND !

TÁ CERTO... MAS O QUE É QUE EXISTE POR AÍ?

Criada na década de 90, no MIT

Linguagem de programação poderosa pra processamento de sinais: a grosso modo, uma mistura de XML com C

Funcionamento baseado na edição de dois arquivos: um de par titura e outro de timbre

Page 11: Illusio: um instrumento musical digital opensource e colaborativo

MAX!

Surgimento em meados da década de 80, for temente inf luenciado pe los s in tet i zadores modulares

Linguagem de programação visual ( L V P ) p a r a p r o c e s s a m a n e t o a u d i o v i s u a l

P a r a d i g m a o r i e n t a d o a f luxogramase a “ f i losof ia MAX”

TÁ CERTO... MAS O QUE É QUE EXISTE POR AÍ?

Page 12: Illusio: um instrumento musical digital opensource e colaborativo

PURE DATA!

Criado na década de 90,pelo mesmo fundador do MAX, Mil ler

Puckette

Free e Open-Source

Bastante poderosa, visava corrigir algumas falhas do antecessor, sendo ainda hoje bastante uti l izada

Paradigma orientado a fluxogramas

TÁ CERTO... MAS O QUE É QUE EXISTE POR AÍ?

Page 13: Illusio: um instrumento musical digital opensource e colaborativo

IMPROMPTU!

L i n g u a g e m g r a t u i t a d i s p o n í ve l a p e n a s p a r a a m b i e n t e s O S X

Baseado em Lisp, a l inguagem f o c a e m p r o c e s s a m e n t o aud iov isua l com foco em L ive C o d i n g

Dá um bom supor te à colaboração

TÁ CERTO... MAS O QUE É QUE EXISTE POR AÍ?

Page 14: Illusio: um instrumento musical digital opensource e colaborativo

ABLETON LIVE!

Surgida em 2001, é uma das ferramentas mais populares entre

DJs

Adota uma abordagem diferente de l inguagens para fazer o

processamento em tempo real (DAW)

Abordagem mais intuit iva que às l inguagens

TÁ CERTO... MAS O QUE É QUE EXISTE POR AÍ?

Page 15: Illusio: um instrumento musical digital opensource e colaborativo

VIMUS!

Camada de inter face amigável , para sistemas expressivos (Pd)

Usa uma metáfora de caixas tridimensionais, segundo um

paradigma orientado a fluxogramas

Acaba ignorando a questão da colaboração

TÁ CERTO... MAS O QUE É QUE EXISTE POR AÍ?

Page 16: Illusio: um instrumento musical digital opensource e colaborativo

REACABLE!

Instrumento musical que preza pela expressividade, colaboração e impacto visual na per formance

TÁ CERTO... MAS O QUE É QUE EXISTE POR AÍ?

Page 17: Illusio: um instrumento musical digital opensource e colaborativo

PROBLEMAS!Dilema da Usabil idade X Expressividade

Baixo grau de colaboração

Baixa impacto na per formance do ponto de vista ar tístico

Page 18: Illusio: um instrumento musical digital opensource e colaborativo

EAGORA,JOSÉ?

Page 19: Illusio: um instrumento musical digital opensource e colaborativo

um instrumento musical digital l ivre que permite o controle de loops gravados em tempo-real, no momento da per formance, através de uma

per formance lúdica e colaborativa baseada no relacionamento entre desenhos e sons

para tanto, o sistema, baseado em inter faces tangíveis, mescla o uso de tecnologias multitoques ao conceito de pedais, aqui chamado de pedal

Inspirações: Pure Data –Looper Stations - Samico

Page 20: Illusio: um instrumento musical digital opensource e colaborativo
Page 21: Illusio: um instrumento musical digital opensource e colaborativo

SOLUÇÃO!

Abordagem multitoque (que pode ser considerada uma abordagem mais natural, por prover uma interação tácti l

“direta” com o programa, sem a necessidade de ar tefatos menos convencionais ao homem), aliada a uma inter face elaborada segunda uma abordagem

centrada no Usuário + metáfora de interação de pedais de guitarra

Aplicações multitoques apresentam por natureza um alto grau de colaboração.

Abordagem multitoque aliada a um bom design de interação.

PROBLEMAS

Dilema da Usabil idade X Expressividade

Baixo grau de colaboração

Baixa impacto na per formance do ponto de vista ar tístico

Page 22: Illusio: um instrumento musical digital opensource e colaborativo

AGORA É A HORA DO VÍDEO, PORRA!!

Page 23: Illusio: um instrumento musical digital opensource e colaborativo

ILUSIO!

HARDWARE!

PEDAL! MESAMT!

SOFTWARE!

LOOPER ! GUI !

Page 24: Illusio: um instrumento musical digital opensource e colaborativo

ILUSIO!

HARDWARE!

PEDAL! MESAMT!

SOFTWARE!

LOOPER ! GUI !

Page 25: Illusio: um instrumento musical digital opensource e colaborativo

HARDWARE!teclado usb velho modif icado

Page 26: Illusio: um instrumento musical digital opensource e colaborativo

HARDWARE Mesa multitoque FTIR + tracker Community Core Vision

Page 27: Illusio: um instrumento musical digital opensource e colaborativo

ILUSIO!

HARDWARE!

PEDAL! MESAMT!

SOFTWARE!

LOOPER ! GUI !

Page 28: Illusio: um instrumento musical digital opensource e colaborativo

SOFTWARE!Módulo de inter face e módulo de loop, medidados por Open Sound Control

Page 29: Illusio: um instrumento musical digital opensource e colaborativo

SOFTWARE!Baseado nos conceito de Forma , Mockup , Edição e Modo keyboard

Formas – Elemento básico a par tir do qual todo o instrumento funciona. Uma forma é um desenho, um rabisco, criado pelo usuário na super fície e é responsável por armazenar o loop a ser gravado;

Mockups – Um subtipo de forma, que funciona como um container, armazenando um conjunto de outras formas dentro dele;

Edição – Funcionalidade que permite ao usuário abrir e fechar formas (e mockups) com o objetivo de alterar seu fluxo sonoro;

Modo keyboard – Funcionalidade que permite às formas funcionarem como um piano, que l ibera um som (seu loop) quando tocado.

Page 30: Illusio: um instrumento musical digital opensource e colaborativo

CONCLUSÕES???!

Page 31: Illusio: um instrumento musical digital opensource e colaborativo

AH... VALEU, JOSÉ!

Page 32: Illusio: um instrumento musical digital opensource e colaborativo

U M A I N T E R F A C E M U L T I T O Q U E P A R A PROCESSAMENTO DE ÁUDIO E M T E M P O R E A L !

aluno Jerônimo Barbosa [email protected] orientador Geber Ramalho [email protected]