In this previous post, software uses sound to make visuals, now I’m trying to change music with light.
Made with Processing, this proof of concept experiment controls audio effects while you move objects in front of the camera. Maybe it will be used with some purpose in the future.
This sketch tracks the brightest point of captured image and convert the (x,y) coordinates in two midi controllers that communicates with almost all music making software - in this case, Reason.
If you have a better idea for the poor visuals used in this version, you are welcome.
Este é apenas o embrião do “Projeto Spectra” e a idéia é bem simples: gerar imagens a partir de sons em tempo real.
Aqui estão alguns experimentos com a Sonia Library, API criada para facilitar a manipulação de audio no Processing.
Nos dois vídeos o resultado da análise (FFT) da frequencia captada pelo microfone é usado para gerar objetos na tela ou interferir neles em tempo real. Se tiver interesse de uma olhada em algumas sketches deste experimento. Para testar é necessario ter a Sonia Lib instalada (não esqueça do JSyn plugin).
E claro, aqui vai um agradecimento especial para o Rapha (aka djazz), que deu uma puta força na gravação e edição dos vídeos. Sem esta ajuda provavelmente isto aqui não teria saído desse computador. Valeu brodá!
No meio do processo de criação de mais um exemplo de uso do arduino, desta vez com Piezo Buzzer, surgiu a idéia de fazer o SolFá, um projeto que transforma um puff (ou um braço de sofá) em uma mini controladora midi, transformando o puff em qualquer instrumento.
O SolFá utiliza 3 piezos [um dispositivo que utiliza o efeito piezelétrico para medir pressão à aceleração, convertendo em um sinal elétrico] colados em “lugares estratégicos” que enviam sinais para o arduino, este sinal é acessado e manipulado pelo processing.org e enviado como um sinal midi, utilizando a lib promidi (versão para mac os), para o garage band que tem um instrumento configurado para tocar as notas enviadas.
Para descobrir quais notas estavam sendo enviadas eu utilizei uma tabela de conversão do nome das notas em número midi e frequência, tem também esse widget que nunca usei, mas parece legal. =)
Esta empresa criou um produto muito interessante: o PGC (Pull Cord Generator).
O PGC é “mini gerador” manual de energia e pode ser manipulado facilmente.
A medida que o usuário puxa a cordinha, o mecanismo produz energia que pode ser utilizada em pequenos aparelhos. Um minuto usando o PGC pode alimentar :
- 20 minutos de conversa em um telefone celular;
- 1 hora de uso de um LED;
- 3 horas brincando no iPod Shufffle.
Há planos de levar o objeto a áreas inóspitas ou onde há dificuldade em se obter energia. E o processo além de simples não consome “recursos” naturais.
Inspirado numa camiseta que vi um dia desses na web (não me lembro onde, se alguem souber do que estou falando manda o link), fiz esse sketch no processing. A partir da luminosidade de cada pixel de uma photo, gera uma imagem formada por replicação de um padrão com variações de tamanho.
O laboratorio é grupo independente que investiga tecnologias emergentes com o objetivo criar soluções inteligentes, que gerem novas experiências interativas entre homem e máquina. Visite nosso site e saiba mais.
