audiovisualização de dados

audiovisual.md

Audiovisualização de dados

Quais os tempos de reação e que perduram na memória? (implicam em pulsos, rítmos de interação e assimilação.) (representar os sinais nestes pulsos, ritmos, IHC).

Quais as leis de Weber/Fechner e de Stevens?

Para a audição e para a visão?

Usar o áudio para sugerir padrões, visuais para verificar e explorar. Aproveitar o maior tempo de permanência na memória do áudio. Usar fala, componentes/princípios musicais.

Música ambiência. Visual para relatoriar, verificar, explorar.

Formalizar conhecimento da semana 2 (e tvz semana 1 tb) sobre dados, percepção e mapeamentos visuais (dado -> imagem, vídeo, som).. MOOC do coursera. Ver tempos que a Cristina passou (slides, email).

São interfaces audiovisuais de análise interativa de dados. Preferencialmente:

• Possui um RDF com a análise realizada e os dados resultates: com o estado da interface.
• Possui facilidades de anotação nos dados (xi é máximo, distribuição mais próxima do dataset, relações entre )
• Possui facilidades para medição de diferenças entre distribuições e de simetrias.
• Classificação e regressão.
• Possui descrições formais dos áudios e imagens de cada estado e/ou os arquivos e áudio e imagens.
• Printable? Printable playable áudio and video.
• Audiovisual synthesis techniques:

• Model Sampling (using another sound, image, or structure)
  • Media sampling
  • Structure sampling:
    • Mathematical model
      • psychophysical model
      • culture related model
      • signal processing
      • traditional synthesizers
      • Sample based synthesis
        • hasInputMedia (audio, video)
        • hasOutputMedia (audio, video)
      • Conceptual models:
        • Words
        • Mithology
        • Significado/significante
          • data (meaning?) -> audiovisualization (significant) -> meaning (significante)

• It is aways a Model Sampling because the mapping is arbitrary, even in the case of a 3D physical body, the mapping can be done in many ways (infinite).
  • It is so arbitrary that we can summarize audiovisualization as "what to what and how."
  • data -> audiovisualization -> meaning
• Audiovisualization involves at least:
  • One (or more) model to result in the audiovisualization.
    • You are always achieving a audiovisual media somehow.
  • Data that is being audiovisualized (can be the model itself).
    • You are always auviovisualizing something.
  • A audiovisual projection event (and equipment and methods).
  • An audiovisualization always happens somewhere in time and space.
  • The extraction/verification of meaning occurs (mainly) in the audiovisual event, although it can be used only for reporting and the understanding and implementation of methods also lead to insights.

The void is an audiovisualization. Every mechanical and electromagnetic waves in the universe is another audiovisualization. These are the trivial audiovisulizations. .

• sensory delay
• cognitive delay
• response time
• time in memory
• frame rate:
  • Minimum to complete virtualization (e.g. 20-20k Hz for audio)

• Data Sampling: ** using features of the data to parametrize sunthesis or sound processing

Positive/negative/positive values of kernel (linear combination of eigenvectors) for hubs, intermediary and peripheral vertices.