Any views expressed within media held on this service are those of the contributors, should not be taken as approved or endorsed by the University, and do not necessarily reflect the views of the University in respect of any particular issue.

From Data to Breath: Translating Breathing into Visual Experience through TouchDesigner

 


从数据到呼吸:通过 TouchDesigner 将呼吸转化为视觉体验


1. 项目目标:让呼吸可见

该项目的核心目标始终很明确:

我们如何将呼吸——一种无形的生理节律——转化为可以感知甚至跟随的视觉体验?

我们的目标并非仅仅是数据可视化,而是创建一个这样的系统:

  • 呼吸变得可见
  • 节奏变得可以感知
  • 观众会被巧妙地引导,从而与自己的呼吸同步

这使得该项目不仅是一项技术探索,也是对感知设计和具身交互的研究。


2. 初始阶段:从数据输入到视觉反馈

项目初期,我们建立了一个基本流程:

数据输入

  • 呼吸传感器数据通过 Python 进行处理。
  • 通过 OSC 发送
  • 使用 TouchDesigner 接收OSC In CHOP

视觉系统

我们构建了一个典型的生成式结构:

noise → feedback → level → composite

在此刻:

  • 视觉效果动感十足。
  • 系统对数据作出了响应

然而,一个关键问题出现了:

观众们能看出“有些东西正在发生变化”,但他们感受不到呼吸的节奏。


3. 核心挑战:使数据易于理解

这成为项目中最为困难也是最重要的一步。

我们意识到:

数值变化并不等同于感知变化。

虽然:

  • 数据正在更新。
  • 参数在变化,

视觉效果依然微妙而模糊。


关键见解

问题在于:

数据仅影响表面参数,而不影响运动结构。

例如:

  • 颜色变化→几乎难以察觉
  • 调整亮度 → 不直观
  • 改变运动/速度 →有效

4. 迭代:将呼吸融入运动

在后期阶段,我们重组了系统,使其更注重运动而非外观


4.1 引入基于流程的视觉结构

我们公司成立了:

  • Displace TOP(空间扭曲)
  • GLSL(基于矢量的流场)
  • Slope / Blur(时间连续性)

这使得视觉效果变成了一个具有方向、深度和运动的流畅系统,而不是静态的颜色变化。


4.2 将数据映射到运动(关键突破)

我们不再控制视觉属性,而是开始利用呼吸数据来控制:

  • 运动速度
  • 位移强度
  • 流量频率

例如:

absTime.seconds * resp_data

这实际上意味着:

呼吸本身也成为了时间的一部分。


4.3 引入涟漪效应

我们还引入了类似涟漪的视觉层:

  • 通过GLSL + Displace
  • 结合原始视觉效果Composite TOP

这增添了一层重要的意义:

视觉分层

  • 底层:色彩流动(氛围/情感)
  • 叠加:涟漪(节奏/物理)

概念效应

  • 呼吸可以形象地理解为身体的扩张和收缩。
  • 涟漪象征着呼吸的波浪。

5. 最终系统结构

最终的流程可以概括为:

Sensor → Python → OSC → TouchDesigner

→ Data processing (Math / Filter)
→ Motion control (Speed / Displace / GLSL)
→ Visual system (Flow + Ripple)
→ Composite (layering)
→ Output

6. 反思:从数据展示到具身交互

该项目最重要的转变之一是概念上的转变:


初步方法

“我们如何将数据可视化?”


最后进近

“我们如何让人们感受到节奏并相应地调整呼吸?”


我们逐渐明白:

设计的成功不在于数据的准确性,而在于感知的有效性。


7. 结论:呼吸作为一种媒介

在这个项目中,呼吸不再仅仅是一个输入信号。它变成了:

  • 时间结构
  • 空间力
  • 连接身体与环境的桥梁

最终,我们创造的不仅仅是数据可视化,而是:

一种交互式视觉系统,鼓励用户感知并配合自己的呼吸节奏。


8. 个人反思

这个项目也与我更广泛的兴趣密切相关,例如:

  • 感官体验
  • 空间叙事
  • 生态和以人为本的设计

它反映了人们不断探索如何将呼吸、环境变化或身体节律等无形过程转化为可感知和有意义的视觉形式。


 

 

Leave a Reply

css.php

Report this page

To report inappropriate content on this page, please use the form below. Upon receiving your report, we will be in touch as per the Take Down Policy of the service.

Please note that personal data collected through this form is used and stored for the purposes of processing this report and communication with you.

If you are unable to report a concern about content via this form please contact the Service Owner.

Please enter an email address you wish to be contacted on. Please describe the unacceptable content in sufficient detail to allow us to locate it, and why you consider it to be unacceptable.
By submitting this report, you accept that it is accurate and that fraudulent or nuisance complaints may result in action by the University.

  Cancel