音画互动 Audio-Visual
英文版本待补,当前请先以中文版本为准。
目标:音频驱动视觉,与几何节点交叉(我们的特色)
知识领域概述
音画互动是沉浸式体验的核心,通过音频分析驱动视觉效果。
子领域
音频分析
- 最短路径:快速音频频谱分析
- 多种实现方法:
- 音频频谱→Value
- BPM检测→节奏
- MIDI信号→精确控制
- 工具对比:Blender/After Effects/TouchDesigner对比
音频驱动视觉 ⚠️ 特色内容
- 最短路径:音频驱动几何节点
- 多种实现方法:
- 与几何节点交叉 → 特色内容
OSC/时间码同步
- 最短路径:OSC基础连接
- 多种实现方法:
- OSC发送/接收
- NDI同步
- 时间码同步(LTC/SMPTE)
- 工具对比:TouchDesigner/syphon/spout/ndi对比
特色内容
音频驱动视觉与几何节点交叉
这是我们这个库里面的特点:用模拟节点里面做思考更多的音画互动。
最短路径(零基础)
当前细分页还在整理中;现阶段请先结合本页提纲与 learning-paths 进入。
| 目标 |
预计时间 |
路径 |
| 音频驱动几何节点 |
1天 |
音频分析→几何节点 |
困境预设
| 可能遇到的问题 |
预设解决方案 |
| 音频不同步 |
检查缓冲/时间码 |
| 视觉效果不明显 |
放大参数/调整阈值 |
| OSC连接失败 |
检查端口/网络 |
音画互动 - 我们的特色内容!