AI Rookies

Live Multimodal — 流式多模态模型

事实

能边接收多模态输入边生成响应的模型。

人话

流式多模态模型像篮球解说:球还在飞,就边看动作边接话。

让语音助手、实时翻译、屏幕协助更顺,核心是低延迟。

相关概念

Multimodal AI
流式多模态模型把多种输入变成实时流。

Voice-to-voice AI
实时语音对话常依赖它边听边答。

Inference
它要求推理边接收输入边持续输出。

TPS
输出速度越高,实时感通常越强。