
Mirage Studio
Captions 推出了 Mirage Studio,一个AI驱动的平台,生成用户生成内容(UGC)风格的视频,特色是逼真的数字演员。该平台由专有的多模态基础模型驱动,无需相机或制作团队即可生成富有表现力的、影棚品质的视频。
infinite-tv 是一个创新的实时 AI 视频生成演示项目,它将 Twitch 聊天室的实时互动转化为动态的视觉内容。通过监听聊天消息,系统利用 LTX Video 模型生成上下文相关的视频片段,并通过 RTMP 协议直接推流到 Twitch 或其他支持 RTMP 的平台。
infinite-tv 是一个创新的实时 AI 视频生成演示项目,它将 Twitch 聊天室的实时互动转化为动态的视觉内容。通过监听聊天消息,系统利用 LTX Video 模型生成上下文相关的视频片段,并通过 RTMP 协议直接推流到 Twitch 或其他支持 RTMP 的平台。该项目基于 FAL 无服务器基础设施和现代 React 仪表板构建,实现了从文本指令到实时视频流的无缝闭环。
确保已安装 Python 3.11+、Node.js 18+ 和 FFmpeg。你需要以下 API 密钥:
git clone <repository-url>
cd realtime-ltx-video-generation-demo
python -m venv venv && source venv/bin/activate
pip install -e .
# 配置 .env 文件 (填入 API Keys 和 Twitch 信息)
# TWITCH_CHANNEL=shroud
# TWITCH_STREAM_KEY=live_xxxxx...
# FAL_KEY=fal_xxxxx...
# OPENAI_API_KEY=sk-xxxxx...
# 部署到 FAL
fal deploy realtime-streaming
# 记录输出的同步端点 URL
cd dashboard
npm install
# 创建 .env.local
cat > .env.local << EOF
NEXT_PUBLIC_FAL_API_URL=https://fal.run/your-username/realtime-streaming
FAL_KEY=your_fal_api_key_here
EOF
npm run dev
访问 http://localhost:3000 即可打开控制面板,点击“Start Stream”开始直播。
| 参数 | 说明 | 推荐值 |
|---|---|---|
| Model | 选择生成引擎 | ltx-2.3 (更快/更清) 或 ltxv1 (本地/定制) |
| Resolution | 输出分辨率 (LTX v2) | 1080p (平衡), 4K (极致) |
| Duration | 单次生成时长 | 6-10s (低延迟), 15-20s (高质量) |
| Guidance Scale | 提示词跟随度 (LTX v1) | 3.0 – 5.0 |
| Target FPS | 推流帧率 | 9.0 – 24.0 |







