feat(ai-avatar): 配音前置 #1875

Merged

auto-approve-bot merged 4 commits from fix/ai-avatar-tts-pre-step into develop 2026-09-13 04:22:22 +08:00

Conversation 2 Commits 4 Files Changed 11

+1101 -363

xiaoxia commented 2026-09-13 03:34:23 +08:00

Owner

Copy Link

Copy Source

配音前置——步骤1生成配音，音频直传对口型

配音前置——步骤1生成配音，音频直传对口型

xiaoxia added 1 commit 2026-09-13 03:34:23 +08:00

feat(ai-avatar): 配音前置——步骤1生成配音，音频直传对口型，B-roll时间戳立即可用 ... 29b0a7d90d

后端：
- packages/domain/sentence_timings.py：抽出 compute_sentence_timings / probe_audio_duration 等公共工具
- tasks/lipsync_tts.py：改为复用 sentence_timings 公共模块，保留 Celery 任务作为降级路径
- schemas/lipsync.py：新增 AiAvatarTtsPreviewRequest/Response；CreateLipsyncJobRequest 新增可选 audio_url/audio_duration/sentence_timings 字段
- services/lipsync_service.py：新增 preview_tts() 同步方法；create_job 支持 audio_url 直传模式（下载→ffprobe→(可选重算timings)→直接提交 MediaKit，job.status=submitted）
- routes/lipsync.py：新增 POST /lipsync/jobs/tts-preview 鉴权路由

前端：
- types.ts：AiAvatarState 新增 ttsPreview 字段，TtsPreviewStatus 类型
- hooks/useAiAvatar.ts：新增 handlePreviewTts/resetTtsPreview，文案/音色/语速变化自动重置 ttsPreview；handleGenerateLipsync 在预合成完成时把 audio_url/audio_duration/sentence_timings 直传给后端
- api/aiAvatar.ts：新增 previewTts() API 封装，createLipsyncJob 入参加可选音频直传字段
- AiAvatarPage.tsx：步骤1「下一步→」改为「🎵 生成配音」+ 进度 Modal（模拟进度/loading/错误重试）；步骤2进入条件改为 ttsPreview.status==='done'；B-roll 时间戳优先用 lipsyncJob、降级用 ttsPreview.sentenceTimings

测试：
- tests/unit/test_lipsync_tts_preview.py：5个新用例覆盖成功/TTS失败/下载失败降级/零时长/no_audio_url
- 全量 lipsync/tts/avatar/preview 相关 1330 用例全部通过，无回归

auto-approve-bot added 1 commit 2026-09-13 03:40:11 +08:00

style: auto-format with black + isort + ruff + prettier [skip ci-format-check] d12632e32a

xiaoxia added 1 commit 2026-09-13 04:08:29 +08:00

fix(ai-avatar): 修复配音前置PR的CI错误——test import路径/TS类型/eslint warning ... c2de565e09

- test_sentence_timings.py 改为从 packages.domain.sentence_timings 导入（函数已提取）
- AiAvatarPage.tsx payload类型改为Parameters<typeof createLipsyncJob>[0]消除TS2345
- 去掉useCallback中重复的state.ttsPreview.status依赖（state已覆盖）

gitea-actions bot commented 2026-09-13 04:10:15 +08:00

Copy Link

Copy Source

🚀 预览环境已部署

项目	详情
PR号	#1875
预览链接	https://pr-1875.preview.xiaoxiajianji.com
API环境	staging

💡 预览环境使用 staging API 数据，请勿在预览环境中操作重要数据。

🔄 每次提交新代码后预览环境会自动更新。

🗑️ PR 关闭或合并后，预览环境会自动清理。

🚀 **预览环境已部署** | 项目 | 详情 | |------|------| | PR号 | #1875 | | 预览链接 | [https://pr-1875.preview.xiaoxiajianji.com](https://pr-1875.preview.xiaoxiajianji.com) | | API环境 | staging | > 💡 预览环境使用 staging API 数据，请勿在预览环境中操作重要数据。 > > 🔄 每次提交新代码后预览环境会自动更新。 > > 🗑️ PR 关闭或合并后，预览环境会自动清理。

auto-approve-bot added 1 commit 2026-09-13 04:12:37 +08:00

style: auto-format with black + isort + ruff + prettier [skip ci-format-check] ebfcfa4191

auto-approve-bot merged commit 053b00634a into develop 2026-09-13 04:22:22 +08:00

auto-approve-bot deleted branch fix/ai-avatar-tts-pre-step 2026-09-13 04:22:22 +08:00

gitea-actions bot commented 2026-09-13 04:22:50 +08:00

Copy Link

Copy Source

🗑️ 预览环境已清理

PR #1875 已关闭或合并，对应的预览环境已被清理。

如有需要，可以重新打开 PR 来重新生成预览环境。

🗑️ **预览环境已清理** PR #1875 已关闭或合并，对应的预览环境已被清理。 > 如有需要，可以重新打开 PR 来重新生成预览环境。

Sign in to join this conversation.

Reviewers

No Reviewers

Labels

Clear labels

architecture

架构设计

backend

后端相关

blocked

阻塞中

bug

Bug修复

ci-bug

CI本身的bug

ci-optimization

CI优化类任务

ci-pipeline

CI流水线/workflow相关

cleanup

代码清理

devops

运维/部署/CI

documentation

文档相关

feature

新功能

frontend

前端相关

P0

阻塞性，必须立即处理

P1

高优先级

P2

中优先级

P3

低优先级/后考虑

question

需要讨论确认

ready

PR CI通过，可合并

refactor

代码重构

No Label

Milestone

No items

No Milestone

Projects

Clear projects

No project

Assignees

Clear assignees

auto-approve-bot frontend-dev xiaoxia

No Assignees

3 Participants

Notifications

Subscribe

Due Date

No due date set.

Dependencies

No dependencies set.

Reference: xiaoxia/xiaoxia-saas#1875