911 Commits

Author	SHA1	Message	Date
xiaoxia	60cacdf280	style: black formatting	2026-09-20 10:10:54 +08:00
xiaoxia	08de0d9946	perf: async GPU lipsync inference + fix 16x performance regression ... - Move GPU wait_for_result to Celery background task (lipsync_gpu_process_async) POST /lipsync/jobs now returns <1s instead of blocking 200s+ - Rewrite musetalk_server.py: MuseTalk receives full audio directly (v2 architecture) — no pre-looping video before inference Output video length = audio length, mux is fast stream copy - Frontend polls GET /lipsync/jobs/{id} for status updates - refresh_job_status: GPU async path (processing + no mediakit_task_id) skips MediaKit polling; stale jobs (>30min) auto-marked failed - 21 unit tests pass (11 GPU integration + 10 musetalk audio mux) Co-Authored-By: Coze <coze-opensource@bytedance.com>	2026-09-20 09:43:47 +08:00
xiaoxia	b0b81a5d60	fix(1978): MuseTalk 封装强制替换为 TTS 驱动音轨 + 音频长于视频时循环画面 (#1997) ... Co-authored-by: backend-dev <dev@xiaoxiajianji.com> Co-committed-by: backend-dev <dev@xiaoxiajianji.com>	2026-09-20 02:27:44 +08:00
xiaoxia	d959dd874f	feat(1895): 暂停积分系统 ENABLE_CREDIT_SYSTEM=false（保留全部代码/表/接口） (#1996) ... Co-authored-by: backend-dev <dev@xiaoxiajianji.com> Co-committed-by: backend-dev <dev@xiaoxiajianji.com>	2026-09-20 01:39:02 +08:00
xiaoxia	4a449ae496	fix(1978): GPU lipsync 结果 URL 签 7 天 + 外部 TTS 音频转存自家 OSS (#1993) ... Co-authored-by: backend-dev <dev@xiaoxiajianji.com> Co-committed-by: backend-dev <dev@xiaoxiajianji.com>	2026-09-20 00:07:36 +08:00
xiaoxia	112f0eb277	feat(gpu): #1978 AI数字人口型同步接入MuseTalk GPU Worker（业务侧集成） (#1991)	2026-09-19 22:43:57 +08:00
xiaoxia	32473485d7	fix(gpu): #1970 重写 MuseTalk 服务端 + 客户端超时取消，修复 8 项工程 bug ... 服务端新建 deploy/gpu_worker/musetalk_server.py（替代原 ~/projects/MuseTalk/worker.py）： 1. Flask app.run(threaded=True)：推理阻塞时 /health 仍可达 2. _get_video_fps 兜底：ffprobe 返回 0 或失败时 fallback 到 default_fps(25) 3. _run_ffmpeg 统一封装：subprocess.run(check=True) + timeout，失败/超时抛 RuntimeError 4. inference_lock 并发锁：多请求同时到达时第二请求立即 503 5. 推理超时控制：thread.join(timeout=inference_timeout) 默认 600s，超时返回 504 6. finally 块清理临时目录：成功/失败/超时都删除 task_dir 7. 无人脸检测兜底：_run_inference 中帧提取后校验，无帧直接抛错返回 500 8. 上传大小限制：视频 <=100MB / 音频 <=20MB，超限返回 413 9. 新增 POST /cancel 端点：终止当前推理、清理临时文件、释放锁 10. GET /health 返回 GPU 显存信息（nvidia-smi）+ 当前任务状态 客户端 deploy/gpu_worker/gpu_worker.py 配套： - _call_musetalk 超时后 POST /cancel 终止服务端僵尸推理 - _call_musetalk 返回 (ok, duration, err, retryable) 四元组 - _handle_task 仅 retryable=True 时重试，4xx/短视频等确定性失败直接上报 - 新增 _cancel_musetalk_task 辅助方法 测试：新增 15 个单测覆盖服务端全部修复点；全量 15854 passed / 28 skipped 部署提醒：用户需在 RTX2060 上 wget 新 musetalk_server.py 替换旧 worker.py 并重启服务。	2026-09-19 19:35:23 +08:00
xiaoxia	1591259bb8	fix(gpu): #1970 MuseTalk worker 推理期心跳/超时900/重试收敛/短视频前置失败 (#1990) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-19 15:06:51 +08:00
xiaoxia	a1f25a4426	feat(worker): #1970 AI 标签 backfill 支持 force 重打降级记录 (#1989) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-19 10:49:21 +08:00
xiaoxia	4d98e98b57	fix(worker): #1970 注册 AI 标签 Celery 任务（worker.tag_atom_clip unregistered） (#1987) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-19 08:42:07 +08:00
CI Bot	eb2b009b33	style: auto-format with black + isort + ruff + prettier [skip ci-format-check]	2026-09-18 17:15:42 +00:00
xiaoxia	fbd89b4089	feat: #1970 hflip 按 atom_clip ai_tags.has_text 放开 + 清理重复 081 migration ... - render_adapter 按非 audio 源片段顺序批量查 atom_clip.ai_tags， 仅 has_text 显式 false 标记无文字，其余（未打标签/true/null/查询失败）保守不翻转 - UnifiedRenderService 新增 clip_has_text 注入，None 维持 P1 全保守语义 - 删除残留 081_atom_clip_ai_tags.py（与 GPU PR 的 081 撞号，内容已由 082 承载）， develop alembic 恢复单 head：080→081_add_gpu_lipsync→082_atom_clip_ai_tags - 新增 19 个测试（纯函数混合标记/服务门控/适配器解析/失败回退），全量 15819 passed	2026-09-19 01:06:46 +08:00
xiaoxia	7e88440ca9	feat: #1970 片段级 AI 标签 + 叙事加权匹配 + 冗余核查 (#1981) ... feat: #1970 片段级 AI 标签 + 叙事加权匹配 - atom_clip_tagger.py: MediaKit 抽帧 + 豆包视觉 API 识别 - narrative_match.py: AI 标签加权匹配 (2.0 vs 1.0) - Celery 链式触发 + 批量回填脚本 - migration 081 加 ai_tags 列 - 42 新测试，全量 15796 passed	2026-09-18 21:08:01 +08:00
xiaoxia	fbf8844f25	feat(gpu): #1978 MuseTalk GPU Worker 反向轮询对接（后端API + Worker脚本） (#1979) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-18 19:59:49 +08:00
xiaoxia	4fa3e4eb92	feat(#1970): 新 API 字段 + 叙事模式 PR3 - assembly_mode/script_id/tts_*/video_ratio (#1976) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-18 07:30:43 +08:00
xiaoxia	a59a6a588a	feat(#1970): 智能降重 PR2 - dedup_enabled 开关 + 6 维片段级微变换 (#1975) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-18 05:44:59 +08:00
xiaoxia	f1621ace9f	feat(#1970): 素材原子化切片 P1 - 数据层/切片逻辑/原子片段级选片 (#1974) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-18 03:57:07 +08:00
CI Bot	66409fde6f	style: auto-format with black + isort + ruff + prettier [skip ci-format-check]	2026-09-17 16:00:35 +00:00
xiaoxia	3c016af076	fix(douyin): 本地ASR不可用时正确降级到desc兜底，避免502直接抛出 ... - script_asr_service.py: 捕获ImportError(apps.worker未安装)，抛ASRNotConfiguredError - scripts_ai.py B2回退路径: 504超时直接抛出，502/503 ASR/下载错误走desc兜底 - 修复API镜像未打包worker模块导致有旁白视频在MediaKit失败时直接502的问题 - 更新单元测试覆盖ASR失败→desc兜底场景	2026-09-17 23:48:22 +08:00
CI Bot	99d6a47ec5	style: auto-format with black + isort + ruff + prettier [skip ci-format-check]	2026-09-17 11:45:21 +00:00
xiaoxia	9e0959cb85	test(douyin): 更新单元测试适配多源resolver架构，删除yt-dlp/cookies相关mock	2026-09-17 19:30:08 +08:00
CI Bot	4da3eae11a	style: auto-format with black + isort + ruff + prettier [skip ci-format-check]	2026-09-16 16:50:47 +00:00
xiaoxia-agent	c7a34fb297	fix(douyin): 支持分享文本自动提取URL + MediaKit ASR 云端转写 ... P1 修复： 1. 抖音链接提取：后端自动从分享文本（如"这个视频 https://v.douyin.com/xxx/ 快来看看"） 中正则提取 http(s) URL，不再要求用户只粘贴纯链接； 裸域名（v.douyin.com/xxx）自动补 https://；ftp/file 等非 http(s) 协议拒绝。 2. 抖音文案提取换方案：优先走火山引擎 MediaKit asr-subtitles API（云端 ASR）， 利用 yt-dlp 解析无水印直链（不下载整段视频）→ 提交 MediaKit → 轮询拿字幕； MediaKit 未配置/失败时回退到原"下载视频+本地 ASR"路径；cookies 503 友好错误保留。 3. 文案库 P1-1 排查结论：后端 GET /api/v1/scripts CRUD 正常，scripts 表结构/数据 在 070/077/078 迁移链路中无数据丢失；"数据不显示"应是前端未正确切换到新接口， 已在回复中说明。 测试：新增 13 个 URL 提取单测；原有 15576 单测全绿；ruff clean.	2026-09-17 00:43:31 +08:00
xiaoxia	115b428cb3	fix(lipsync): 修复 GET /jobs/{id} 轮询 500（naive/aware datetime 减法 TypeError） ... Postgres TIMESTAMP WITHOUT TIMEZONE 返回 naive datetime，路由层 (_now - job.updated_at).total_seconds() 抛 TypeError: can't subtract offset-naive and offset-aware datetimes，被全局异常 handler 吞为 500 INTERNAL_ERROR，前端持续轮询一直报错。 修复：比较前把 naive datetime 当作 UTC wall clock 补 tzinfo（与代码写入 default=datetime.now(UTC) 一致），补 2 个单测覆盖 naive stale/fresh 两个分支。 176 tests passed.	2026-09-16 23:24:26 +08:00
xiaoxia	a425103b4f	fix(douyin): cookies 文件 host 挂载为空时 fallback 到镜像内 baked-in 默认 cookies ... - api.Dockerfile: COPY cookies 到 /app/configs/douyin_cookies_default.txt（镜像内兜底） - scripts_ai.py: _resolve_cookies_file() 优先 host 挂载路径，文件<200B 时 fallback 到镜像内 default - 解决 staging 部署时 host 空占位文件覆盖镜像内有效 cookies 导致抖音提取一直 503 的问题 - 单测 15560 passed	2026-09-16 20:27:58 +08:00
xiaoxia	67a1ed6430	feat(#1894): 清理文案库多余字段 / 废弃标题库 API / 旧定价档位清理 (#1968) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 18:58:04 +08:00
xiaoxia	8637ed1576	fix(ux): #1894 删除标题库入口 + 文案名称改标题 + AI改写UX + 清理旧定价硬编码 (#1965) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 16:04:08 +08:00
xiaoxia-agent	fca943428b	fix(scripts): extract-from-douyin 异常路径全部返回业务码，杜绝 500 INTERNAL_ERROR ... 问题：POST /api/v1/scripts/extract-from-douyin 在抖音短链无效/网络异常/ASR 兜底异常等 场景下冒泡未捕获 Exception，被全局 general_exception_handler 吞成 500 INTERNAL_ERROR， 前端无法区分业务错误。 修复（apps/api/app/api/routes/scripts_ai.py）： 1. yt-dlp 导入失败（缺依赖）→ 503（提示功能不可用） 2. yt_dlp.utils.DownloadError 单独捕获： - 含 404/not found/unable to download/unsupported url → 400「无法解析该抖音链接」 - 其它网络/上游异常 → 502「视频下载失败」 3. 下载 info 成功但文件未落地（isfile False / size 0）→ 502「未获取到有效文件」 4. duration 非数字（TypeError/ValueError）→ 安全降级为 0 5. ASR 转写兜底 catch Exception → 502「语音识别失败」（原只 catch 两个自定义异常） 6. 最外层兜底 catch Exception → 500 但带具体 detail（不再是通用 INTERNAL_ERROR） 7. text/duration 提前初始化，避免异常路径 UnboundLocalError 测试： - 新增 tests/unit/test_extract_from_douyin_errors.py，覆盖 8 个失败场景 - 更新 tests/unit/test_scripts_ai.py 三个成功/ASR 路径测试，mock os.path.isfile/getsize - 全量单测 15531 passed	2026-09-16 13:16:45 +08:00
xiaoxia	41cd9cdc56	fix(#1895): /subscription/plans 路由挂载位置修复（解决 404） (#1955) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 09:59:30 +08:00
xiaoxia	13c302c037	fix(#1895): points API 字段对齐（P0 修复 + P1 补全） (#1951) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 09:17:33 +08:00
xiaoxia	7564b50f7e	feat(#1894): 废弃标题库整合到文案库 - scripts 模型新增标题字段 (#1927) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 05:35:20 +08:00
CI Bot	7bf135789e	style: auto-format with black + isort + ruff + prettier [skip ci-format-check]	2026-09-15 21:17:11 +00:00
xiaoxia-agent	f8c8d4320e	test(points): add @points_gate __globals__ regression tests + endpoint coverage (#1895)	2026-09-16 05:08:21 +08:00
xiaoxia	ba7e056232	feat(points): P2 step 3 - 注册送50积分 (#1945) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 03:52:15 +08:00
xiaoxia	d706a76205	feat(points): P2 step 2.7 - generation_cover AI封面 points gate (#1944) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 02:50:23 +08:00
xiaoxia	8b69a6e18b	feat(points): P2 step 2.6 - ai_avatar_render 数字人渲染 points gate (#1943) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 02:47:03 +08:00
xiaoxia	00045131f6	feat(points): P2 step 1 - POINTS_ENABLED safety gate (default false) (#1936) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 00:26:27 +08:00
xiaoxia	59fbbd8e26	fix(tts): P1 TTS emotion instruction format per voice type + missing CN aliases (#1934) ... fix(tts): P1 TTS emotion instruction format per voice type + missing CN aliases - Add CN aliases 中性→neutral/伤心→sad/吃惊→surprised per 灵应 spec - build_emotion_instruction(voice_id, enum): cloned voices use English "Speak in a {emotion} tone.", system voices with emotion Instruct (longanyang/longanhuan/longhuhu_v3) use strict Chinese format "你说话的情感是{emotion}。", default voice longxiaochun_v3 (no Instruct support) skips instruction entirely - Expand preview emotion whitelist; 210 emotion tests passing, 15438 total unit tests passing - E2E templates fix already in PR#1931 (0e5127df), no additional change needed	2026-09-15 16:00:58 +08:00
xiaoxia	81180d16e5	fix(#1898): TTS 情绪映射修正为 CosyVoice v3 官方英文枚举（P1 更正） (#1933) ... fix(tts): P1 TTS emotion English enum mapping per CosyVoice v3 official spec - EMOTION_MAP maps 7 CN labels (中立/开心/难过/生气/惊讶/恐惧/厌恶) + CN aliases + old 4 enums → 7 official English enums (neutral/happy/sad/angry/surprised/fearful/disgusted) - instruction strictly matches official format "你说话的情感是{emotion_enum}。" (verified against 阿里云百炼 docs) - Unknown emotion defaults to "neutral" with warning (was empty, could cause TTS failure) - Frontend CN labels & old enums backward-compatible; case-insensitive - Add normalize_emotion unit tests (89 cases) covering all mappings, unknown→neutral, empty→"", ASCII enum assertion in instruction - Fix existing test assertions from Chinese descriptors to English enums - Fixes wrong direction in PR#1932 which mapped to Chinese descriptive phrases	2026-09-15 15:08:55 +08:00
xiaoxia	19eeb1b475	fix(#1898): TTS 情绪枚举统一为7种标准英文标签（P1） (#1932) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-15 14:02:49 +08:00
xiaoxia	0c59f83a7f	feat(#1893): scripts AI capability (douyin extract/rewrite/titles) (#1930) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-15 13:24:38 +08:00
xiaoxia	53fb25efcf	fix(#1834): 批量修复 UP 系列静态分析警告（UP007/UP006/UP017/UP035） (#1928) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-15 12:59:17 +08:00
xiaoxia	352221f199	fix(p0): #1922 from-assets 空 templateId 双斜杠 404 兜底 (#1926) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-15 11:54:06 +08:00
xiaoxia	90cc0026b1	feat: 会员+积分系统后端 (#1895) (#1919) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-15 09:23:26 +08:00
saas-backend	8237d170a5	feat(#1899,#1900): clip_count 参数 + 模板管理 API 冗余清理 ... [skip ci-format-check] #1899 clip_count 参数透传（from-assets 端点） - ClipsFromAssetsRequest 新增 clip_count: Optional[int] (1-10) 字段 - 保留旧字段 required_clips_count 兼容：未传 clip_count 时回退旧字段（超 10 截断）；两者都未传时默认 3 段 - 按 clip_count 创建 N 个片段，大于模板 segment 数时按顺序循环复用 segment 配置 - 每个片段时长在对应 segment 的 duration_min/duration_max 之间随机取值，保持原有轮询分配逻辑 #1900 模板管理 API 清理（前端 PR#1911 my-templates/editing-planner 下线） - 保留 GET /templates 列表端点（生成页自动选模板使用） - 删除 HTTP 端点：GET/POST/PUT/PATCH/DELETE /templates/{id}、POST copy、GET usage、 POST toggle-favorite、POST validate、GET/POST/DELETE /categories、GET /tags/list - 保留内部默认模板兜底 _get_or_create_default_template_id 及 CreateTemplateUseCase - 删除对应 response_model 中不再使用的类（Copy/Update/Validate/Category/Usage/Favorite 等） - 清理测试：删除集成测试 test_template_categories_api.py，更新 3 个单测适配新 clip_count 语义 DB：未涉及 schema 变更（models 本就无 is_favorite/usage_count 等列），跳过 migration。 新增 scripts/cleanup_e2e_test_data.sql 供运维在 staging DB 手动清理 e2e-gen-*/asset-create_* 账号残留模板数据。 单测：15128 passed, 28 skipped（全量 tests/unit/）	2026-09-15 07:32:06 +08:00
xiaoxia	201a3f0af5	feat(#1898): TTS 参数适配 CosyVoice v3 官方 API (#1917) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-15 04:19:58 +08:00
xiaoxia	695a491c5d	fix(backend): #1867 对口型卡running三层防御修复（rebase到最新develop） (#1916) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-15 03:35:30 +08:00
xiaoxia	a56b3f7b42	fix(backend): P0 #1911后自动创建默认模板避免剪辑页卡死 (#1914) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-15 01:23:30 +08:00
CI Bot	ffb40038d3	style: auto-format with black + isort + ruff + prettier [skip ci-format-check]	2026-09-14 11:38:53 +00:00
saas-backend-agent	30094bc591	fix(backend): #1901 统一title字段名修复标题渲染不一致 ... 问题：plan.config中标题配置字段名双轨不一致——Worker sync_configs_to_plan 写 plan.config['title']（归一化 size/font/color），API writeback_edit_plan_config 写 plan.config['title_config']（不归一化），三个渲染引擎读取不一致： - video_compose_service（FFmpeg drawtext）：已读 title+fallback title_config ✅ - unified_render_service（ASS字幕）：只 title 无 fallback ❌ - subtitle_render_engine（字幕渲染）：只读 title_config ❌ 修复： - packages/application/generation_common.py writeback_edit_plan_config：统一写 plan.config['title']（而非 title_config），并做字段名归一化 font_size→size/font_preset→font/font_color→color，与 Worker sync_configs_to_plan 行为一致 - apps/worker/video_processing/subtitle_render_engine.py：_resolve_title_config 先读 plan.config['title']，fallback plan.config['title_config']（兼容存量老数据） - apps/worker/video_processing/unified_render_service.py：同样先读 'title'，text 为空时 fallback 'title_config' - apps/api/app/api/routes/generation_cover.py：封面E2标题配置读取加 title_config fallback - 单测适配：test_generation_common.py/test_writeback_edit_plan_config.py 断言改 'title' 并验证归一化 - 所有渲染路径（智能剪辑/AI数字人/封面E2）统一读 'title'，老数据通过 fallback 继续渲染	2026-09-14 19:27:29 +08:00