266 Commits

Author	SHA1	Message	Date
xiaoxia	c48ddeef7d	fix: black/isort 格式化修复 - generation.py 和单测文件 (#250)	2026-07-13 14:13:45 +08:00
CI Bot	1d06d2ddd2	fix: generate_video 任务接入 Feature Flag 灰度引擎选择 ... 问题：一键生成（generate_video）任务硬编码使用 UnifiedRenderService， 完全没有接入 render_engine Feature Flag，导致灰度开关形同虚设， 无法控制新旧引擎切换。 修复： 1. 新增 _resolve_render_engine(user_id) 函数，复用 RenderEngineResolver 2. 新增 _render_with_legacy_engine() 函数，实现旧引擎等价渲染 - 使用 filter_complex + concat 模式 - 保持原帧率（无 fps 归一化），与旧引擎行为一致 - 音频 192k AAC，与旧引擎一致 - 支持 one_take / pip / voice_over / voice_pip 全部模式 3. 在 generate_video 任务入口处根据 Feature Flag 选择引擎 4. 渲染日志新增 engine 字段，便于灰度观测 单测：8 个测试覆盖 flag 各场景 + legacy 渲染验证	2026-07-13 13:08:41 +08:00
xiaoxia	ffd99ffeb0	ci: 优化PR门禁 - Build Staging移出PR流程 + Unit Tests独立并行 (#245)	2026-07-13 12:14:02 +08:00
xiaoxia	1b2bccee6f	feat(worker): 直通渲染stream copy优化 - 无重编码性能提升10倍+ (#244)	2026-07-13 11:09:27 +08:00
xiaoxia	a0cac1b75d	fix(worker): FFmpeg超时保护 - 防止渲染hang住导致worker永久阻塞 (#242)	2026-07-13 11:07:10 +08:00
xiaoxia	bbe831f9e0	feat(worker): render_edit_plan 接入 Feature Flag 灰度控制 (#240) (#240)	2026-07-13 10:27:25 +08:00
xiaoxia	4c5ab7f80e	fix(worker): OSS上传崩溃修复 - connect超时 + 分片上传 + 总超时保护 (#238)	2026-07-13 09:33:13 +08:00
xiaoxia	bfe8bfe2da	feat(feature-flag): Redis Feature Flag 灰度发布基础设施 ... Redis Feature Flag 灰度发布基础设施：白名单+百分比切流+全局开关，热更新，内部管理API	2026-07-13 01:11:46 +08:00
xiaoxia	fdcf48103e	feat(unified-render): Phase 3 - 音频统一混音 + 灰度观测埋点 ... Phase 3 unified render with audio mixing + gray scale observation metrics	2026-07-12 23:00:51 +08:00
xiaoxia	9e87ac05c6	style: fix isort imports + black formatting for render adapter (#234) ... style: fix isort imports + black formatting for render adapter	2026-07-12 20:57:29 +08:00
xiaoxia	8427bb6852	feat(unified-render): Phase 2 - Feature Flag + RenderAdapter 适配层 (#231) ... ## 统一渲染引擎 Phase 2 - Feature Flag 开关 + 适配层 ### 变更内容 1. **Feature Flag 开关** - API 端 `Settings.RENDER_ENGINE`（默认 `legacy`） - Worker 端 `WorkerSettings.render_engine`（默认 `legacy`） - 支持环境变量 `RENDER_ENGINE=unified` 一键切换 2. **RenderAdapter 适配层** (`apps/worker/video_processing/render_adapter.py`) - EditPlan + EditPlanClips → UnifiedRenderService 输入的完整适配 - 素材自动下载（OSS → 本地路径映射） - 进度回调对接（ProgressCallback） - 结果自动上传 OSS - `validate_plan()` 兼容旧接口，便于灰度切换 3. **compose_video 任务改造** - 根据 `RENDER_ENGINE` 配置分流到 legacy / unified 路径 - 新引擎结果回写字段对齐（engine/width/height/file_size） - 错误处理与重试逻辑保持一致 ### 测试 - 新增 16 个单元测试：validate_plan(7) + render_plan(6) + download_assets(3) - 原有 52 个 unified_render_service 测试全部通过 - 合计 **68 个测试全绿** ### 灰度策略 - 默认 `legacy`，不影响现有功能 - 灰度时设置环境变量 `RENDER_ENGINE=unified` 即可切换 - 后续可支持按 plan_id / user_id 灰度（Phase 3） --------- Co-authored-by: 灵应 <lingying@coze.email> Reviewed-on: #231	2026-07-12 19:43:08 +08:00
xiaoxia	ad86f5bc79	feat(unified-render): Phase 1 内核增强 - scale策略/直通优化/ASS字幕/转场扩充/链路C删除 (#230) ... ## 统一渲染引擎 Phase 1 内核增强 ### P0 完成 **1. scale/crop 策略统一（铺满裁剪）** - main/broll/background 图层统一使用 `scale increase + center crop` - 对齐编辑器合成链路行为，与主流短视频平台一致 - 移除旧的 scale+pad 黑边模式 **2. 单图层直通优化** - 检测到单图层单 clip 时，走 `-vf` 直通路径，跳过 filter_complex 开销 - 一镜到底场景性能提升 ~30%，接近链路A水平 - `_can_use_pass_through()` 自动判断是否满足直通条件 **3. title/subtitle ASS 字幕渲染** - 新增 `generate_ass_subtitles()` 函数，生成标准 ASS 字幕文件 - Title 支持：字体/大小/颜色/加粗/斜体/描边/阴影/位置 - Subtitle 支持：字体/大小/颜色/位置 - 直通模式和完整 filter_complex 模式均集成字幕叠加 - 自动转义 ASS 特殊字符（换行/大括号） ### P1 完成 **4. 转场效果扩充** - 新增 slideup / slidedown（含 snake_case 别名 slide_up / slide_down） - 现有转场：fade / slideleft / slideright / dissolve / wipe / wipeleft + 新增2种 = 8种 - 注意：slideup/slidedown 是全新新增，两条链路之前都没有 **5. faststart 统一** - 直通模式和 filter_complex 模式均已包含 `-movflags +faststart` ### 链路C删除 - 删除 `apps/worker/video_processing/editing_modes.py`（657行） - 删除 `apps/worker/video_processing/video_compose_service.py`（821行） - 删除 `tests/unit/test_video_compose_security.py`（链路C安全测试） - 合计删除 ~1478 行业务代码 + ~264 行测试 - **删除前已确认：业务零调用，仅有注释引用，安全删除** ### 测试 - 新增单元测试 27 个（直通优化 + ASS字幕 + fill_crop策略） - 现有 25 个测试全部通过 - 合计 52 个测试全绿 --------- Co-authored-by: xiaoxia <xiaoxia@example.com> Co-authored-by: 灵应 <lingying@coze.email> Reviewed-on: #230	2026-07-12 18:49:31 +08:00
xiaoxia	8883581e34	fix(asset): AssetStatus枚举兼容历史uploaded值，避免500 (#227)	2026-07-12 11:49:41 +08:00
灵应	a6ae041944	fix(test): 修正test_all_asset_ids_fail_raises的mock层级，三层filter改为两层	2026-07-12 11:03:48 +08:00
xiaoxia	7c541910b3	fix(test): 修正StrEnum str()断言，CI环境StrEnum行为不一致	2026-07-12 09:14:55 +08:00
用户CI Test	e5d627fc3e	fix(asset): ClassificationStatus枚举兼容历史done值，避免500错误 ... 生产环境发现26个classification_status='done'的历史脏数据导致枚举转换失败500。 通过_missing_方法做兼容映射：done/success/finished/complete → COMPLETED 同时增加兜底：未知值 → PENDING，不再抛异常。	2026-07-11 23:27:33 +08:00
xiaoxia	ad671d94c5	fix(voice-clone): source_audio_url 不做预签名转换，原样返回用户输入 ... fix(voice-clone): source_audio_url 不做预签名转换，原样返回用户输入	2026-07-11 19:50:30 +08:00
xiaoxia	efe7f6b52a	feat: 任务队列限流防护 ... feat: 任务队列限流防护 - 用户级 pending 限流（3 个上限，返回 429） - 全局队列保护（20 个上限，返回 503） - 4 处入口全覆盖：批量创建、generation 重试、任务中心两级重试 - 入队前预检查 + 入队后最终校验双层兜底，处理并发竞态 - 阈值统一常量管理，边界语义一致 - 350+ 行单元测试覆盖所有边界场景	2026-07-11 16:29:07 +08:00
xiaoxia	1e840057cb	fix(ci): 修复 Validate job ... fix(ci): 修复 Validate job — black 格式化 + isort 排序 + .cache 排除 + celery mock 路径修复	2026-07-11 14:42:53 +08:00
xiaoxia	841a168d30	feat: 所有API返回的音频URL加OSS预签名（24小时有效期） ... 合并PR #216：给所有API返回的音频URL加OSS预签名 修复私有bucket下TTS合成音频、音色克隆参考音频、配音库音频等返回403的问题。	2026-07-11 11:07:51 +08:00
用户CI Test	a7e346e200	fix: CosyVoice base_url旧版路径自动修正 + 配置日志（根治环境变量滞后导致的418） ... - 初始化时自动检测并修正 base_url 中的旧版 /services/aigc/text2audio 路径 - 避免 .env 模板配置滞后（旧版v1路径）导致请求打到错误端点 - 新增 3 个配置初始化单元测试 - 相关：修正 .env.example 中的默认 model/voice/base_url	2026-07-11 09:50:10 +08:00
xiaoxia	6657b0fe19	fix: CosyVoice默认模型改为v3-flash + 音色名加_v3后缀，修复418错误 (#215)	2026-07-11 08:47:10 +08:00
xiaoxia	a25e0b6220	fix: CosyVoice 音色名 v3 后缀修复（418错误） (#213)	2026-07-11 01:28:32 +08:00
xiaoxia	b66de19be8	feat: 一键生成链路日志最小集 (#205)	2026-07-10 23:57:38 +08:00
xiaoxia	3db13fc1da	fix: CosyVoice全量重写 - 适配DashScope百炼API (#212)	2026-07-10 22:52:21 +08:00
xiaoxia	48e5077191	fix: P0-2 深度根因修复 — Worker端URL校验403 + endpoint HTTPS修复 (#211)	2026-07-10 20:35:03 +08:00
xiaoxia	242497af8b	fix: 调换 fps 与 setpts 顺序，修复 P0-3 xfade 多视频转场 PTS 不一致问题 (#210)	2026-07-10 18:16:01 +08:00
xiaoxia	f5d3482fa9	fix: P0-2 OSS 凭证启动验证 + 诊断日志 (#209)	2026-07-10 18:15:42 +08:00
用户CI Test	9fc82df6b9	fix: P1 xfade td 钳制到第二个输入片段时长 ... - build_xfade_filter_chain: 加 safe_td = min(safe_td, clip_durations[i]) - 新增 test_middle_clip_shorter_than_td 测试用例 [5.0, 0.3, 5.0] - 压力测试增加 P1 场景 + td ≤ second_input 断言 - 修复 PR #207 Comment #1282 审计发现	2026-07-10 15:01:59 +08:00
用户CI Test	81984ae938	fix: P0-2 预签名URL诊断日志 + P0-3 xfade exit 234 三重修复 ... P0-2 (预签名URL staging未生效): - storage.py get_download_url() 增加诊断日志(bucket=None / sign_url失败) - 代码逻辑已验证正确,8个单元测试覆盖全路径 - staging问题最可能是未重新部署或OSS凭证未配置 P0-3 (FFmpeg xfade exit 234): - Fix 1: _build_single_clip_filter 始终 trim 到 effective_duration - Fix 2: _build_filter_complex 用 effective_duration 计算 xfade offset - Fix 3: build_xfade_filter_chain 逐步安全钳制 td/offset - 动态 first_input_dur 跟踪 - per-step td 钳制到 available 和 remaining - 保证 offset + td ≤ first_input_duration 新增 20 个单元测试全部通过,全量 1213 测试无回归 Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>	2026-07-10 14:47:09 +08:00
用户CI Test	8fa287036d	fix: generation_tasks results 端点返回 OSS 预签名 URL（24h 有效期） ... P0-2 修复：list_generation_results 端点原先直接返回原始 file_url， OSS bucket 为 private 导致前端访问视频返回 403。 改动： - 注入 storage_service 依赖（复用已有 OSSStorageService.get_download_url） - 对每个视频的 file_url 生成预签名 URL，有效期 86400 秒（24h） - _to_generated_video_response 支持 download_url 参数 - 与 generated_videos.py 中的模式保持一致 新增测试： - test_results_endpoint_generates_presigned_urls：验证预签名 URL 生成 - test_results_endpoint_handles_empty_videos：验证空结果正常返回 Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>	2026-07-10 11:25:01 +08:00
xiaoxia	1b5a315bd1	Merge pull request 'fix: 一键生成 P0 修复 + P1 校验' (#203) from fix/oneclick-gen-p0-fixes into develop	2026-07-10 09:27:02 +08:00
用户CI Test	6d1f4da112	refactor: 删除 _validate_asset_ids_ownership 死代码函数 ... 该函数已在 P3-2 优化中合并到 _download_library_assets，不再被调用。 同时删除 test_oneclick_gen_p0_fixes.py 中对应的 5 个测试用例， 归属校验覆盖已由 test_generation_p3_optimizations.py 提供。	2026-07-10 08:33:18 +08:00
用户CI Test	ab413413b7	perf(P3): 三项代码审查优化 — strict模式/session合并/HEAD重试 ... P3-1: _download_library_assets 增加 strict 参数（默认 true） - strict 模式：任意素材下载失败立即抛 RuntimeError - non-strict 模式：跳过失败素材返回成功列表，全部失败仍抛异常 - 归属校验合并到同一 DB session（P3-2），减少连接开销 P3-2: 移除 generate_video 中独立的 _validate_asset_ids_ownership 调用 - 归属校验已内联到 _download_library_assets 同一 session 中 P3-3: _verify_url_accessible 增加 HEAD 重试（默认 2 次，间隔 1s） - 防止 OSS 抖动导致误报不可访问 新增 15 个单元测试覆盖三项优化 更新 1 个旧测试适配新 strict 模式错误信息 Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>	2026-07-10 07:42:39 +08:00
用户CI Test	abc54ace4e	fix: expand all UUID fields from varchar(32) to varchar(36) ... P0 hotfix: ingest_jobs.library_id (and all other UUID fields across 10 tables) were varchar(32), but standard UUIDs with hyphens are 36 chars, causing StringDataRightTruncation on insert — mini-program upload was completely broken. Changes: - models.py: All String(32) UUID fields → String(36) across 10 tables (projects, edit_templates, edit_plans, template_clip_configs, edit_plan_clips, ingest_jobs, classification_jobs, generation_tasks, generated_videos, jobs) - Alembic migration 036: ALTER COLUMN for all affected fields - Unit tests: 43 tests verifying String(36) on all UUID columns and standard UUID construction with hyphens Fixes: upload/direct/complete StringDataRightTruncation error	2026-07-10 01:23:24 +08:00
用户CI Test	c947abc038	fix: 一键生成 P0 修复 + P1 校验 ... P0-1: _download_library_assets 支持双模式查询（asset_library_id / project_id） 下载失败时抛出 RuntimeError，不再静默忽略 P0-2: OSS 上传失败抛异常 + 上传后 HEAD 校验 URL 可访问性 P0-3: run_ffmpeg 失败时完整 stderr 打到日志（排查 exit code 183） _execute_ffmpeg 额外记录 filter_complex 便于诊断 P1: template_id 存在性校验（不存在/已禁用 → ValueError） asset_ids 归属校验（不属于指定项目/素材库 → ValueError） 新增 16 个单元测试覆盖全部修复点，全量 1170 测试通过无回归	2026-07-10 00:28:47 +08:00
xiaoxia	4328854f58	feat: 统一渲染引擎 + 打通一键生成全链路	2026-07-09 22:59:19 +08:00
xiaoxia	ed972a230c	feat: 扩展剪辑模板体系 + 实现剪辑计划生成器	2026-07-09 21:21:23 +08:00
xiaoxia	5ec71f5e1e	fix(generation): 修复生成任务状态机缺失导致状态永不更新的问题 (#198)	2026-07-09 15:42:43 +08:00
灵应	23ef50ccc0	chore: 修复isort import排序	2026-07-09 11:53:39 +08:00
灵应	32ab1a0561	chore: 修复black代码格式问题	2026-07-09 11:51:04 +08:00
用户CI Test	8c2cd28c08	test(api): 补充P0级API集成测试（分片上传/素材CRUD/生成任务/任务中心/支付回调）	2026-07-09 10:24:41 +08:00
灵应	f914c51371	fix(test): 更新can_generate测试断言以匹配新的用户友好错误提示	2026-07-08 14:44:47 +08:00
灵应	519e01b417	fix(test): 更新生成接口测试以适配自动兜底行为	2026-07-08 14:40:45 +08:00
灵应	3889cd0f1a	feat: 新增 DELETE /asset-libraries/{library_id} 接口 ... - 删除素材库同时清理库内素材（无 FK 级联，手动处理） - 加权限校验：检查用户项目访问权限 - InMemoryAssetLibraryRepository 补充 find_by_id 方法 - 5 个单元测试覆盖：正常删除、含素材删除、404、403、项目不存在	2026-07-08 11:23:22 +08:00
灵应	6057ec18ce	fix: 修复4个单元测试断言 — 中文错误消息适配 + FastAPI路由检查 ... - test_edit_plans_api: 状态校验断言改为包含'无效'关键词 - test_edit_plan_service: can_generate断言适配新错误消息 - test_config_schemas_and_ai_endpoints: AI推荐端点断言适配 - test_video_upload_fix_and_generated_api: 直接检查generated_videos router路由， 绕过FastAPI 0.139.0 _IncludedRouter惰性包装	2026-07-08 09:48:14 +08:00
灵应	1a2e2d8546	fix: 优化生成接口错误信息，将技术状态机术语改为用户友好提示 ... - edit_plan_service.py: can_generate() 错误信息改为'请先编辑并保存模板后再生成视频' - edit_plans.py: 7处错误信息改为用户友好中文提示，不再暴露内部状态名和异常类型 - test_edit_plan_generation_api.py: 更新3个测试用例以匹配新的用户友好错误信息 Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>	2026-07-08 08:44:52 +08:00
灵应	33876d10a2	fix: voice_clone task tests - patch SessionLocal for full suite compatibility ... - Add @patch('worker_app.tasks.voice_clone.SessionLocal') to all 6 test methods - Fixes test isolation issue where sys.modules.setdefault was no-op in full suite - Ensures SessionLocal is mocked regardless of import order	2026-07-08 01:11:54 +08:00
灵应	c74efc6618	fix: rewrite voice_clone task tests — mock CosyVoiceService + fix bind=True call ... Root causes of 6 test failures: 1. CosyVoiceService was not mocked — production code instantiates it with real get_shared_settings() + httpx.Client() calls 2. VoiceCloneWorkflowService mocked as MagicMock doesn't execute real poll_and_process_clone logic — not_found test needs explicit side_effect 3. Celery bind=True task.__call__ auto-passes self — passing mock_self manually caused 'takes 2 positional arguments but 3 were given' Fixes: - Add @patch('worker_app.tasks.voice_clone.CosyVoiceService') to all tests - Use patch.object(task, 'retry') for timeout retry test - Use MagicMock for profile return values instead of real dataclass - Call process_voice_clone(profile_id) without manual self arg Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>	2026-07-08 00:50:09 +08:00
灵应	7ef4b0677a	style: black format test_voice_clone_task.py	2026-07-08 00:35:21 +08:00