54 Commits

Author	SHA1	Message	Date
CI Bot	70e514b3e4	chore: rebase到develop + 格式化代码	2026-07-14 10:29:28 +08:00
CI Bot	9fd3a469d7	feat: 视频裁剪/分割能力（Trimming Engine） ... 新增 TrimEngine 裁剪引擎，基于 FFmpeg trim/atrim 实现精确帧级裁剪： 核心能力： - 入点出点裁剪：start_time / end_time / duration 三选二 - 边界自动钳制：超出素材时长自动修正，不阻断渲染 - 多段裁剪：一个素材可裁剪出多段（trim_segments） - 音画同步：视频 + 音频同步裁剪 系统集成： - UnifiedRenderService Step 1 接入视频裁剪（修复原有 filter_complex 路径未使用 start_time 的问题） - render_audio 单 clip/多 clip/独立音轨 三处接入音频裁剪 - _resolve_clips 阶段解析裁剪配置 + 多段展开 129 个单测全绿（29 新增 + 100 现有）	2026-07-14 10:29:28 +08:00
xiaoxia	c840f37a44	feat: TTS文字转语音配音引擎 (#295)	2026-07-14 10:21:49 +08:00
xiaoxia	edcd1a926f	feat: 画中画（PiP）能力 - 多图层叠加引擎 (#299)	2026-07-14 10:17:40 +08:00
xiaoxia	e430d83f78	feat: 滤镜调色引擎 - 8种预设 + 基础调色 + 分段应用 (#300) ... feat: 滤镜调色引擎 - 8种预设 + 基础调色	2026-07-14 09:51:03 +08:00
xiaoxia	f4b4f1fc4f	feat: ASR自动字幕能力（领域模型+渲染管道接入+可扩展ASR后端） (#292) ... feat: ASR自动字幕能力	2026-07-14 09:50:57 +08:00
xiaoxia	eb4645314d	feat: 成片中心后端升级（封面生成/复核/批量下载） (#287) ... feat: 成片中心后端升级（封面生成/复核/批量下载）	2026-07-14 09:49:11 +08:00
xiaoxia	881eea9195	fix(api+ci): DELETE 204响应体全修复 + isort/black整理 + CI环境兼容 + 测试修复 (#286) ... fix(api+ci): DELETE 204响应体全修复 + isort/black整理 + CI环境兼容 + 测试修复	2026-07-14 07:07:51 +08:00
CI Bot	6f0a8253f6	fix(P1-1/P1-2): processor.py 补 logger 定义 + 测试文件导入路径同步到拆分后模块 ... P1-1: processor.py 使用了 logger 但未定义，补 import logging + getLogger P1-2: test_unified_render_service.py 导入路径同步: - 音频函数 (mix_audio/merge_audio_video/clip_has_audio/RenderContext) → render_audio - 字幕函数 (_hex_to_ass_color/_position_to_ass_alignment/generate_ass_subtitles) → render_subtitles - patch.object(svc, '_mix_audio') → patch('video_processing.unified_render_service.mix_audio') - patch.object(svc, '_merge_audio_video') → patch('video_processing.unified_render_service.merge_audio_video') - probe_has_audio/run_ffmpeg patch 路径对齐到 render_audio 模块 全部 84 个测试通过。	2026-07-13 21:06:26 +08:00
CI Bot	6fc1abf2f5	Phase 4 Backend P2 cleanup: 异常处理/类型注解/模块拆分/大函数拆分/配置项确认 ... - P2-1: 10处 except 审查改进（细化异常类型、添加日志） - P2-2: 22个路由函数类型注解补全 - P2-3: edit_plans.py 拆分为 4 个模块（CRUD/generation/ai/timeline） - P2-4: generate_video + generate_plan 大函数拆分 - P2-5: unified_render_service.py 拆分（1517→984行） - render_audio.py: 音频混音模块（RenderContext + mix/merge 函数） - render_subtitles.py: ASS 字幕生成模块 - P2-6: 6个未使用配置项删除确认 Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>	2026-07-13 20:00:54 +08:00
CI Bot	1a57878f76	chore(backend): Phase 3 清理 — 未使用依赖删除 + pyflakes 警告清零 + 测试文件冗余清理 ... 1. 未使用依赖清理: - 从 requirements-base.txt 移除 cryptography 和 pyOpenSSL 2. pyflakes 警告清零 (apps/ + packages/ + tests/): - 移除 17 处未使用的 import (F401) - 修复 26 处未使用的局部变量 (F841): * 有副作用的赋值转为裸调用 * 无副作用的赋值直接删除 - 修复 1 处未使用的异常变量 (F841) - 修复 1 处空 except 块 3. 测试文件冗余清理: - 删除 tests/integration/test_project_management.py (模块级 skip，测试不存在的模块) - 删除 tests/integration/fixtures/duplication_routes_fixed.py (未被引用) Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>	2026-07-13 16:14:46 +08:00
xiaoxia	1b2bccee6f	feat(worker): 直通渲染stream copy优化 - 无重编码性能提升10倍+ (#244)	2026-07-13 11:09:27 +08:00
xiaoxia	a0cac1b75d	fix(worker): FFmpeg超时保护 - 防止渲染hang住导致worker永久阻塞 (#242)	2026-07-13 11:07:10 +08:00
xiaoxia	4c5ab7f80e	fix(worker): OSS上传崩溃修复 - connect超时 + 分片上传 + 总超时保护 (#238)	2026-07-13 09:33:13 +08:00
xiaoxia	9b2e782abd	fix(worker): 修复 dedup fingerprint JSON 序列化失败 - np.float32 转原生 float (#239)	2026-07-13 08:54:58 +08:00
xiaoxia	bdf99bba39	fix(worker): 修复 render_edit_plan 素材下载 + 总时长日志 + video_processing 导入链 (#236)	2026-07-13 01:32:28 +08:00
xiaoxia	bfe8bfe2da	feat(feature-flag): Redis Feature Flag 灰度发布基础设施 ... Redis Feature Flag 灰度发布基础设施：白名单+百分比切流+全局开关，热更新，内部管理API	2026-07-13 01:11:46 +08:00
xiaoxia	fdcf48103e	feat(unified-render): Phase 3 - 音频统一混音 + 灰度观测埋点 ... Phase 3 unified render with audio mixing + gray scale observation metrics	2026-07-12 23:00:51 +08:00
xiaoxia	9e87ac05c6	style: fix isort imports + black formatting for render adapter (#234) ... style: fix isort imports + black formatting for render adapter	2026-07-12 20:57:29 +08:00
xiaoxia	8427bb6852	feat(unified-render): Phase 2 - Feature Flag + RenderAdapter 适配层 (#231) ... ## 统一渲染引擎 Phase 2 - Feature Flag 开关 + 适配层 ### 变更内容 1. **Feature Flag 开关** - API 端 `Settings.RENDER_ENGINE`（默认 `legacy`） - Worker 端 `WorkerSettings.render_engine`（默认 `legacy`） - 支持环境变量 `RENDER_ENGINE=unified` 一键切换 2. **RenderAdapter 适配层** (`apps/worker/video_processing/render_adapter.py`) - EditPlan + EditPlanClips → UnifiedRenderService 输入的完整适配 - 素材自动下载（OSS → 本地路径映射） - 进度回调对接（ProgressCallback） - 结果自动上传 OSS - `validate_plan()` 兼容旧接口，便于灰度切换 3. **compose_video 任务改造** - 根据 `RENDER_ENGINE` 配置分流到 legacy / unified 路径 - 新引擎结果回写字段对齐（engine/width/height/file_size） - 错误处理与重试逻辑保持一致 ### 测试 - 新增 16 个单元测试：validate_plan(7) + render_plan(6) + download_assets(3) - 原有 52 个 unified_render_service 测试全部通过 - 合计 **68 个测试全绿** ### 灰度策略 - 默认 `legacy`，不影响现有功能 - 灰度时设置环境变量 `RENDER_ENGINE=unified` 即可切换 - 后续可支持按 plan_id / user_id 灰度（Phase 3） --------- Co-authored-by: 灵应 <lingying@coze.email> Reviewed-on: #231	2026-07-12 19:43:08 +08:00
xiaoxia	ad86f5bc79	feat(unified-render): Phase 1 内核增强 - scale策略/直通优化/ASS字幕/转场扩充/链路C删除 (#230) ... ## 统一渲染引擎 Phase 1 内核增强 ### P0 完成 **1. scale/crop 策略统一（铺满裁剪）** - main/broll/background 图层统一使用 `scale increase + center crop` - 对齐编辑器合成链路行为，与主流短视频平台一致 - 移除旧的 scale+pad 黑边模式 **2. 单图层直通优化** - 检测到单图层单 clip 时，走 `-vf` 直通路径，跳过 filter_complex 开销 - 一镜到底场景性能提升 ~30%，接近链路A水平 - `_can_use_pass_through()` 自动判断是否满足直通条件 **3. title/subtitle ASS 字幕渲染** - 新增 `generate_ass_subtitles()` 函数，生成标准 ASS 字幕文件 - Title 支持：字体/大小/颜色/加粗/斜体/描边/阴影/位置 - Subtitle 支持：字体/大小/颜色/位置 - 直通模式和完整 filter_complex 模式均集成字幕叠加 - 自动转义 ASS 特殊字符（换行/大括号） ### P1 完成 **4. 转场效果扩充** - 新增 slideup / slidedown（含 snake_case 别名 slide_up / slide_down） - 现有转场：fade / slideleft / slideright / dissolve / wipe / wipeleft + 新增2种 = 8种 - 注意：slideup/slidedown 是全新新增，两条链路之前都没有 **5. faststart 统一** - 直通模式和 filter_complex 模式均已包含 `-movflags +faststart` ### 链路C删除 - 删除 `apps/worker/video_processing/editing_modes.py`（657行） - 删除 `apps/worker/video_processing/video_compose_service.py`（821行） - 删除 `tests/unit/test_video_compose_security.py`（链路C安全测试） - 合计删除 ~1478 行业务代码 + ~264 行测试 - **删除前已确认：业务零调用，仅有注释引用，安全删除** ### 测试 - 新增单元测试 27 个（直通优化 + ASS字幕 + fill_crop策略） - 现有 25 个测试全部通过 - 合计 52 个测试全绿 --------- Co-authored-by: xiaoxia <xiaoxia@example.com> Co-authored-by: 灵应 <lingying@coze.email> Reviewed-on: #230	2026-07-12 18:49:31 +08:00
xiaoxia	1e840057cb	fix(ci): 修复 Validate job ... fix(ci): 修复 Validate job — black 格式化 + isort 排序 + .cache 排除 + celery mock 路径修复	2026-07-11 14:42:53 +08:00
xiaoxia	48e5077191	fix: P0-2 深度根因修复 — Worker端URL校验403 + endpoint HTTPS修复 (#211)	2026-07-10 20:35:03 +08:00
xiaoxia	242497af8b	fix: 调换 fps 与 setpts 顺序，修复 P0-3 xfade 多视频转场 PTS 不一致问题 (#210)	2026-07-10 18:16:01 +08:00
用户CI Test	9fc82df6b9	fix: P1 xfade td 钳制到第二个输入片段时长 ... - build_xfade_filter_chain: 加 safe_td = min(safe_td, clip_durations[i]) - 新增 test_middle_clip_shorter_than_td 测试用例 [5.0, 0.3, 5.0] - 压力测试增加 P1 场景 + td ≤ second_input 断言 - 修复 PR #207 Comment #1282 审计发现	2026-07-10 15:01:59 +08:00
用户CI Test	81984ae938	fix: P0-2 预签名URL诊断日志 + P0-3 xfade exit 234 三重修复 ... P0-2 (预签名URL staging未生效): - storage.py get_download_url() 增加诊断日志(bucket=None / sign_url失败) - 代码逻辑已验证正确,8个单元测试覆盖全路径 - staging问题最可能是未重新部署或OSS凭证未配置 P0-3 (FFmpeg xfade exit 234): - Fix 1: _build_single_clip_filter 始终 trim 到 effective_duration - Fix 2: _build_filter_complex 用 effective_duration 计算 xfade offset - Fix 3: build_xfade_filter_chain 逐步安全钳制 td/offset - 动态 first_input_dur 跟踪 - per-step td 钳制到 available 和 remaining - 保证 offset + td ≤ first_input_duration 新增 20 个单元测试全部通过,全量 1213 测试无回归 Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>	2026-07-10 14:47:09 +08:00
用户CI Test	c947abc038	fix: 一键生成 P0 修复 + P1 校验 ... P0-1: _download_library_assets 支持双模式查询（asset_library_id / project_id） 下载失败时抛出 RuntimeError，不再静默忽略 P0-2: OSS 上传失败抛异常 + 上传后 HEAD 校验 URL 可访问性 P0-3: run_ffmpeg 失败时完整 stderr 打到日志（排查 exit code 183） _execute_ffmpeg 额外记录 filter_complex 便于诊断 P1: template_id 存在性校验（不存在/已禁用 → ValueError） asset_ids 归属校验（不属于指定项目/素材库 → ValueError） 新增 16 个单元测试覆盖全部修复点，全量 1170 测试通过无回归	2026-07-10 00:28:47 +08:00
xiaoxia	4328854f58	feat: 统一渲染引擎 + 打通一键生成全链路	2026-07-09 22:59:19 +08:00
灵应	9f0c064f2a	feat: 任务4 视频查重 — 历史+批次双重去重 ... - Alembic 033: generation_tasks 加 batch_id 列+索引 - Route: count>1 时生成共享 batch_id - Repository: list_by_batch() 批次内查询 - dedup.py: check_batch_duplicate() 批次内查重 - Worker: 生成视频后创建 GeneratedVideo 记录 + 双重查重 - 单元测试: 6 个批次查重测试用例	2026-07-07 15:26:41 +08:00
灵应	9519216df4	fix: 全面修复CI Validate阶段所有检查失败项 ... - 修复 video_compose_service.py StrEnum Python 3.10 兼容性（添加回退实现） - 修复 test_dedup_engine.py celery mock 污染导致测试收集失败 - 修复 edit_plans.py update_plan 路由：不存在返回 404 而非 400 - 修复 edit_plans.py generate_plan/get_generation_status 路由：不存在返回 404 - 修复 edit_templates.py update_template 路由：不存在返回 404 而非 400 - 修复 upload.py 添加 image/svg+xml 到允许的 MIME 类型 - 修复 test_edit_plans_api.py StubEditPlanRepository 添加 delete_by_plan 方法 CI Validate 8 项检查全部通过：compileall/black/isort/flake8/bandit/bash-n/alembic/pytest 831 单元测试全部通过，0 失败	2026-07-03 21:06:05 +08:00
灵应	3dcba4c44c	fix: 修复Bandit安全扫描硬编码临时目录问题	2026-07-03 19:48:11 +08:00
灵应	e25fd86171	style: 后端代码isort import排序	2026-07-03 18:56:16 +08:00
灵应	8935196fcd	style: 后端代码black格式化	2026-07-03 18:49:54 +08:00
CI Test	d6b11ea1cd	fix: 清理全局 except:pass（22处）改为 logger.warning 记录异常	2026-07-03 09:38:57 +08:00
CI Test	abfc598d3f	refactor: 代码精简优化 - 移除无用代码和重复定义 ... 1. 删除无用文件: - apps/api/app/core/database.py (未被引用的死代码) - requirements-quality.txt (与 requirements-dev.txt 完全重复) - fix_script.py, fix_tracker_encoding.py (一次性修复脚本) - init_tracker_phase4.py, init_tracker_simple.py, update_tracker.py (SQLite迁移脚本) 2. 清理死代码: - apps/api/app/db.py: 移除未使用的 get_db() 函数和 sqlalchemy.orm 导入 - 11个路由/中间件文件: 移除未使用的 import (os, datetime, BaseModel, Session, List 等) 3. 消除重复定义: - apps/worker/video_processing/video_compose_service.py: 移除重复的 EditingMode 枚举 - 改为从 packages.domain.editing_mode 导入统一的 EditingMode 影响: 无功能变更，仅移除未使用的代码	2026-07-03 00:44:29 +08:00
xiaoxia	51f5a960f1	fix: 修复 PR #159 安全审计发现的 P0/P1 问题 ... - 添加 output_path 路径穿越校验 (P0) - 添加 asset_id 输入路径格式校验 (P1) - 添加 transition 参数白名单校验 (P1) - 新增 37 个安全测试用例	2026-07-01 21:30:09 +08:00
灵应	ed7de72b0c	refactor(dedup): 优化查重算法 — XOR 汉明距离 + 简化判定逻辑 ... - hamming_distance: 替换 zfill+字符比较为 XOR bit 计数 (bin(h1^h2).count('1')) - check_duplicate: 移除直方图融合和 best_match，返回第一个匹配 - compute_phash: 补充详细中文算法注释（DCT 步骤说明） - 修复 similarity 精度：移除 round(x, 4) 保留完整浮点精度 所有 74 个测试通过（8 个 cv2 依赖跳过）。	2026-07-01 15:37:05 +08:00
灵应	ee8c60a143	perf(duplication): 查重模块代码优化 — 修复6个代码质量问题 ... 1. 修复 hamming_distance 不等长哈希处理（hex() 前导零丢失） 2. 集成颜色直方图到 check_duplicate（此前计算但未使用，浪费 CPU） 3. check_duplicate 改为返回最佳匹配而非首个匹配 4. 修复仓库删除顺序（先删片段再删记录，防止孤儿数据） 5. 域模型添加 can_retry()/reset_for_retry()，仅 failed 状态允许重试 6. 列表接口暴露 offset/limit 分页参数	2026-07-01 14:48:15 +08:00
Deploy Bot	3fe48b37d4	fix: replace StrEnum with Python 3.10 compatible implementation	2026-06-30 19:03:38 +08:00
xiaoxia	fff644deac	fix: resolve bandit security issues and fix vitest configuration (#132)	2026-06-30 18:35:20 +08:00
xiaoxia	1217d8cef0	style: apply isort formatting to pass CI validation (#129)	2026-06-30 18:17:44 +08:00
xiaoxia	52ff2f80ad	style: apply black formatting to pass CI validation (#126)	2026-06-30 17:23:08 +08:00
API文档维护Agent	a43ddb4b63	feat: Phase 1 - 核心重构（去Project层/标题库API/配音库API/清理废弃代码） ... ## 主要变更 ### 1. 清理废弃代码（18个文件删除） - 删除 TaskModel/MilestoneModel/TaskIssueModel 及相关文件 - 删除 ProjectTitleModel/EditPlanModel/EditPlanClipModel 及相关文件 - 清理 domain/ports/adapters/application/api 各层引用 - 从 GenerationTaskModel 移除 edit_plan_id 字段 ### 2. 新建标题库 API（/api/v1/titles） - Domain: TitleLibraryItem 数据类 - Ports: TitleLibraryRepository 接口 - Adapters: SQLAlchemy 实现（软删除） - Application: CRUD Use Cases + 配额检查（max_titles: free=50, basic=500, premium=500） - API: GET/POST/PUT/DELETE 端点 - Schema: Pydantic 请求/响应模型 ### 3. 新建配音库 API（/api/v1/voices） - Domain: VoiceLibraryItem 数据类 - Ports: VoiceLibraryRepository 接口 - Adapters: SQLAlchemy 实现（软删除） - Application: CRUD Use Cases + 配额检查（max_voiceovers: free=10, basic=100, premium=100） - API: GET/POST/PUT/DELETE 端点 - Schema: Pydantic 请求/响应模型 ### 4. 去掉 Project 层依赖 - 修复 authenticated_user.id → authenticated_user.user.id bug - asset_libraries.py: project_id 改为可选查询参数 - generated_videos.py: project_id 改为可选查询参数 - 无 project_id 时通过 find_accessible_projects 获取用户可访问的所有项目 ### 5. 数据库迁移 - 创建 011_phase1_core_refactor.py - 删除 6 个废弃表：tasks, milestones, task_issues, project_titles, edit_plans, edit_plan_clips - 从 generation_tasks 表删除 edit_plan_id 列 ### 6. 其他改进 - 迁移 EditingMode 到独立模块 packages/domain/editing_mode.py - 注册 titles_router 和 voices_router - 添加 get_title_library_repository 和 get_voice_library_repository 依赖 - 更新 domain/ports __init__.py 导出新实体和仓储接口 ## 技术细节 - 遵循六边形架构模式 - 配额检查通过 QuotaRegistry 实现 - 软删除：标题库用 is_active=False，配音库用 status='deleted' - 配音库支持可选的 project_id 关联 ## 破坏性变更 - 删除 6 个废弃表（需先备份数据） - 删除 /api/v1/edit-plans, /api/v1/project-titles, /api/v1/project-management 端点 - generation_tasks API 不再包含 edit_plan_id 字段	2026-06-28 15:02:10 +08:00
CI Test	95fbf52049	fix(P2-1): EditingMode 枚举改为从 packages.domain 导入，消除重复定义	2026-06-28 10:26:06 +08:00
API文档维护Agent	e3fb518ab2	refactor: remove all workspace_id references from codebase ... - Remove workspace_id from Pydantic models in project_management routes - Remove workspace_id from SQLAlchemy and SQLite project management repos - Remove workspace_id from worker tasks (storage keys, entity creation) - Remove workspace_id from video dedup and title usage modules - Remove workspace_id from generation and ingest worker tasks - Clean workspace_id from all test files and scripts - Remove workspace-specific test files (list_workspaces, workspace repos) Task: #14 workspace_id 残留清理	2026-06-27 22:52:09 +08:00
Celery Worker Fix Agent	8210806632	fix: 修复 Celery Worker 任务注册和导入问题 ... 1. 修复 Worker 启动入口: celery_app → worker_app.celery_app - 旧 celery_app.py 不导入任何任务模块，导致 Worker 注册 0 个任务 - 删除旧版 apps/worker/celery_app.py，统一使用 worker_app/celery_app.py 2. 为缺少装饰器的任务补充 @celery_app.task: - classification.py: classify_asset() 添加装饰器 - generation.py: generate_video() 添加装饰器，修正签名匹配 API 调用方式 3. 确保 voice_extraction 任务被正确注册: - 添加 voice_extraction 到 celery_app imports - 修复 voice_extraction.py 中错误的相对导入 (.celery_app → worker_app.celery_app) - 修复 dedup.py 中指向已删除模块的导入 4. 修复 worker_app/celery_app.py: - 添加 broker_connection_retry_on_startup=True - imports 中添加 voice_extraction 和 dedup 模块 5. 修复 Dockerfile: - CMD 改为 celery -A worker_app.celery_app - 添加非 root 用户 celery 运行 Worker 6. 新建 packages/shared/config.py 和 storage.py 兼容层 - 为 worker 任务模块提供统一的 config/storage 访问入口	2026-06-27 19:31:07 +08:00
CI Bot	c98ab4c1ef	feat: decouple API and Worker cross-service dependencies	2026-06-27 10:22:25 +08:00
CI Bot	a97e3e72e9	fix: 修复 dedup.py 语法错误和 pHash DCT 实现，修复 chunked_upload.py 缩进错误	2026-06-26 22:46:21 +08:00
CI Test	bd9e9fba45	chore: squash merge feature/voice-dedup into develop (resolve conflicts) ... - Add voice extraction and deduplication functionality - Add dedup.py for video deduplication - Add voice_extraction.py task for worker - Resolve CI/CD and deploy workflow conflicts with develop version - Keep new voice dedup features from feature branch	2026-06-26 21:23:39 +08:00
xiaoxia	f687b4207f	feat: add download_url field to generated video APIs (#20)	2026-06-26 21:13:18 +08:00