176 Commits

Author	SHA1	Message	Date
xiaoxia	db244fe14c	feat: 片段时长自动对齐配音时长 (#1693)	2026-09-04 16:09:23 +08:00
xiaoxia	e86f137c3d	fix: 标题默认位置 fallback 改为 bottom，与前端 DEFAULT_TITLE_SETTINGS 对齐 (#1691)	2026-09-04 15:19:34 +08:00
xiaoxia	4633126bb4	fix: 查重系统黑屏视频过滤 — 跳过坏指纹防止虚假匹配 #1664 (#1688) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-04 14:56:47 +08:00
xiaoxia	452a484c5b	fix: 查重流程全面核实修复 — 两阶段持久化 + 重新计算查重API (#1664) (#1684) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-04 13:00:11 +08:00
xiaoxia	f523548eee	feat: 视频渲染后随机边缘裁剪 2-5% 降重 #1664 (#1682) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-04 11:56:18 +08:00
xiaoxia	2a2dfad137	feat: pHash阈值校准+颜色直方图融合 #1658 (#1674) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-04 02:06:58 +08:00
xiaoxia	f10fd9cd5c	feat: 查重率百分比计算+跨项目查重 #1660 (#1675) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-04 00:11:51 +08:00
xiaoxia	db9ee89ffa	fix(dedup): ruff lint 修复 — 未使用变量 + zip strict + 冗余 import (#1659)	2026-09-03 23:09:19 +08:00
CI Bot	a0d4f6e111	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-09-03 15:04:14 +00:00
xiaoxia	fac80b1f77	feat(dedup): 动态抽帧 + 滑动窗口时序匹配 (#1659) ... 1. 动态抽帧策略 — detect_keyframe_timestamps() - 降采样到 320x240 逐帧灰度差异检测场景切换 - 最小间隔过滤（保留差异最大的候选帧） - 数量裁剪到 [MIN_KEYFRAMES=5, MAX_KEYFRAMES=30] - 长视频（>3分钟）每 30 秒分段保底 2. 滑动窗口时序匹配 — find_duplicate_segments() - 逐帧最佳匹配 → 连续 run 检测（允许 MAX_GAP=2 间隙） - 最少 MIN_CONSECUTIVE_MATCHES=5 帧才报告 - 返回 DuplicateSegment（query/target 时间范围 + 平均距离） 3. 查重算法升级 - 均值距离 → 中位数距离（抵抗异常值） - 新增帧匹配比例条件（match_ratio >= 0.7） - Bhattacharyya 系数替代余弦相似度 - pHash + 直方图加权融合（0.7/0.3） - 判定重复后附加 duplicate_segments 字段 4. 删除旧代码 - 移除 SHORT_VIDEO_CHUNK_SEC/LONG_VIDEO_CHUNK_SEC 固定间隔 - 移除 compute_chunk_interval() - 移除 _average_histogram_similarity() 5. 测试 - 新增 test_dedup_v2.py: 34 个测试 - 更新 test_dedup_engine.py/test_duplicate_rate.py/test_dedup_pure.py - 清理 test_fingerprint_chunks.py 中旧常量测试	2026-09-03 23:00:21 +08:00
saas-backend-agent	cbca0c3584	feat: 分片指纹存储改造 + 存量指纹重建脚本 #1657 ... ## 改动 ### 1. 新建 video_fingerprint_chunks 表（Migration 063） - 按时间分片存储 pHash + color_histogram - 索引：video_id, project_id, user_id ### 2. 新增 VideoFingerprintChunkModel - packages/adapters/sqlalchemy_impl/models.py ### 3. 改造 dedup.py 指纹计算 - compute_fingerprint() 改为按时间分片抽帧 - 短视频（≤60s）：每 2s 一片 - 长视频（>60s）：每 5s 一片 - VideoFingerprint 新增 chunks 字段（list of FingerprintChunk） - 向后兼容：keyframe_phashes/color_histograms 保留 - to_chunk_models() 方法转换为 SQLAlchemy Model - check_duplicate() 优先从分片表读取，回退到 JSON 字段 - check_duplicate_task() 写入分片表 ### 4. 改造 dedup_helpers.py - create_video_record_and_dedup() 同步写入分片表 ### 5. 存量指纹重建脚本 - apps/api/scripts/rebuild_fingerprint_chunks.py - 支持 --dry-run 和 --batch-size - 幂等：已有分片数据的视频跳过 ### 6. 单元测试（11 个） - 分片策略：60s→30片，120s→24片 - to_chunk_models() 输出正确 - _save_fingerprint_chunks 幂等性 - to_dict() 向后兼容 Closes #1657	2026-09-03 20:41:11 +08:00
xiaoxia	4aeb1d5b66	fix(render): 修复生成视频时长短于模板要求时长 (#1614) ... fix(render): 修复生成视频时长短于模板要求时长 (#1614)	2026-09-01 20:00:12 +08:00
xiaoxia	9ad729d917	fix(dedup): AI Review 阻塞问题修复——DB 层排除自身 + 文档修正 ... 1. DB 查询层排除 current_video_id： 原实现在 Python 循环里排除自身，但 GeneratedVideo 记录在查重前已 写入 DB（dedup_helpers L80 create → L126 compute_duplicate_rate）， 查询结果会包含自身 → MD5 完全匹配 → duplicate_rate 恒为 100%。 现在在 query 构建时即排除：query.filter(id != current_video_id) 2. 文档修正：limit(200) → "遍历最近 200 个"（与实际实现一致） 3. 测试 mock 更新：filter() 现在被调用两次（scope + self-exclusion）， 所有测试改用 chainable query_mock 模式。	2026-09-01 13:17:19 +08:00
CI Bot	1225e65cc3	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-09-01 05:13:39 +00:00
xiaoxia	3a9a4334df	feat(dedup): 自动查重率扩大到用户全局——跨项目比对 ... 原 compute_duplicate_rate 仅按 project_id 比较，用户在不同项目/模板 下生成的视频互不可见，导致查重率始终为 0。 修改： - dedup.py: compute_duplicate_rate 新增可选 user_id 参数； 有 user_id 时按用户全局查询（跨项目），否则回退 project_id。 查询上限从 100 提升到 200。 - dedup_helpers.py: create_video_record_and_dedup 传 user_id 给 compute_duplicate_rate。 新增测试： - test_duplicate_rate.py: +2 用例（跨项目匹配 / 空 user_id 回退） - test_dedup_helpers_user_id.py: 3 用例（user_id 透传 / 空值兼容 / duplicate_rate 写回记录） 共 107 个相关测试全过。	2026-09-01 13:06:08 +08:00
xiaoxia	afe78fb25f	feat: 成片 duplicate_rate 百分比 + 素材高频使用自动排除 (#1573) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-31 16:56:52 +08:00
CI Bot	1b19e17cb7	fix: AI Code Review 澄清注释 - job_id是方法参数 + thumbnail_url通过构造函数返回	2026-08-28 15:47:28 +08:00
CI Bot	5a9e3fdb5e	fix: thumbnail_url未写入generated_videos表 + 缩略图存储key避免覆盖 ... Bug 1: render_adapter渲染完成后thumbnail_url未传递给create_video_record_and_dedup - _render_from_edit_plan 补充返回 result.thumbnail_url - _upload_and_record 新增 thumbnail_url 参数并透传 - generate_video 调用处同步更新 Bug 2: 缩略图存储key rendered/{plan_id}/thumbnail.jpg 导致同plan多次渲染互相覆盖 - 改为 rendered/{plan_id}/thumbnails/{task_id}.jpg	2026-08-28 15:30:09 +08:00
xiaoxia	608e200c0c	fix: 恢复被误回退的后端文件（#1519 #1520）	2026-08-27 15:06:00 +08:00
xiaoxia	b12bb24d08	fix(ui): 模板选择预览条缩短+素材列表改为竖屏9:16卡片网格 (#1521)	2026-08-27 15:04:17 +08:00
xiaoxia	7cdd06802d	fix: ensure cover title matches current video title (#1520)	2026-08-27 14:43:42 +08:00
CI Bot	850559505f	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-26 09:28:53 +00:00
xiaoxia	ecbdd49dc1	feat: 素材片段随机起始时间+去重 + MediaKit智能封面抽帧 ... ## 任务1: 素材片段随机起始时间 - 修改 _calc_random_start_time 增加 used_segments 参数，避开已使用时间段 - 四个分配函数(ONE_TAKE/PIP/VOICE_OVER/VOICE_PIP)各自维护 used_segments - 同一素材被多个clip使用时，自动记录已用区间，下次随机时避开 - 如果无空间可用，回退到最后已用段之后或缩短时长 ## 任务2: MediaKit智能封面抽帧 - 新增 _extract_frames_via_mediakit 函数，上传视频到OSS后调用MediaKit API - 使用 SceneChange 策略智能选取关键帧 - 失败时自动降级到 ffmpeg 均匀抽帧 - 抽帧后下载帧图、可选叠加标题、上传OSS ## 测试 - 新增 8 个 _calc_random_start_time 单测 - 新增 4 个 distribute_assets 去重逻辑单测 - 新增 4 个 MediaKit 集成单测 - 修复 3 个因字体映射变更的测试断言	2026-08-26 17:22:08 +08:00
xiaoxia	ddb1a3544d	fix: 混音主视频clip音量滤镜缺失 + 自动换行识别已有\N标记 (#1505) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-26 00:21:00 +08:00
xiaoxia	323bd2da5e	fix: 标题/换行 + TTS replace模式静音原音 + 配音素材库静音原音 (#1504) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-25 23:06:00 +08:00
xiaoxia	3af65c2743	fix: 渲染产物临时目录不在render_plan中提前清理，改由调用方上传后清理 (#1484) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-24 21:21:00 +08:00
xiaoxia	61770cd4e4	fix(worker): render_plan 保留视频原声并尊重每clip音量 (#1474) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-24 01:16:00 +08:00
xiaoxia	b4e3bb0fe7	refactor(worker): generate_video直接读取edit_plan_clips渲染 (#1468)	2026-08-23 16:03:30 +08:00
xiaoxia	4de4b8dc08	fix(cover): E2兜底封面标题样式透传color/position/font_size (#1467)	2026-08-23 14:57:05 +08:00
CI Bot	f6b50b49ec	fix(cover): worker local ffmpeg cover frames + title overlay for source-asset fallback ... 问题： 1. 之前 Worker 用 MediaKit 网络抽帧写 cover_url，因状态字符串 bug（#1461 已修） 一直失败；且在 API 请求内同步抽帧易超时。 2. 封面从源素材抽取时无标题（源素材未烧录标题）。 修复： 1. Worker 渲染完成后直接复用 RenderAdapter 已用本地 ffmpeg 抽出的 cover_candidates： - _render_video 返回值改为 (output_path, render_duration, cover_candidates) - 第一帧写入 gen_task.cover_url，完整列表写入 metadata.cover_candidates - 删除步骤 4.5 的 MediaKit 抽帧代码（不依赖网络，不阻塞） 2. 标题叠加： - 新增 packages/shared/title_overlay.py，Pillow 绘制白色文字+黑色描边/阴影， 支持 CJK 字体和自动换行（API/Worker 共用） - thumbnail_generator.extract_and_upload_cover_frames 的 title_text 参数真正生效 - render_adapter 从已渲染视频抽帧时传空 title_text（标题已 ASS 烧录，避免重影） - 封面 API E2 从源素材抽帧后，从 plan.config.title.text 读取标题并叠加 3. API 基础镜像增加 Pillow 和 fonts-noto-cjk（E2 标题叠加依赖） 测试：新增 test_title_overlay.py（5）、E2 标题透传测试，更新 1294 解包； 相关 51 passed。	2026-08-23 10:28:52 +08:00
xiaoxia	161c1a61b6	fix: HEVC 转码条件解耦 + 缩略图函数补全 + extra_meta 字段 (#1452) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-20 21:41:01 +08:00
xiaoxia	13b8fb7f66	fix: 预览视频标题渲染全链路修复 — custom_title注入+ASR路径标题支持 (#1399)	2026-08-17 00:50:27 +08:00
xiaoxia	d826ae216a	fix: 渲染管线 bool 类型配置防护 — 全面修复 'bool' object has no attribute 'get' 崩溃 ... 根因: plan.config 中某 key 的值可能为 bool 而非 dict， 当 .get() 或 from_dict() 被调用时崩溃。 'or {}' 只能防 None/空值，防不了 True/False。 修复策略（双层防护）: 1. 治本: 所有 from_dict 方法入口加 isinstance(data, dict) 检查 - chroma_key_config.py / color_grade_config.py / noise_reduction_config.py - watermark_config.py / pip_config.py / intro_outro_config.py - reverse_engine.py 2. 治标: 调用方直接 .get() 处加 isinstance 防护 - unified_render_service.py: tts/bgm/title/subtitle/export/bgm - render_adapter.py: bgm/export/title - render_audio.py: bgm/audio_tracks - generation.py: title/subtitle/bgm/export - edit_plan_generation.py: title 共修复 12 个文件，覆盖渲染管线全部 unprotected 调用点	2026-08-16 14:58:30 +08:00
xiaoxia	74e2bdf914	fix: 模板配置字段非dict类型崩溃防护 (bool/str/int) (#1384)	2026-08-15 23:50:43 +08:00
xiaoxia	d7bc908ed3	fix: ASR字幕路径叠加标题，修复封面没有标题的问题 (#1374)	2026-08-15 14:21:09 +08:00
xiaoxia	0301370dd8	refactor: 统一封面生成管道 — 从渲染后视频抽帧作为封面 (#1371) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-14 22:16:00 +08:00
xiaoxia	c00c56a742	fix: overlay title text on auto-generated cover frames (#1365) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-14 12:11:00 +08:00
xiaoxia	8e4a8a8184	fix: videoRatio aspect ratio parsed as resolution causing scale=9:1920 (#1364)	2026-08-14 00:56:54 +08:00
xiaoxia	21e84c71c4	perf: render-time cover frame pre-extraction + FFmpeg fallback, remove MediaKit (#1360) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-13 20:51:02 +08:00
xiaoxia	52eb37472d	refactor(#1341): 删除 EditingPlanner 遗留封面生成器 + 清理 compose_video 封面代码 (#1353) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-13 01:16:00 +08:00
CI Bot	5924751bff	fix: 移除已删除的 PREVIEW_RESOLUTION 引用及未使用变量 ... - test_generation_preview.py: 移除 PREVIEW_RESOLUTION 导入和 TestCalcPreviewResolution 测试类 - render_adapter.py: 移除未使用的 has_voice_id 变量	2026-08-10 22:41:30 +08:00
CI Bot	29994ffcbc	feat: 统一预览与确认生成渲染路径 — 预览=正式品质+确认复用 ... ## 渲染管线统一 - UnifiedRenderService: 移除 is_preview 参数，统一 CRF 23 + medium preset - RenderAdapter: 移除 is_preview 参数，统一执行校验和缩略图生成 - Worker generation.py: 移除 480p+1M 码率覆盖逻辑 - generation_preview.py: 删除 PREVIEW_RESOLUTION 常量和 _calc_preview_resolution() ## 确认生成复用预览产物 - Domain: 新增 GenerationTask.mark_confirmed() 方法 - confirm_generation: 预览已完成时直接复用产物（秒出），无需重新渲染 - Editor generate: 检查 plan 关联的预览任务，plan未修改时复用产物 - Schema: CreatePreviewGenerationTaskRequest 新增 source_edit_plan_id 字段 ## 测试更新 - test_1280_preview_speedup: 重写为验证统一品质参数 - test_confirm_generation: 重写为验证复用逻辑 ## 交付标准 - 预览渲染质量与确认生成一致（1080p, CRF 23, medium） - 预览后确认生成直接复用产物（秒出） - Worker 端无任何 is_preview 低质量渲染代码残留	2026-08-10 22:32:35 +08:00
xiaoxia	e2b3811277	fix: FFmpeg mjpeg 缩略图/封面生成添加 format=yuvj420p ... 修复 FFmpeg 新版中 mjpeg 编码器拒绝非全范围 YUV 输入的问题： - thumbnail_generator.py: scale filter 添加 format=yuvj420p - processor.py: 添加 pix_fmt=yuvj420p - cover_generator.py: 两处 vf filter 添加 format=yuvj420p - cover_service.py: vf filter + simple fallback 添加 pix_fmt - asset_analyzer.py: 添加 -pix_fmt yuvj420p 修复错误: Non full-range YUV is non-standard, set strict_std_compliance to at most unofficial to use it.	2026-08-10 11:37:22 +08:00
xiaoxia	41d9713d28	fix: 视频 filter_complex 排除纯音频 clips 修复 FFmpeg exit=234 (#1321)	2026-08-09 15:10:25 +08:00
SaaS Frontend	734508bea5	fix: 预览模式配音降级处理 - ASR 不可用时走整段配音模式 (#1307) ... - render_adapter.py: 修复 import 路径 (services -> apps.worker.services) - unified_render_service.py: 方式B 条件调整 - ASR 可用时走字幕对齐模式（方式B） - ASR 不可用时降级为整段配音模式（方式A），使用 subtitle.text 作为配音内容 - 解决预览模式下配音完全不生效的问题 关联 Issue #1294	2026-08-08 18:33:15 +08:00
xiaoxia	765725b878	fix: 预览模式下有 voice_id 时初始化 ASR 以支持配音 (#1294) (#1306) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-08 17:21:00 +08:00
xiaoxia	60e8cd5247	perf(#1280): 预览视频生成加速 — ultrafast编码+并行下载+跳过非必要步骤 (#1284)	2026-08-07 21:52:03 +08:00
xiaoxia	91ac40dbef	fix(render_audio): drop source video audio in mix_audio (#1249)	2026-08-06 18:58:41 +08:00
xiaoxia	0ef4e1d633	feat: 渲染失败检测+任务超时机制 (#1219) ... - 新增 video_validation 模块（moov atom 检测 + ffprobe 验证 + 退出码映射） - render_adapter 渲染后自动校验输出再上传 OSS - 三个渲染任务加 10 分钟 soft_time_limit - Worker 启动时清理 GenerationTask + Job 两张表的孤儿任务 - 21 个新单元测试，全量 13713 测试通过	2026-08-02 15:34:22 +08:00
xiaoxia	76fdab4f63	fix(ci): 修复develop分支CI核心链路失败（Code Quality + Unit Tests + Frontend） (#1129)	2026-07-29 12:12:37 +08:00