770 Commits

Author	SHA1	Message	Date
CI Bot	352f2d85e1	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-30 09:19:08 +00:00
xiaoxia	16536c6c9a	style: 修复测试 E741 模糊变量名 l → lib、移除未使用 import	2026-08-30 17:13:11 +08:00
xiaoxia	204715b155	test(tts): 补路由级单元测试满足 CI 增量覆盖率门槛 ... CI Unit Tests job 仅跑 tests/unit，原新增用例都在 tests/integration 不被统计， diff 覆盖率 15% 未达 40% 门槛。新增 3 个单元测试文件共 22 用例： - test_tts_save_to_library_assets.py：save-to-library 写 assets 链路 （成功断言 audio/ready asset、自动建库、IntegrityError 竞态兜底、 未完成 400、无音频 400、下载失败 502、无项目 400、他人 job 404） - test_tts_synthesize_clone_voice.py：synthesize 克隆音色解析 （profile UUID/显式 profile id/预置+profile 同传以克隆为准/403/400/404/预置透传） - test_voice_clone_from_asset.py：克隆接口 asset_id 分支 （成功签名 URL、两参同传 400、404、403、非音频 400、无 key 400、旧 URL 流程兼容） 本地 diff 覆盖率 92%。	2026-08-30 17:04:35 +08:00
xiaoxia	afa7fae921	fix(tts): 修复 AI Review 阻塞问题——克隆音色解析强制生效 + 素材库并发创建防护 ... 1. synthesize() 克隆音色解析修复：原逻辑仅在 voice_id == profile UUID 时才把 actual_voice_id 替换为克隆 CosyVoice id，导致 voice_id 传预置音色+显式传 voice_clone_profile_id 时仍用预置音色合成、与记录的 profile 不一致。 改为命中 profile 并校验通过后一律 actual_voice_id = resolved_profile.voice_id。 补回归用例（老测试只断言 201，未覆盖解析结果）。 2. 自动创建 voice 素材库并发竞态：新增 migration 058 给 asset_libraries 加 (project_id, kind) 唯一索引（model 同步 UniqueConstraint，staging 2137 条数据无重复可安全建索引）；创建处捕获 IntegrityError 回滚后重查， 返回抢先创建成功的库。 3. 明确 download_asset 自动识别 URL/OSS key 的注释（Review 第 1 条为误报， SharedStorageService.download_asset 对 http(s):// 前缀走 HTTP 下载）。	2026-08-30 16:32:32 +08:00
xiaoxia	539c71f5cb	feat(tts): 正式合成支持克隆音色、保存到配音库改写 assets 素材体系、克隆接口支持 asset_id ... 1. TTS synthesize() 复用 preview 的克隆音色解析逻辑：voice_id 传克隆 profile UUID 时 校验归属(403)/克隆完成状态(400 音色克隆尚未完成)，job.voice_id 存解析后的 CosyVoice voice_id，voice_clone_profile_id 记录 profile id。 2. save_tts_job_to_library 改写为新素材体系：TTS 音频持久化独立副本到 uploads/voice/tts/，创建 file_type=audio/status=ready 的 asset 挂用户 voice 素材库（无则自动创建），duration/metadata(source=tts_job) 完整记录； 返回结构保持 id/name/audio_url/duration 兼容前端；移除旧 voice_library 表写入。 3. voice clone 创建接口支持 asset_id 字段：校验素材归属与音频类型，用 asset storage_key 生成 7 天有效签名 URL 供 worker 下载，不依赖前端签名； source_audio_url 方式保留兼容。 补集成测试：synthesize 克隆音色 4 用例、save-to-library asset 断言、 clone from asset 5 用例（成功/404/403/非音频400/两参同传400）。	2026-08-30 16:12:57 +08:00
CI Bot	b69588f14d	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-30 03:38:42 +00:00
xiaoxia	1f9236bb16	fix(ingest-jobs): GET /{job_id} 查不到时返回 404 而非 500 ValueError ... 之前 job 不存在抛 ValueError，被全局异常处理映射到 500，导致客户端拿不到合理的 '未找到'语义。改为 HTTPException(404)。 补 GET 路由单测：不存在→404、存在→200 + 字段完整。	2026-08-30 11:27:27 +08:00
xiaoxia	839426a2cc	fix: 素材余量四字段兼容 Asset 领域实体（真实接口恒为 None 修复） (#1550) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-30 08:21:00 +08:00
CI Bot	8c760d4a2d	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-29 23:21:59 +00:00
CI Bot	78e9463825	fix(segments): AI Review 二轮修复 — 批量无源plan索引守卫 + 区间set精度归一化 ... - [阻塞] count>1 但 source_edit_plan_id 为空时 variant_plan_ids 为空列表， 循环 task_index>0 直接索引 variant_plan_ids[task_index-1] 抛 IndexError 导致批量创建崩溃；加非空守卫，无源 plan 时各任务走自身随机选片 （新增回归测试 test_batch_no_plan_guard：还原守卫即红、修复后绿） - [建议] MediaKit 历史区间 set 去重前 round(3) 归一化浮点精度，避免 1.0 与 1.0000000001 被误判为不同区间 - [建议] smart-match 循环调用 compute_asset_availability 为纯函数 （只读 model 内存字段、无 DB 查询），无 N+1 问题，无需修改	2026-08-30 07:14:16 +08:00
CI Bot	b2d4589949	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-29 18:38:42 +00:00
CI Bot	b2a334f99b	fix(segments): AI Review 阻塞项修复 — 记录写入行级锁 + 克隆失败不降级共用 ... - record_used_segments 读取 AssetModel 加 with_for_update() 行级锁， 序列化并发事务对 classification_result 的读-改-写，杜绝区间记录丢失更新 （SQLite 下 with_for_update 为 no-op） - 批量生成：变体 plan 克隆前置到任务创建之前，全部成功才建任务（无脏数据）； 克隆含 1 次重试抗 DB 抖动，仍失败则 500 中断，不再静默退回共用源 plan - 预览生成：克隆失败标记任务 failed 并返回 500，不再退回原 plan （两条修复共同保证批量/多预览视频内容不重复的业务约束） - 测试：FakeSession 支持 with_for_update；预览相关测试 mock EditPlanService 或显式置空 source_edit_plan_id；zip 加 strict（B905）	2026-08-30 02:33:19 +08:00
CI Bot	7cb36a5c3d	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-29 18:16:26 +00:00
CI Bot	e33502956c	feat(segments): 片段重复率控制（受控复用+15%闸门）与素材余量四字段 ... Task G：任意两条成片画面重复率 ≤15% - MediaKit 智能选片避让历史区间：历史区间并入冲突检查、0.3s 边缘间隙、 撞历史时放弃推荐保留原起点（不再挪到已用画面） - 自动轮回改造为受控复用：历史永不自动清空；used_time_ranges 增加 use_count/last_used_at；100 次随机失败后复用 last_used_at 最老且 use_count<3 的区间；单条成片复用占比 >15% 时该素材停止分配（分配闸门 + 复用回调内预判双闸门）；全部素材超限返回 400「素材可切区间不足，请补充新素材」 - 复用回调返回 None 时 calc 直接返回 None（删除末尾/0.0 重叠降级）， from-assets 轮询内 calc 失败切换下一素材 - 批量 N 条视频片段独立：count>1 时克隆独立 plan，禁止共用 source_edit_plan_id/clips（合并 Issue #1282）；预览同样克隆独立变体 - 常量：REUSE_RATIO_LIMIT=0.15 / SEGMENT_EDGE_GAP=0.3 / MAX_RANGE_USE_COUNT=3 Task H：素材余量透出与已用尽素材排除 - GET /assets 列表与详情响应附加 used_duration/available_duration/ used_ratio/usable 四字段（非视频/无时长/异常时 None + usable=True，零影响） - usable=false：零重复可切区间已耗尽（扩边后无 ≥3s 空闲段）且所有历史 区间 use_count 均达上限 - smart-match 结果层过滤 usable=false 素材（评分逻辑不动） - from-assets 对已用尽素材天然兜底：calc 返回 None → 轮询跳过 → 全部素材用尽时 400 测试：新增 test_mediakit_conflicts(10)/test_clone_plan_variant(7)/ test_asset_availability(23)，更新 tracker/clips/mediakit 既有用例； 全量 unit 13910 passed	2026-08-30 02:10:06 +08:00
CI Bot	1b83ec9952	fix: AI Code Review 阻塞问题修复 ... 1. remove_used_segment 旧数据兼容：记录缺 plan_id（本功能上线前的旧数据）时 退化为按时间匹配删除，避免旧区间永远删不掉导致素材容量泄漏 2. MediaKit 异步更新事务一致性：clip start_time 更新与 metadata 区间记录 删旧/写新放入同一事务，metadata 失败时 rollback 本次 clip 更新， 统一 commit，消除 clip 已提交、metadata 未更新的不一致 3. (建议) on_exhausted 回调异常增加 logger.warning，不再静默吞掉 4. 补充旧数据兼容单测	2026-08-29 20:38:56 +08:00
CI Bot	5d705307c1	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-29 12:26:01 +00:00
CI Bot	2174e91c48	feat: 素材片段区间持久化去重 + 区间用尽自动轮回 ... - 新增 asset_segment_tracker 服务：素材 metadata(used_time_ranges) 持久化片段级已用区间 - from-assets 创建片段时读取历史区间，新片段跨任务/跨调用自动避开 - 片段记录与 replace_all_clips_transactional 同事务，失败整体回滚 - MediaKit 异步移动片段起点后同步更新 metadata 区间记录（失败静默） - _calc_random_start_time 新增 on_exhausted 回调：100次找不到时清空该素材历史区间再重试，实现轮完一圈自动循环 详见 PR body 的 metadata schema 说明	2026-08-29 20:14:28 +08:00
CI Bot	05d75db0cf	chore: 删除素材选取 random 模式 ... - generation_tasks.py: 删除 import random、if mode==random 分支、docstring 中 random 描述 - generation_task.py schema: description 移除 random=随机选取，count 描述仅保留 smart - 选取入口条件 in ("random","smart") 改为 in ("smart",) - test_asset_select_mode.py: 删除 TestSelectAssetsRandomMode 类（3个用例） - domain/test_generation_task.py + test_wave77_generation_task.py: random→smart 不改：_calc_random_start_time（片段级随机）、smart_match.py、前端	2026-08-29 17:54:15 +08:00
CI Bot	874893900d	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-29 04:25:30 +00:00
xiaoxia	250702de59	fix: worker 音频 mime 推断补充 .m4a/.mp3/.wav/.flac/.ogg/.aac/.wma/.amr/.opus/.weba ... infer_mime_type_from_storage_key 此前只识别视频后缀，其他一律返回 image/jpeg，导致所有音频文件在 ingest 后被标记为 file_type=image， 配音上传和克隆音色上传均失败。 补充音频后缀分支，返回对应 audio/... mime type。 新增 10 个音频单测，共 13 测试全过。	2026-08-29 12:00:52 +08:00
xiaoxia	bde37af2bb	fix: SSRF 白名单加固 — 修复 endpoint 解析绕过 + 补充 IPv6 内网拦截 ... AI Code Review 第二轮指出的两个阻塞问题： 1. endpoint 主机名解析绕过：原逻辑 ep.split(':')[0] 在 endpoint 带 scheme（http://host:9000）时取到 'http'，虽白名单顺序使 public_url 先生效，但 endpoint 分支可能错误匹配 '.http' 后缀。 修复：新增 _endpoint_host() 统一用 urlparse 提取主机名， 兼容有无 scheme、带端口等各种配置形式。 2. 缺失 IPv6 内网地址校验：[::1]、fe80::/10（链路本地）、 fc00::/7（唯一本地）等 IPv6 本地地址未拦截。 修复：补充 IPv6 回环/链路本地/ULA 地址显式拒绝。 附带： - 移除函数内重复的 urlparse 导入，统一使用顶部导入 - 新增 2 个白名单单元测试（IPv4/IPv6/元数据拦截 + scheme 解析） - 共 36 个测试全部通过	2026-08-29 00:39:05 +08:00
CI Bot	e5e18ef269	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-28 16:27:56 +00:00
xiaoxia	3b828ab184	fix: 封面选帧接口安全加固 — 权限校验防绕过 + video_url SSRF 白名单 ... AI Code Review 指出的两个阻塞问题： 1. 权限校验绕过（步骤0a）：原逻辑仅在关联任务存在且 created_by_user_id 非空时才校验归属；若 GeneratedVideo 的 generation_task_id 为空或关联任务被删除，校验被静默跳过。 修复： - 优先校验 GeneratedVideo.user_id 直接归属 - 关联任务存在时校验 task.created_by_user_id - video 无 owner 且关联任务也查不到（归属无法确认）→ 403， 不再静默放行 2. video_url SSRF（步骤0b）：原逻辑直接使用请求体传入的 URL， 攻击者可传入内网/云元数据地址诱导服务端请求。 修复：新增 _is_trusted_media_url() 白名单校验： - 仅允许 http/https 且主机为自家 OSS bucket/endpoint 域名 - 显式拒绝 localhost/127.*/10.*/192.168.*/169.254.*/172.16-31.* - 校验失败静默忽略该 URL，回退后续查找链 附带改进（review 建议项）： - 函数内联 import 全部移至模块顶部（storage/re） - 新增 2 个安全测试：SSRF 内网地址拦截、归属无法确认 403 - 现有 32 个测试适配新的 mock 命名空间，共 34 个测试全过	2026-08-29 00:21:49 +08:00
CI Bot	b6f211ebe6	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-28 15:35:01 +00:00
xiaoxia	3e71a00b12	fix: 封面选帧输入源改为最终成片，预览片段作为兼容回退 ... - GenerateCoverRequest 新增可选字段 generated_video_id / video_url， 与前端 PR #1533 契约对齐：前端在「选择封面」步骤传入确认生成产出的 最终视频 ID 或 URL，后端据此定位最终成片文件并抽帧 - 视频源查找优先级调整： 0a. 请求体 generated_video_id → GeneratedVideo.file_url 0b. 请求体 video_url → 直接使用 1. plan.config.rendered_storage_key 2. plan.config.generation_task_id 3. source_edit_plan 关联的 is_preview=False 已完成任务（最终成片优先） 4. source_edit_plan 关联的 is_preview=True 预览任务（回退） 5. user+template 最近预览任务（兜底） - cover_url 查找同步调整：优先最终成片任务的 cover_url，再回退预览 - MediaKit 的 strategy/max_frames/轮询/重试/降级逻辑全部不变 - 权限校验：通过 generated_video_id 关联的 generation_task 校验归属 - 新增 5 个单测覆盖：schema 字段、video_id 抽帧、video_url 抽帧、 最终成片优先于预览、权限校验 403	2026-08-28 23:13:18 +08:00
xiaoxia	12f51d43bf	feat(from-assets): 改为异步执行MediaKit分析 (#1525) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-28 12:26:00 +08:00
CI Bot	ab81c0115a	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-27 16:53:21 +00:00
CI Bot	ecfa478a24	fix: guard empty asset_ids + validate clip_duration > 0 + fix old-system default ... - Add empty asset_ids check before modulo (defense-in-depth, schema also enforces min_length=1) - Add clip_duration <= 0 guard after asset_total capping - Fix old-system fallback default from 0.0 to _DEFAULT_EDITOR_CLIP_DURATION - Add test for empty asset_ids 400 - 48 tests passing	2026-08-28 00:47:21 +08:00
CI Bot	9711b6a545	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-27 16:37:26 +00:00
CI Bot	d771fee45a	fix: validate segment durations with _safe_segment_duration + upgrade fallback logs to warning ... - Add _safe_segment_duration() to handle None/invalid/negative/NaN values - Swap dur_min/dur_max if dirty data has min > max - Change fallback exception logs from DEBUG to WARNING for observability - Add 7 unit tests for _safe_segment_duration - 47 tests passing	2026-08-28 00:31:24 +08:00
CI Bot	753a3206a7	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-27 16:29:06 +00:00
CI Bot	5c62dad798	fix: atomic clip replacement via replace_all_clips_transactional + asset_total=0 guard ... - Use replace_all_clips_transactional for atomic delete+create (fixes data loss risk) - Guard asset_total <= 0 with HTTP 400 (fixes invalid clip creation) - Update tests to verify transactional replace and zero-duration guard - 40 tests passing	2026-08-28 00:20:04 +08:00
CI Bot	fdc9573baa	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-27 16:11:55 +00:00
CI Bot	030220f24d	test: update existing clip tests for template-segment-based creation	2026-08-27 23:58:56 +08:00
CI Bot	42c4f22b21	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-27 14:55:51 +00:00
CI Bot	a2b37e376d	feat(from-assets): create clips based on template segments instead of required_clips_count ... - Query template_segments/clip_configs by template_id, create exactly N clips matching segment count - Each clip duration randomly chosen between segment duration_min and duration_max (1 decimal) - Assets round-robin assigned across segments; same asset can produce multiple clips - Delete all existing clips for the plan before creating new ones (idempotent) - MediaKit recommendation only applied to the first clip using each asset; subsequent clips use random start times - MediaKit timeout/poll settings unchanged (60s/2s/15) - mark_clips_ready called immediately after creation - Ignore required_clips_count from frontend - Clips order starts from 0 since old clips are cleared - Add _get_template_segments helper supporting both new (clip_configs) and old (template_segments) systems - 28 unit tests covering segment query, clip creation, round-robin, deletion, duration bounds, MediaKit integration	2026-08-27 22:31:40 +08:00
xiaoxia	0c216bc545	feat(editor): MediaKit智能选片接入 (#1523)	2026-08-27 16:25:09 +08:00
xiaoxia	29c0d76677	fix: cross-task segment dedup - build used_segments from existing clips (#1522)	2026-08-27 15:25:04 +08:00
xiaoxia	608e200c0c	fix: 恢复被误回退的后端文件（#1519 #1520）	2026-08-27 15:06:00 +08:00
xiaoxia	b12bb24d08	fix(ui): 模板选择预览条缩短+素材列表改为竖屏9:16卡片网格 (#1521)	2026-08-27 15:04:17 +08:00
xiaoxia	24c862c741	fix: 标题换行计算使用原始font_size，与CSS预览一致 (#1519) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-27 12:46:01 +08:00
xiaoxia	9bd3e7e30a	fix: from-assets 创建片段后调用 mark_clips_ready 转为 ready (#1517)	2026-08-27 10:31:13 +08:00
xiaoxia	9709d5471b	fix(ass): Fontsize乘1.35补偿系数对齐CSS预览字号 (#1516)	2026-08-27 01:44:19 +08:00
xiaoxia	d4c8064cdc	fix(fonts): FONT_NAME_MAP改为Noto Sans SC适配容器实际字体 (#1514)	2026-08-27 00:35:48 +08:00
xiaoxia	2c1af458b9	feat(editor): from-assets支持同素材多片段+随机起始时间+去重+required_clips_count (#1512)	2026-08-26 22:40:02 +08:00
xiaoxia	7da62f0f82	fix: 移除 asset_durations 的 random_preview 条件限制 (#1509) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-26 18:46:37 +08:00
CI Bot	b2d2abf8b7	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-26 10:42:39 +00:00
xiaoxia	57f16364f1	fix: 修复 CI 单测隔离问题 + ruff 代码质量违规 ... - test_generated_video_creation_logic: 添加 teardown_class 恢复 setup_class 中替换的 sys.modules 条目（video_processing.thumbnail_generator / dedup）， 避免 MagicMock 污染后续测试导致 4 个单测失败 - plan_generator_utils: 循环变量 seg_start 未使用 → _seg_start（B007） - acr_cleanup: 移除未使用变量 open_pr_shas（F841） - auto_fix_formatting: 移除未使用变量 head_branch_tmp / fix_mode（F841）	2026-08-26 18:36:37 +08:00
xiaoxia	ecbdd49dc1	feat: 素材片段随机起始时间+去重 + MediaKit智能封面抽帧 ... ## 任务1: 素材片段随机起始时间 - 修改 _calc_random_start_time 增加 used_segments 参数，避开已使用时间段 - 四个分配函数(ONE_TAKE/PIP/VOICE_OVER/VOICE_PIP)各自维护 used_segments - 同一素材被多个clip使用时，自动记录已用区间，下次随机时避开 - 如果无空间可用，回退到最后已用段之后或缩短时长 ## 任务2: MediaKit智能封面抽帧 - 新增 _extract_frames_via_mediakit 函数，上传视频到OSS后调用MediaKit API - 使用 SceneChange 策略智能选取关键帧 - 失败时自动降级到 ffmpeg 均匀抽帧 - 抽帧后下载帧图、可选叠加标题、上传OSS ## 测试 - 新增 8 个 _calc_random_start_time 单测 - 新增 4 个 distribute_assets 去重逻辑单测 - 新增 4 个 MediaKit 集成单测 - 修复 3 个因字体映射变更的测试断言	2026-08-26 17:22:08 +08:00
xiaoxia	23b6f23bad	fix: ASS Fontname 字体名称映射到服务器注册名 (#1508) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-26 16:56:01 +08:00