486 Commits

Author	SHA1	Message	Date
CI Bot	1b83ec9952	fix: AI Code Review 阻塞问题修复 ... 1. remove_used_segment 旧数据兼容：记录缺 plan_id（本功能上线前的旧数据）时 退化为按时间匹配删除，避免旧区间永远删不掉导致素材容量泄漏 2. MediaKit 异步更新事务一致性：clip start_time 更新与 metadata 区间记录 删旧/写新放入同一事务，metadata 失败时 rollback 本次 clip 更新， 统一 commit，消除 clip 已提交、metadata 未更新的不一致 3. (建议) on_exhausted 回调异常增加 logger.warning，不再静默吞掉 4. 补充旧数据兼容单测	2026-08-29 20:38:56 +08:00
CI Bot	5d705307c1	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-29 12:26:01 +00:00
CI Bot	2174e91c48	feat: 素材片段区间持久化去重 + 区间用尽自动轮回 ... - 新增 asset_segment_tracker 服务：素材 metadata(used_time_ranges) 持久化片段级已用区间 - from-assets 创建片段时读取历史区间，新片段跨任务/跨调用自动避开 - 片段记录与 replace_all_clips_transactional 同事务，失败整体回滚 - MediaKit 异步移动片段起点后同步更新 metadata 区间记录（失败静默） - _calc_random_start_time 新增 on_exhausted 回调：100次找不到时清空该素材历史区间再重试，实现轮完一圈自动循环 详见 PR body 的 metadata schema 说明	2026-08-29 20:14:28 +08:00
CI Bot	5a00f8b8fb	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-29 10:02:10 +00:00
CI Bot	05d75db0cf	chore: 删除素材选取 random 模式 ... - generation_tasks.py: 删除 import random、if mode==random 分支、docstring 中 random 描述 - generation_task.py schema: description 移除 random=随机选取，count 描述仅保留 smart - 选取入口条件 in ("random","smart") 改为 in ("smart",) - test_asset_select_mode.py: 删除 TestSelectAssetsRandomMode 类（3个用例） - domain/test_generation_task.py + test_wave77_generation_task.py: random→smart 不改：_calc_random_start_time（片段级随机）、smart_match.py、前端	2026-08-29 17:54:15 +08:00
xiaoxia	cf7e295f35	fix: SSRF 内网判定改用 ipaddress 标准库，覆盖全部 IPv4/IPv6 私有段 ... AI Code Review 第三轮指出：IPv6 链路本地地址使用字符串前缀匹配 （fe80/fe90/...）不严谨且易漏。 修复：新增 _is_private_or_reserved_host()，统一用标准库 ipaddress.ip_address().is_private/is_loopback/is_link_local/ is_reserved 判定，一次性准确覆盖： - IPv4: 10/8、172.16/12、192.168/16、127/8、169.254/16、0.0.0.0 - IPv6: ::1、fc00::/7(ULA)、fe80::/10(链路本地)、保留段 删除手工字符串切片逻辑，可读性和正确性都更好。 36 个测试全部通过。	2026-08-29 00:49:11 +08:00
xiaoxia	bde37af2bb	fix: SSRF 白名单加固 — 修复 endpoint 解析绕过 + 补充 IPv6 内网拦截 ... AI Code Review 第二轮指出的两个阻塞问题： 1. endpoint 主机名解析绕过：原逻辑 ep.split(':')[0] 在 endpoint 带 scheme（http://host:9000）时取到 'http'，虽白名单顺序使 public_url 先生效，但 endpoint 分支可能错误匹配 '.http' 后缀。 修复：新增 _endpoint_host() 统一用 urlparse 提取主机名， 兼容有无 scheme、带端口等各种配置形式。 2. 缺失 IPv6 内网地址校验：[::1]、fe80::/10（链路本地）、 fc00::/7（唯一本地）等 IPv6 本地地址未拦截。 修复：补充 IPv6 回环/链路本地/ULA 地址显式拒绝。 附带： - 移除函数内重复的 urlparse 导入，统一使用顶部导入 - 新增 2 个白名单单元测试（IPv4/IPv6/元数据拦截 + scheme 解析） - 共 36 个测试全部通过	2026-08-29 00:39:05 +08:00
xiaoxia	3b828ab184	fix: 封面选帧接口安全加固 — 权限校验防绕过 + video_url SSRF 白名单 ... AI Code Review 指出的两个阻塞问题： 1. 权限校验绕过（步骤0a）：原逻辑仅在关联任务存在且 created_by_user_id 非空时才校验归属；若 GeneratedVideo 的 generation_task_id 为空或关联任务被删除，校验被静默跳过。 修复： - 优先校验 GeneratedVideo.user_id 直接归属 - 关联任务存在时校验 task.created_by_user_id - video 无 owner 且关联任务也查不到（归属无法确认）→ 403， 不再静默放行 2. video_url SSRF（步骤0b）：原逻辑直接使用请求体传入的 URL， 攻击者可传入内网/云元数据地址诱导服务端请求。 修复：新增 _is_trusted_media_url() 白名单校验： - 仅允许 http/https 且主机为自家 OSS bucket/endpoint 域名 - 显式拒绝 localhost/127.*/10.*/192.168.*/169.254.*/172.16-31.* - 校验失败静默忽略该 URL，回退后续查找链 附带改进（review 建议项）： - 函数内联 import 全部移至模块顶部（storage/re） - 新增 2 个安全测试：SSRF 内网地址拦截、归属无法确认 403 - 现有 32 个测试适配新的 mock 命名空间，共 34 个测试全过	2026-08-29 00:21:49 +08:00
xiaoxia	3e71a00b12	fix: 封面选帧输入源改为最终成片，预览片段作为兼容回退 ... - GenerateCoverRequest 新增可选字段 generated_video_id / video_url， 与前端 PR #1533 契约对齐：前端在「选择封面」步骤传入确认生成产出的 最终视频 ID 或 URL，后端据此定位最终成片文件并抽帧 - 视频源查找优先级调整： 0a. 请求体 generated_video_id → GeneratedVideo.file_url 0b. 请求体 video_url → 直接使用 1. plan.config.rendered_storage_key 2. plan.config.generation_task_id 3. source_edit_plan 关联的 is_preview=False 已完成任务（最终成片优先） 4. source_edit_plan 关联的 is_preview=True 预览任务（回退） 5. user+template 最近预览任务（兜底） - cover_url 查找同步调整：优先最终成片任务的 cover_url，再回退预览 - MediaKit 的 strategy/max_frames/轮询/重试/降级逻辑全部不变 - 权限校验：通过 generated_video_id 关联的 generation_task 校验归属 - 新增 5 个单测覆盖：schema 字段、video_id 抽帧、video_url 抽帧、 最终成片优先于预览、权限校验 403	2026-08-28 23:13:18 +08:00
xiaoxia	8e89717166	fix: 素材缩略图全黑 — 签名URL + 批量修复 + 前端兜底 ... 问题根因： 1. OSS bucket 为私有，upload_to_oss 返回的公开 URL 返回 403 2. API 降级逻辑把视频 .mp4 的 signed URL 当作 thumbnail_url 返回 3. 浏览器 <img> 无法渲染 .mp4 文件，显示黑屏 修复： - ingest.py: 存储 storage_key 而非公开 URL，API 层统一签名 - assets.py: 移除 .mp4 降级，thumbnail_url 通过 get_download_url 签名 - AssetCard.tsx: 检测视频 URL 后缀 + onError 降级显示类型图标 - 新增 batch_generate_thumbnails Celery 任务，为 2587 个历史视频补生成缩略图 - 同时处理 242 条旧格式公开 URL → storage_key 迁移	2026-08-28 18:23:41 +08:00
xiaoxia	12f51d43bf	feat(from-assets): 改为异步执行MediaKit分析 (#1525) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-28 12:26:00 +08:00
CI Bot	506b29991b	fix: include clip_type in clips_data for replace_all_clips_transactional ... - Add clip_type field to clips_data dict (body.clip_type or main) - Service layer reads clip_type from clips_data instead of hardcoding - 48 tests passing	2026-08-28 01:02:04 +08:00
CI Bot	ecfa478a24	fix: guard empty asset_ids + validate clip_duration > 0 + fix old-system default ... - Add empty asset_ids check before modulo (defense-in-depth, schema also enforces min_length=1) - Add clip_duration <= 0 guard after asset_total capping - Fix old-system fallback default from 0.0 to _DEFAULT_EDITOR_CLIP_DURATION - Add test for empty asset_ids 400 - 48 tests passing	2026-08-28 00:47:21 +08:00
CI Bot	d771fee45a	fix: validate segment durations with _safe_segment_duration + upgrade fallback logs to warning ... - Add _safe_segment_duration() to handle None/invalid/negative/NaN values - Swap dur_min/dur_max if dirty data has min > max - Change fallback exception logs from DEBUG to WARNING for observability - Add 7 unit tests for _safe_segment_duration - 47 tests passing	2026-08-28 00:31:24 +08:00
CI Bot	5c62dad798	fix: atomic clip replacement via replace_all_clips_transactional + asset_total=0 guard ... - Use replace_all_clips_transactional for atomic delete+create (fixes data loss risk) - Guard asset_total <= 0 with HTTP 400 (fixes invalid clip creation) - Update tests to verify transactional replace and zero-duration guard - 40 tests passing	2026-08-28 00:20:04 +08:00
CI Bot	9510f69816	fix: rename unused loop var and add type annotation for ruff/mypy	2026-08-27 23:01:57 +08:00
CI Bot	42c4f22b21	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-27 14:55:51 +00:00
CI Bot	a2b37e376d	feat(from-assets): create clips based on template segments instead of required_clips_count ... - Query template_segments/clip_configs by template_id, create exactly N clips matching segment count - Each clip duration randomly chosen between segment duration_min and duration_max (1 decimal) - Assets round-robin assigned across segments; same asset can produce multiple clips - Delete all existing clips for the plan before creating new ones (idempotent) - MediaKit recommendation only applied to the first clip using each asset; subsequent clips use random start times - MediaKit timeout/poll settings unchanged (60s/2s/15) - mark_clips_ready called immediately after creation - Ignore required_clips_count from frontend - Clips order starts from 0 since old clips are cleared - Add _get_template_segments helper supporting both new (clip_configs) and old (template_segments) systems - 28 unit tests covering segment query, clip creation, round-robin, deletion, duration bounds, MediaKit integration	2026-08-27 22:31:40 +08:00
xiaoxia	0c216bc545	feat(editor): MediaKit智能选片接入 (#1523)	2026-08-27 16:25:09 +08:00
xiaoxia	29c0d76677	fix: cross-task segment dedup - build used_segments from existing clips (#1522)	2026-08-27 15:25:04 +08:00
xiaoxia	608e200c0c	fix: 恢复被误回退的后端文件（#1519 #1520）	2026-08-27 15:06:00 +08:00
xiaoxia	b12bb24d08	fix(ui): 模板选择预览条缩短+素材列表改为竖屏9:16卡片网格 (#1521)	2026-08-27 15:04:17 +08:00
xiaoxia	7cdd06802d	fix: ensure cover title matches current video title (#1520)	2026-08-27 14:43:42 +08:00
xiaoxia	9bd3e7e30a	fix: from-assets 创建片段后调用 mark_clips_ready 转为 ready (#1517)	2026-08-27 10:31:13 +08:00
xiaoxia	2c1af458b9	feat(editor): from-assets支持同素材多片段+随机起始时间+去重+required_clips_count (#1512)	2026-08-26 22:40:02 +08:00
xiaoxia	7da62f0f82	fix: 移除 asset_durations 的 random_preview 条件限制 (#1509) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-26 18:46:37 +08:00
xiaoxia	41c1845aa1	fix: /tts/preview 解析克隆音色 UUID 为 CosyVoice voice_id (#1497) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-25 16:26:16 +08:00
xiaoxia	a1ddcb6ff6	feat: add POST /tts/preview endpoint for synchronous TTS preview (#1496) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-25 15:21:01 +08:00
xiaoxia	b05f34432b	fix: 预览渲染根据video_ratio计算分辨率，不再默认1280x720 (#1489) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-25 09:36:01 +08:00
xiaoxia	7844b65afe	feat: create端点兜底复用预览产物 + confirm同步标题 (#1486) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-24 23:31:00 +08:00
xiaoxia	fb4145f6de	fix: 兜底关联edit plan和回写config移到enqueue之前，消除竞态条件 (#1482) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-24 16:51:04 +08:00
xiaoxia	c873bb635f	refactor: 统一渲染链路，预览即所得（-3370行） (#1479) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-24 14:16:00 +08:00
xiaoxia	706b9057d6	fix: 3个bug修复 - flush/append_log/plan_id兜底 (#1476) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-24 11:26:00 +08:00
xiaoxia	febb1bcfce	chore: 清理剪辑模板编辑器生成视频死代码 + 重命名为剪辑模板 (#1472) ... 前端： - 删除 GenerationProgressModal/GenerationHistoryModal 组件及目录 - 删除 generateEditPlan/getGenerationStatus/getEditPlanGenerations 三个死API函数 - 删除对应类型 GenerateResponse/EditPlanGeneration/GenerationStatusResponse - 清理测试文件中的 mock 和引用 - 用户可见文案 '剪辑编辑器' 统一改为 '剪辑模板' - 不改变量名/组件名/路由路径/API路径 后端： - 删除 templates_editor/generation.py 死接口文件 - 清理 _fallback.py、dependencies.py、schemas.py 中的死代码 - 删除对应无用测试文件	2026-08-23 23:05:15 +08:00
xiaoxia	b4e3bb0fe7	refactor(worker): generate_video直接读取edit_plan_clips渲染 (#1468)	2026-08-23 16:03:30 +08:00
xiaoxia	4de4b8dc08	fix(cover): E2兜底封面标题样式透传color/position/font_size (#1467)	2026-08-23 14:57:05 +08:00
xiaoxia	622e9742f5	fix(edit-flow): 批量生成 plan.config 只回写一次 (#1466)	2026-08-23 14:19:16 +08:00
CI Bot	410f672195	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-23 05:15:40 +00:00
agent	06f68230af	fix(edit-flow): 补全 title_config 数据链路，修复编辑流程断裂 ... 1. Schema: CreateGenerationTaskRequest 增加 title_config(dict|None=None) 2. DB: generation_tasks 新增 title_config JSON 列 (alembic 057) 3. Domain/ORM/Repo/UseCase 全链路透传 title_config 4. API 创建任务成功后，merge 回写 EditPlan.config (generation_task_id + title_config)，失败不影响主流程 5. Worker 优先使用 title_config 构建标题图层，custom_title 兜底 6. GenerationTaskResponse 返回 title_config 7. 旧路由 /generate 和 /generation-status 标记 DEPRECATED 所有新字段默认 None/{}，不传时行为与现在完全一致。	2026-08-23 13:12:40 +08:00
CI Bot	f6b50b49ec	fix(cover): worker local ffmpeg cover frames + title overlay for source-asset fallback ... 问题： 1. 之前 Worker 用 MediaKit 网络抽帧写 cover_url，因状态字符串 bug（#1461 已修） 一直失败；且在 API 请求内同步抽帧易超时。 2. 封面从源素材抽取时无标题（源素材未烧录标题）。 修复： 1. Worker 渲染完成后直接复用 RenderAdapter 已用本地 ffmpeg 抽出的 cover_candidates： - _render_video 返回值改为 (output_path, render_duration, cover_candidates) - 第一帧写入 gen_task.cover_url，完整列表写入 metadata.cover_candidates - 删除步骤 4.5 的 MediaKit 抽帧代码（不依赖网络，不阻塞） 2. 标题叠加： - 新增 packages/shared/title_overlay.py，Pillow 绘制白色文字+黑色描边/阴影， 支持 CJK 字体和自动换行（API/Worker 共用） - thumbnail_generator.extract_and_upload_cover_frames 的 title_text 参数真正生效 - render_adapter 从已渲染视频抽帧时传空 title_text（标题已 ASS 烧录，避免重影） - 封面 API E2 从源素材抽帧后，从 plan.config.title.text 读取标题并叠加 3. API 基础镜像增加 Pillow 和 fonts-noto-cjk（E2 标题叠加依赖） 测试：新增 test_title_overlay.py（5）、E2 标题透传测试，更新 1294 解包； 相关 51 passed。	2026-08-23 10:28:52 +08:00
CI Bot	005f500ee1	fix(cover): short MediaKit polling timeout in API cover endpoint (E1/E2) ... E1/E2 fallback calls used default 30 polling attempts * 2s = 60s each, causing the cover API to hang ~2 minutes when MediaKit is slow/unreachable. Set max_poll_attempts=5, poll_interval=2, max_retries=0 for API-side fallback so it fails fast (~10s) instead of blocking the request. Worker-side extraction keeps default timeout (background task, safe).	2026-08-23 00:03:52 +08:00
xiaoxia	a11178eb13	fix(cover): extract cover from source asset when no backend preview exists (#1459)	2026-08-22 23:15:33 +08:00
xiaoxia	4a6d84921d	fix(cover): add plan.config.cover_candidates fallback in cover generation endpoint (#1458) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-22 21:51:01 +08:00
xiaoxia	665228a58f	refactor: 删除 uploadAsset，统一使用 uploadAssetDirect 直传 ... 前端： - 删除 uploadAsset 函数（upload.ts）和 export（index.ts） - 删除 UploadResult type export - CloneModal/useCloneSubmit 改用 uploadAssetDirect - DirectUploadCompleteResult 新增 url 字段 - 清理测试文件中 uploadAsset 引用 后端： - DirectUploadCompleteResponse 新增 url 字段 - complete_direct_upload 返回 OSS 文件 URL - 修复 FFmpeg 超时日志 300s → 900s	2026-08-20 16:22:56 +08:00
CI Bot	56d45c2d49	fix: 清理 create_asset 废弃后的 unused imports ... - 删除 CreateAssetRequest import - 删除 CreateAssetCommand/UseCase imports - 删除 AssetStatus/ClassificationStatus imports - 修复 ingest.py 日志信息 (300s → 900s)	2026-08-20 16:17:23 +08:00
CI Bot	2d0d8a2777	chore: 清理上传路径统一后的残留死代码 ... 后端: - create_asset 函数简化为仅返回 410，删除 46 行死代码 - 移除无用的依赖注入参数（asset_repository 等） 前端: - 删除 createAsset 函数定义（assets.ts） - 删除 createAsset 的 re-export（index.ts） 注: uploadAsset 函数保留（语音克隆 CloneModal 仍在使用）	2026-08-20 15:59:44 +08:00
CI Bot	d3469d9799	refactor: 统一所有素材上传为单一 ingest 路径 ... 前端修改: 1. useVoiceUpload.ts (voices): 删除 createAsset 调用，改为轮询 ingest_job_id 2. useVoiceUpload.ts (voice-materials): 同上，使用 result_asset_id 打标签 后端修改: 1. POST /assets 返回 410 Gone（已废弃，统一走 ingest-jobs） 2. 上传流程: uploadAssetDirect → completeDirectUpload → _submit_ingest_job → Worker 统一后的上传路径: - 前端上传 OSS（直传） - 调用 completeDirectUpload 创建 ingest job - Worker 根据类型处理（视频转码/图片音频元数据提取） - 创建 Asset 记录 → ready - 前端轮询 job 状态，完成后刷新	2026-08-20 15:54:01 +08:00
CI Bot	068010b059	feat: 统一素材上传为单一 ingest 路径 ... 后端改动: 1. POST /assets 拒绝视频类型（必须走 ingest-jobs） 2. HEVC 转码超时从 300s 改为 900s（支持大文件） 3. 添加 HDR→SDR 转换参数（colorspace/primaries/transfer=bt709） 4. 转码前检查磁盘空间（< 2GB 时拒绝任务） 前端无需修改: - 当前 uploadAssetDirect 已统一走 ingest-jobs 流程 - completeDirectUpload → _submit_ingest_job → Worker 处理 - 视频上传后自动进入转码+入库流程	2026-08-20 15:48:17 +08:00
xiaoxia	4bb1c4205d	perf: 删除 psycopg2-binary 依赖 + 预构建 API 基础镜像 (#1422) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-18 18:06:01 +08:00
xiaoxia	8ef96e8569	feat: 新增 POST /assets/batch 批量获取素材详情接口 (#1418)	2026-08-18 13:42:54 +08:00