2926 Commits

This Branch

This Branch

All Branches

Author	SHA1	Message	Date
xiaoxia	acc21ee22f	fix(ci): docker_build_push 缓存损坏重建改为 flock 串行 + 健康度复查，避免并发互删	2026-08-29 14:18:42 +08:00
xiaoxia	77d582f13a	fix(ci): ensure_persistent_builder 并发安全 - create 失败时若已被并发 job 创建则复用	2026-08-29 14:18:42 +08:00
xiaoxia	3a41c9b598	perf(ci): Worker PR 构建也接入持久 builder（移除普通 docker build 捷径） ... 原 Worker PR 构建走 plain docker build，无 buildx 层缓存； 现与 API/Web 统一走 docker_build_only.sh (ci-builder-persist)。	2026-08-29 13:25:28 +08:00
xiaoxia	88cd5db299	fix(ci): 强制启用 pip 缓存目录（镜像 PIP_NO_CACHE_DIR=0 被当作真值禁用缓存） ... ci-base 镜像 ENV PIP_NO_CACHE_DIR=0 中字符串 "0" 被 pip 解析为真值， 导致 /root/.cache/pip 从不写入，actions/cache 报 Path Validation Error。 在 validate-code-quality / unit-tests 两个 pip job 的 env 中显式覆盖： PIP_CACHE_DIR=/root/.cache/pip + PIP_NO_CACHE_DIR=''。	2026-08-29 13:03:51 +08:00
xiaoxia	a441b760d4	perf(ci): validate/unit-tests/frontend-unit-test 三个 job 增加 actions/cache@v4 依赖缓存 ... act_runner v0.2.13 不支持 runner config 自定义 volume 挂载（container.volumes 不在 schema， container.options -v 实测不生效），改用 Gitea Actions 标准 actions/cache@v4： - validate-code-quality / unit-tests: 缓存 /root/.cache/pip，key 按 requirements*.txt hash - frontend-unit-test: 缓存 /root/.npm，key 按 apps/web/package-lock.json hash runner 已启用内置 cache server。	2026-08-29 12:43:37 +08:00
xiaoxia	a64037881a	perf(ci): 流水线提速 - 路径过滤/持久builder缓存/依赖缓存卷/部署job迁移ci-l2 ... 1. build-staging 路径过滤：纯前端改动只构建Web，纯后端只构建API/Worker； 未重建镜像通过 retag-staging-skipped job 将分支tag retag为新SHA推送，Watchtower链路不变 2. deploy-staging、acr-cleanup runs-on 从 runtime-builder 改为 ci-l2，释放构建槽 3. buildx 改为宿主机持久 builder(ci-builder-persist)+buildkit命名卷缓存， job结束不再prune，Worker镜像同样接入buildx缓存 4. validate/unit-test/frontend-test 的 pip/npm 依赖通过宿主机命名卷持久化缓存 （runner config 挂载 ci-pip-cache/xiaoxia-npm-cache/act-toolcache） 5. 不影响生产构建/发版/canary 相关 job	2026-08-29 11:28:12 +08:00
xiaoxia	e6c90a2346	fix(generate): 修复步骤1/2/3缺少下一步按钮 (#1536)	2026-08-29 10:30:01 +08:00
xiaoxia	425a7cb623	Merge PR #1534: fix 封面选帧输入源改为最终成片 + 接口安全加固 ... 封面选帧接口输入源从预览片段改为最终成片； - generated_video_id/video_url 定位最终成片视频，MediaKit 选帧逻辑不变 - 权限双重校验（GeneratedVideo.user_id + 关联任务归属），归属无法确认时 403 - video_url 增加 OSS 域名白名单 + ipaddress 标准库判定，防 SSRF - 预览片段/源素材回退链保留，兼容旧流程 Co-authored-by: AI Code Review bot	2026-08-29 01:19:01 +08:00
CI Bot	f9d243a5af	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-28 16:59:07 +00:00
xiaoxia	cf7e295f35	fix: SSRF 内网判定改用 ipaddress 标准库，覆盖全部 IPv4/IPv6 私有段 ... AI Code Review 第三轮指出：IPv6 链路本地地址使用字符串前缀匹配 （fe80/fe90/...）不严谨且易漏。 修复：新增 _is_private_or_reserved_host()，统一用标准库 ipaddress.ip_address().is_private/is_loopback/is_link_local/ is_reserved 判定，一次性准确覆盖： - IPv4: 10/8、172.16/12、192.168/16、127/8、169.254/16、0.0.0.0 - IPv6: ::1、fc00::/7(ULA)、fe80::/10(链路本地)、保留段 删除手工字符串切片逻辑，可读性和正确性都更好。 36 个测试全部通过。	2026-08-29 00:49:11 +08:00
xiaoxia	1eb9d8667a	feat(generate): 确认生成按钮移至标题步骤（步骤4直接触发最终渲染） (#1535) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-29 00:47:25 +08:00
xiaoxia	bde37af2bb	fix: SSRF 白名单加固 — 修复 endpoint 解析绕过 + 补充 IPv6 内网拦截 ... AI Code Review 第二轮指出的两个阻塞问题： 1. endpoint 主机名解析绕过：原逻辑 ep.split(':')[0] 在 endpoint 带 scheme（http://host:9000）时取到 'http'，虽白名单顺序使 public_url 先生效，但 endpoint 分支可能错误匹配 '.http' 后缀。 修复：新增 _endpoint_host() 统一用 urlparse 提取主机名， 兼容有无 scheme、带端口等各种配置形式。 2. 缺失 IPv6 内网地址校验：[::1]、fe80::/10（链路本地）、 fc00::/7（唯一本地）等 IPv6 本地地址未拦截。 修复：补充 IPv6 回环/链路本地/ULA 地址显式拒绝。 附带： - 移除函数内重复的 urlparse 导入，统一使用顶部导入 - 新增 2 个白名单单元测试（IPv4/IPv6/元数据拦截 + scheme 解析） - 共 36 个测试全部通过	2026-08-29 00:39:05 +08:00
xiaoxia	d3fc15ddd9	feat(generate): 确认生成按钮移至标题步骤 (#1535) ... - 步骤4（选择标题）底部按钮改为「确认生成视频」，点击后执行标题/预览 校验，直接调用 createGenerationTask 创建最终渲染任务，成功后跳转步骤5 - 步骤5不再有「开始生成」按钮，仅展示渲染进度；渲染中禁用下一步， 完成后停留本页，手动点下一步进入封面（不自动跳转） - 步骤6封面页底部仅保留上一步（修正确认按钮误挂最后一步的遗留问题） - 生成失败：创建失败留在步骤4可重试；轮询失败在步骤5展示错误卡片 - generate() 返回 boolean，任务创建成功才跳转 - 修复「查看结果」滚动选择器失效（xx-preview-section → xx-inline-video-player） - 步骤5增加未开始生成空状态提示	2026-08-29 00:39:04 +08:00
CI Bot	e5e18ef269	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-28 16:27:56 +00:00
xiaoxia	3b828ab184	fix: 封面选帧接口安全加固 — 权限校验防绕过 + video_url SSRF 白名单 ... AI Code Review 指出的两个阻塞问题： 1. 权限校验绕过（步骤0a）：原逻辑仅在关联任务存在且 created_by_user_id 非空时才校验归属；若 GeneratedVideo 的 generation_task_id 为空或关联任务被删除，校验被静默跳过。 修复： - 优先校验 GeneratedVideo.user_id 直接归属 - 关联任务存在时校验 task.created_by_user_id - video 无 owner 且关联任务也查不到（归属无法确认）→ 403， 不再静默放行 2. video_url SSRF（步骤0b）：原逻辑直接使用请求体传入的 URL， 攻击者可传入内网/云元数据地址诱导服务端请求。 修复：新增 _is_trusted_media_url() 白名单校验： - 仅允许 http/https 且主机为自家 OSS bucket/endpoint 域名 - 显式拒绝 localhost/127.*/10.*/192.168.*/169.254.*/172.16-31.* - 校验失败静默忽略该 URL，回退后续查找链 附带改进（review 建议项）： - 函数内联 import 全部移至模块顶部（storage/re） - 新增 2 个安全测试：SSRF 内网地址拦截、归属无法确认 403 - 现有 32 个测试适配新的 mock 命名空间，共 34 个测试全过	2026-08-29 00:21:49 +08:00
xiaoxia	2957ad724c	feat: 调换确认生成与选择封面顺序，封面从最终成片选帧 (#1533) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-28 23:41:29 +08:00
CI Bot	b6f211ebe6	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-28 15:35:01 +00:00
xiaoxia	3e71a00b12	fix: 封面选帧输入源改为最终成片，预览片段作为兼容回退 ... - GenerateCoverRequest 新增可选字段 generated_video_id / video_url， 与前端 PR #1533 契约对齐：前端在「选择封面」步骤传入确认生成产出的 最终视频 ID 或 URL，后端据此定位最终成片文件并抽帧 - 视频源查找优先级调整： 0a. 请求体 generated_video_id → GeneratedVideo.file_url 0b. 请求体 video_url → 直接使用 1. plan.config.rendered_storage_key 2. plan.config.generation_task_id 3. source_edit_plan 关联的 is_preview=False 已完成任务（最终成片优先） 4. source_edit_plan 关联的 is_preview=True 预览任务（回退） 5. user+template 最近预览任务（兜底） - cover_url 查找同步调整：优先最终成片任务的 cover_url，再回退预览 - MediaKit 的 strategy/max_frames/轮询/重试/降级逻辑全部不变 - 权限校验：通过 generated_video_id 关联的 generation_task 校验归属 - 新增 5 个单测覆盖：schema 字段、video_id 抽帧、video_url 抽帧、 最终成片优先于预览、权限校验 403	2026-08-28 23:13:18 +08:00
xiaoxia	d512cd2ac1	Merge PR #1533: 调换确认生成与选择封面顺序，封面从最终成片选帧	2026-08-28 22:59:19 +08:00
xiaoxia	1c9c9c79c2	Merge PR #1531: 合并步骤4(选择标题)和步骤5(生成预览)为一个步骤	2026-08-28 22:19:00 +08:00
CI Bot	7ed6962bab	Merge PR #1530: fix 素材缩略图全黑	2026-08-28 19:15:27 +08:00
xiaoxia	c74b2d4d8d	style: fix lint issues in batch_thumbnail.py	2026-08-28 18:46:46 +08:00
CI Bot	df8c64fc81	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-28 10:32:33 +00:00
xiaoxia	4dfe827344	fix: 标题位置默认改为顶部(top) (#1529) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-28 18:32:27 +08:00
xiaoxia	8e89717166	fix: 素材缩略图全黑 — 签名URL + 批量修复 + 前端兜底 ... 问题根因： 1. OSS bucket 为私有，upload_to_oss 返回的公开 URL 返回 403 2. API 降级逻辑把视频 .mp4 的 signed URL 当作 thumbnail_url 返回 3. 浏览器 <img> 无法渲染 .mp4 文件，显示黑屏 修复： - ingest.py: 存储 storage_key 而非公开 URL，API 层统一签名 - assets.py: 移除 .mp4 降级，thumbnail_url 通过 get_download_url 签名 - AssetCard.tsx: 检测视频 URL 后缀 + onError 降级显示类型图标 - 新增 batch_generate_thumbnails Celery 任务，为 2587 个历史视频补生成缩略图 - 同时处理 242 条旧格式公开 URL → storage_key 迁移	2026-08-28 18:23:41 +08:00
xiaoxia	74ecae5062	Merge PR #1529: 标题位置默认改为顶部(top)	2026-08-28 18:14:04 +08:00
xiaoxia	79074370b6	Merge pull request 'fix: thumbnail_url未写入generated_videos + 缩略图key避免覆盖' (#1528) from fix/thumbnail-v2 into develop	2026-08-28 16:06:26 +08:00
CI Bot	1b19e17cb7	fix: AI Code Review 澄清注释 - job_id是方法参数 + thumbnail_url通过构造函数返回	2026-08-28 15:47:28 +08:00
CI Bot	87deb7e467	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-28 07:37:56 +00:00
CI Bot	5a9e3fdb5e	fix: thumbnail_url未写入generated_videos表 + 缩略图存储key避免覆盖 ... Bug 1: render_adapter渲染完成后thumbnail_url未传递给create_video_record_and_dedup - _render_from_edit_plan 补充返回 result.thumbnail_url - _upload_and_record 新增 thumbnail_url 参数并透传 - generate_video 调用处同步更新 Bug 2: 缩略图存储key rendered/{plan_id}/thumbnail.jpg 导致同plan多次渲染互相覆盖 - 改为 rendered/{plan_id}/thumbnails/{task_id}.jpg	2026-08-28 15:30:09 +08:00
xiaoxia	5be051a683	fix(player): 预览播放器进度条不动 — play前未seek到segment起始时间 ... 根因：useSegmentScheduler.play() 直接调用 video.play() 没有先 seek 到 seg.startTime。当后端 from-assets 返回的片段 start_time > 0（MediaKit 推荐起始时间），视频从0开始播放，但 tick 计算 globalTime 时减去了 startTime，导致进度条卡在0不动，直到 video.currentTime >= startTime。 修复：play() 在调用 video.play() 前，seek 到 seg.startTime。	2026-08-28 14:03:24 +08:00
xiaoxia	12f51d43bf	feat(from-assets): 改为异步执行MediaKit分析 (#1525) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-28 12:26:00 +08:00
xiaoxia	bcafaa4eff	refactor(generate): 去掉30秒轮询，from-assets秒级返回后直接生成 ... - 删除 waitForClipsCreated 轮询逻辑（30s等待、1.5s间隔） - handleGenerate 改为单次 listClips 兜底检查，无片段则补调 from-assets - 后端已改异步秒级返回，前端无需长时间等待 - 生成前显示 loading '正在生成预览视频...' - useStep2Materials 错误提示统一为'智能选片失败，请重试' - 注释更新：反映后端异步行为	2026-08-28 10:30:54 +08:00
xiaoxia	b6af6892cd	feat(from-assets): 按模板segment创建片段 (#1524)	2026-08-28 01:19:57 +08:00
CI Bot	506b29991b	fix: include clip_type in clips_data for replace_all_clips_transactional ... - Add clip_type field to clips_data dict (body.clip_type or main) - Service layer reads clip_type from clips_data instead of hardcoding - 48 tests passing	2026-08-28 01:02:04 +08:00
CI Bot	ab81c0115a	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-27 16:53:21 +00:00
CI Bot	ecfa478a24	fix: guard empty asset_ids + validate clip_duration > 0 + fix old-system default ... - Add empty asset_ids check before modulo (defense-in-depth, schema also enforces min_length=1) - Add clip_duration <= 0 guard after asset_total capping - Fix old-system fallback default from 0.0 to _DEFAULT_EDITOR_CLIP_DURATION - Add test for empty asset_ids 400 - 48 tests passing	2026-08-28 00:47:21 +08:00
CI Bot	9711b6a545	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-27 16:37:26 +00:00
CI Bot	d771fee45a	fix: validate segment durations with _safe_segment_duration + upgrade fallback logs to warning ... - Add _safe_segment_duration() to handle None/invalid/negative/NaN values - Swap dur_min/dur_max if dirty data has min > max - Change fallback exception logs from DEBUG to WARNING for observability - Add 7 unit tests for _safe_segment_duration - 47 tests passing	2026-08-28 00:31:24 +08:00
CI Bot	753a3206a7	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-27 16:29:06 +00:00
CI Bot	5c62dad798	fix: atomic clip replacement via replace_all_clips_transactional + asset_total=0 guard ... - Use replace_all_clips_transactional for atomic delete+create (fixes data loss risk) - Guard asset_total <= 0 with HTTP 400 (fixes invalid clip creation) - Update tests to verify transactional replace and zero-duration guard - 40 tests passing	2026-08-28 00:20:04 +08:00
CI Bot	fdc9573baa	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-27 16:11:55 +00:00
xiaoxia	60263703a6	fix(generate): 片段校验改为只确认已创建，不死等 ready ... 上一版要求片段 status=ready 才放行 generate，导致： - E2E 测试环境 MediaKit 不就绪时，前端死等 90s，generate 请求不发出， waitForResponse 30s 超时（core-generation.spec.ts:232） - 真实环境 MediaKit 失败时用户无法触发生成 改为：轮询 listClips 只要存在任意片段（无论 ready/pending）即放行， 最多等 30s，超时也放行，由后端生成流程自行处理片段就绪/兜底。 loading 文案改为'正在准备素材片段...'。	2026-08-28 00:05:08 +08:00
CI Bot	030220f24d	test: update existing clip tests for template-segment-based creation	2026-08-27 23:58:56 +08:00
xiaoxia	6c047cdc20	fix(e2e): 素材卡片点击命中播放按钮导致选中失败 ... 根因：Playwright 默认点击卡片中心（150px 宽卡片中心约 x=55,y=100）， 正好命中 36×36 播放按钮。播放按钮 stopPropagation 只切换视频播放， 不会触发 onToggle 选中，因此勾选标记 ✓ 永远不出现，E2E 5s 超时失败。 修复： - MaterialCard 勾选标记加 data-testid=material-card-check，卡片加 data-testid=material-card - E2E 用 testid 定位卡片，点击左上角 (15,15) 避开播放按钮 - 勾选标记断言改用 testid，避免 ✓ 字符文本匹配不稳定	2026-08-27 23:22:21 +08:00
CI Bot	9510f69816	fix: rename unused loop var and add type annotation for ruff/mypy	2026-08-27 23:01:57 +08:00
CI Bot	42c4f22b21	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-27 14:55:51 +00:00
CI Bot	a2b37e376d	feat(from-assets): create clips based on template segments instead of required_clips_count ... - Query template_segments/clip_configs by template_id, create exactly N clips matching segment count - Each clip duration randomly chosen between segment duration_min and duration_max (1 decimal) - Assets round-robin assigned across segments; same asset can produce multiple clips - Delete all existing clips for the plan before creating new ones (idempotent) - MediaKit recommendation only applied to the first clip using each asset; subsequent clips use random start times - MediaKit timeout/poll settings unchanged (60s/2s/15) - mark_clips_ready called immediately after creation - Ignore required_clips_count from frontend - Clips order starts from 0 since old clips are cleared - Add _get_template_segments helper supporting both new (clip_configs) and old (template_segments) systems - 28 unit tests covering segment query, clip creation, round-robin, deletion, duration bounds, MediaKit integration	2026-08-27 22:31:40 +08:00
xiaoxia	185c240557	refactor(editor): 移除模板编辑器素材 Tab ... 模板编辑器只定义模板规则（片段数量、时长范围），不再承载素材管理： - MediaPanel 移除'📁 素材'Tab 及 AssetSelector 引用 - EditingPlanner 移除 mediaAssets/selectedAssetIds state - useTemplateManagement/useTemplateList 不再加载 getMediaAssets - 不影响用户端智能剪辑流程的素材选择功能	2026-08-27 22:30:07 +08:00
xiaoxia	5e8dcb9843	fix(generate): from-assets 去重 + 60s 超时 + 片段就绪轮询 ... - 移除 handleGenerate 中 from-assets 重复调用（useStep2Materials 已在选素材时 debounce 800ms 调用） - createClipsFromAssets 单独设置 60s timeout（与后端 MediaKit 一致），支持 AbortSignal - 调 generate 前轮询 listClips 确认存在 ready 片段，未就绪显示'正在智能选片中，请稍候...' - 轮询最多 90s（MediaKit 60s + 缓冲），超时提示'智能选片超时，请重试' - from-assets 请求超时/失败在 useStep2Materials 中 message.error 友好提示	2026-08-27 22:30:07 +08:00