859 Commits

Author	SHA1	Message	Date
xiaoxia	7766ba1479	fix(#1774): 模板不存在明确返回404并收敛双表异常降级逻辑 (#1779) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-08 00:30:08 +08:00
xiaoxia	ef686dde8f	fix(#1769): 模板列表过滤无片段配置的无效模板，避免前端选中后400 (#1772) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-08 00:10:13 +08:00
saas-backend-agent	cd6d8615e6	test: #1765 补充 int seed 分支测试，diff coverage 达标 ... 新增 5 个测试覆盖 int seed 入参分支（reproducible/与 Random 对象 等价/None 默认），满足 diff coverage ≥60% 要求。	2026-09-07 22:47:22 +08:00
CI Bot	ac7ab679b7	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-09-07 12:28:56 +00:00
saas-backend-agent	bb98620a8a	feat: 像素级扰动滤镜降低平台查重风险 (Issue #1765) ... - generate_pixel_perturbation()：随机选 2-3 种滤镜组合 - noise: 轻微噪声 (0.01~0.02) - unsharp: 锐化/柔化 (-0.5~+0.5) - curves: 对比度微调 (0.95~1.05) - color_balance: RGB 通道偏移 - _apply_pixel_perturbation()：渲染时追加到 FFmpeg filter chain - edit_plan_service：批量变体生成时为每个变体生成不同像素扰动 - 参数幅度确保肉眼不可见（SSIM > 0.95），帧级差异 > 3% - 11 个新测试覆盖滤镜组合/参数范围/验收	2026-09-07 20:24:13 +08:00
CI Bot	0d9d4e584f	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-09-07 12:20:53 +00:00
saas-backend-agent	eb089fa26d	feat: 节奏模板让批量变体片段时长分布不同 (Issue #1764) ... - 新增 RHYTHM_TEMPLATES 节奏模板池（6 种权重序列） - get_rhythm_template(seed)：根据变体 seed 随机选模板 - adapt_template_length()：将模板适配到实际片段数 - plan_clip_durations() 支持 rhythm_template 参数按权重分配时长 - 保底约束：每段 >= 2s，总时长 = 配音时长 - edit_plan_service: ensure_batch_variant_plans 为每个变体生成不同节奏模板 - 17 个新测试覆盖模板池/适配/分配/验收	2026-09-07 20:17:52 +08:00
CI Bot	07aa03da24	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-09-07 11:49:16 +00:00
saas-backend-agent	add93bb9de	feat(dedup): 增加文案+结构维度查重 (Issue #P2-后端3) ... - 新增 compute_text_similarity: 字符级 Jaccard 相似度比对配音文本 - 新增 compute_structure_similarity: 片段序列相似度（数量+类型+时长分布） - 多维度融合公式: duplicate_rate = visual*0.5 + text*0.25 + structure*0.25 - 文案/结构数据缺失时降级为纯视觉维度 - 21 个新测试覆盖文本+结构+权重常量	2026-09-07 19:46:43 +08:00
saas-backend-agent	1087ec181b	fix: test_empty_frame_returns_zero 添加 cv2 可用性检测	2026-09-07 18:44:32 +08:00
CI Bot	04463fbdce	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-09-07 10:33:42 +00:00
saas-backend-agent	fadca408d4	fix: 测试添加 cv2 可用性检测，mock 环境下 skip	2026-09-07 18:31:18 +08:00
saas-backend-agent	3447ab2582	fix: 修复 CI 测试失败 ... 1. cover_frame_scorer.py: 加强 cv2/numpy 真实性检查，防止 mock 对象 2. test_generation_cover.py: 更新 max_frames 断言 1→5	2026-09-07 18:29:43 +08:00
CI Bot	37ebf42278	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-09-07 10:21:04 +00:00
saas-backend-agent	d6a2715a26	feat: 封面智能选帧 — 帧质量评分（清晰度/亮度/色彩） ... P1-后端2：封面智能选帧 新增 cover_frame_scorer.py： - score_frame(): 评估单帧质量 0~100 分 - 清晰度 (0~40): 拉普拉斯方差，越高越清晰 - 亮度 (0~30): 80~180 舒适区间满分 - 色彩丰富度 (0~30): RGB 三维直方图非零 bin - score_frames(): 批量评分+排序 - select_best_frame(): 选出最佳帧 - 降级策略：cv2 不可用时返回 50.0 默认分 修改 thumbnail_generator.py： - extract_and_upload_cover_frames: num_frames=3→5 - 抽帧后对所有候选帧进行质量评分 - 按分数从高到低排序返回 - 统一临时文件管理（评分后清理） 修改 generation_cover.py： - E1/E2 步骤 max_frames=1→5 - 新增 _select_best_frame_from_snapshots() 辅助函数 - MediaKit 抽多帧后通过质量评分选最佳 修改 render_adapter.py： - 调用 extract_and_upload_cover_frames 时 num_frames=5 测试：test_cover_frame_scorer.py（18 个测试）	2026-09-07 18:18:19 +08:00
xiaoxia	debb3a5d67	feat(#1758): FFmpeg 渲染加速——preset medium→fast + 多线程 + 环境变量可覆盖 (#1757) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-07 16:37:35 +08:00
xiaoxia	87a61b7f2b	fix(#1754): ASS 标题位置常量同步前端改动（TOP 120→180, BOTTOM 60→100） (#1756) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-07 14:39:27 +08:00
xiaoxia	4b3feb2d88	feat(#1754): 渲染期画面扰动——让批量视频本身更不同 (#1755) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-07 13:55:47 +08:00
xiaoxia	e83a0b86f8	fix(#1749): 批量三连修：配音严格守卫/配音时长分配+末帧冻结/素材级去重 + variant-plans 接口 (#1752) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-07 09:22:34 +08:00
saas-backend-agent	6cdb70bb61	test(#1743): 修复 smart-match 随机噪声引发的确定性排序断言 ... CI Unit Tests 暴露（沙箱 httpx2 无法 collect test_smart_match*.py 未本地复现）： - test_smart_match_fallback test_limit_backfills: second(quality=40)/third(30) 质量项仅差 4 分 < 噪声 20，third 可翻到首位 → second 质量提至 90（差 24>20）， 200 seeds 验证零翻转 - test_smart_match test_returns_sorted_by_score_descending / test_image_assets: smart_select_assets 直接调用处注入零噪声 rng（_ZeroNoiseRandom），验证纯评分排序 - 验证生产噪声行为：大分差素材排名稳定、同分素材组合随机	2026-09-06 19:58:59 +08:00
saas-backend-agent	ed09794f4d	fix(#1743): smart-match排序注入随机噪声 + 素材使用次数按成片实际片段计数回写 ... 1. smart-match 排序零随机修复（主因）： - smart_select_assets 排序/多样性分桶注入 0~SCORE_RANDOM_NOISE_MAX 随机噪声， 同分/近分素材每次选出不同组合与顺序；分差>20的高质量素材保持稳定优先级 - 噪声以 asset.id 为 key 同次调用内一致；r.score 始终为无噪声原始分 - 支持 rng 注入（测试可复现）；smart-match API/正式生成/模板编辑器三调用点全受益 2. 素材使用次数口径修复： - mark_asset_used_for_generation 新增 times 参数，按成片实际渲染片段引用次数累加 - worker 回写从 task.asset_ids（请求列表，含未被plan选用的素材）改为 统计最终成片 plan 的 edit_plan_clips（同素材多片段复用按片段数累加） - 抽 _count_plan_clip_asset_usage/_record_rendered_asset_usage 纯函数（可单测） - plan 无有效片段时兜底 task.asset_ids 单次计数；单素材失败不阻断其他 3. 测试：22 新测试（噪声 10 + 回写计数 12）；旧确定性排序断言注入零噪声 rng； 修复 test_distribute_assets 预存在 flaky（shuffle 未被零噪声 patch 覆盖）	2026-09-06 19:48:08 +08:00
xiaoxia	52664f7168	fix(auth): 默认昵称改小虾同学 + 登录不覆盖存量昵称 + 中文昵称链路守护 (#1746) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-06 18:23:55 +08:00
xiaoxia	0469272bd6	fix(#1743): 批量变体独立选片——完整重跑单视频选片+批次20%重叠避让+查重超阈重渲+封面独立 (#1745) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-06 18:07:24 +08:00
CI Bot	3fba310b9e	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-09-06 07:04:19 +00:00
xiaoxia	0fa5b31f4f	test(auth): 补充unionid补写/跨端绑定/冲突拒绝场景测试	2026-09-06 15:01:27 +08:00
xiaoxia	54916aff86	fix(#1714): 同名兜底去重误杀新视频 + ingest 链路孤儿清理/启动恢复 (#1734) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-06 13:41:26 +08:00
xiaoxia	70dde8cbfb	feat(#1714): prepare_direct_upload 去重 + 预建 PROCESSING asset 占位 (#1730) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-06 12:31:38 +08:00
xiaoxia	528f56254d	feat(#1718): PATCH /auth/me 资料更新接口 + profile_completed 字段 (#1728) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-06 12:06:58 +08:00
saas-backend-agent	5ca64898b7	feat(#1719): 微信账号绑定/解绑三接口（GET bind/url、POST bind、DELETE bind）+ /me 返回 wechat_bound ... - WechatBindUseCase：绑定到当前登录账号不建新号；openid/unionid 已绑其他账号 409；已绑同一微信幂等 - WechatUnbindUseCase：解绑前守卫——必须有已验证手机或真实已验证邮箱（随机密码 hash/占位邮箱不算兜底，口径同 binding_complete） - /auth/me 增加 wechat_bound 字段，供设置页判断绑定状态 - state 复用 RedisStateStore CSRF 校验；22 个新单测，diff coverage 100%	2026-09-05 21:31:44 +08:00
saas-backend-agent	f11b71361d	feat(#1718): 微信 state 存储 Redis 化 + 回调 UA 日志 + 中文昵称 UTF-8 修复 ... - state store 改 Redis（复用 celery Redis，key 前缀 wechat:state:， TTL 10 分钟）：SET NX EX 写入，Lua 脚本原子 GET+DEL 一次性消费 （兼容 Redis <6.2 无 GETDEL）；Redis 不可用时自动降级内存，登录不中断； 容器重启/多实例后 state 不丢，修复 worker 扩容后回调 state 失效 - /wechat/callback 加可观测日志：User-Agent（识别 MicroMessenger 微信内置浏览器）、state 校验结果、失败上下文，便于排查回调停滞 - 修复微信中文昵称乱码：sns/oauth2/access_token 与 sns/userinfo 响应在 .json() 前显式 encoding=utf-8（微信响应头不带 charset， requests 默认 ISO-8859-1 解码导致中文乱码） - 15 个新单测（全 mock/fake，CI 无 redis 也覆盖）：Redis state 存取/一次性消费/eval 降级/异常降级内存/ping 失败降级、中文昵称 UTF-8 解析、errcode 透传、callback 路由日志分支、工厂降级分支	2026-09-05 20:45:02 +08:00
saas-backend-agent	6a1ec20e68	test(#1714): 补 mock redis 覆盖率测试，diff coverage 98% ... CI runner 无本地 redis，purge/revoke 与路由持久化的真实 redis 测试 全部 skip 导致这些改动零覆盖、diff coverage 45% 未达 60% 门禁： - 新增 test_orphan_guard_purge_mocked_1714.py（31 测试，全 mock）： _extract_business_ids 各形态（三元组/裸 args/dict args/坏 JSON/坏 base64/空 args）、_purge_one_queue（biz/celery id 双匹配命中、未命中 rpush 保序、全删不 rpush、解析失败保守保留、lrange/重写异常）、 purge_stale_messages_from_queues（空 ids 早退、redis 未安装、连接失败、 close 异常）、revoke_and_purge（逐条 revoke、异常不阻断、空 id 跳过） - 新增 test_persist_celery_id_routes_1714.py（9 测试）：ingest_jobs / task_center 重试 / upload helper 的 celery_task_id 持久化正常与异常 吞掉分支、task_enqueue 持久化失败仍入队成功、celery_app 队列配置 异常不阻断启动（用独立模块对象加载，不 reload 污染 task_enqueue）、 仓储 update 落库 celery_task_id - chunked_upload 完成回调去重：改为复用 upload._persist_celery_task_id	2026-09-05 19:52:50 +08:00
saas-backend-bot	df99305dd6	feat(worker): celery 队列隔离 + 孤儿任务消息作废 (#1714) ... 问题：素材转码与视频生成共用 celery 默认队列、worker 单进程消费， 20+ 转码积压会把用户生成任务堵 40 分钟以上；孤儿清理把任务标 failed 后 Redis 队列消息未作废，消息被重投导致 failed→running 非法转换， worker 打印 ERROR 后继续产出半成品。 队列隔离： - 新增 packages/shared/celery_queues.py：generation/transcode/celery 三队列与 task_routes（generate_video→generation；ingest_asset/ classify_asset/duplication→transcode），apply_queue_settings() - worker 入口改双进程：generation worker 独占队列并内嵌 beat （prefetch=1, GENERATION_CONCURRENCY 默认 2），transcode worker 消费 transcode,celery（并发=总-2，最小 1），任一退出则整体终止 - compose/部署脚本/ps1 同步新增 GENERATION_CONCURRENCY 与健康检查 消息作废： - 新增 packages/shared/celery_orphan_guard.py：终态守卫 ensure_task_claimable、Redis 队列消息物理清理（JSON 信封解析， 按业务 id + celery headers.id 双匹配，未命中 rpush 保序）、 revoke_and_purge（control.revoke + 物理清队列双保险） - 入队点（生成/上传/分片/重试）send_task 后持久化 celery_task_id 到 generation_tasks/ingest_jobs（新列，067 迁移，失败仅 warning） - generate_video/ingest_asset 执行前校验 DB 状态：终态直接 discarded 不进业务逻辑；mark_processing 返回 False（非法转换）安全中止 - 孤儿/超时清理标 failed 时同时 revoke + 清队列消息 - pending 超时阈值 15→45 分钟，与 running 孤儿(20min)区分 测试：新增 22 个单测（路由表/真实 Redis 消息清理/终态守卫/ 非法转换中止/标 failed 后消息不重投/入队持久化），全量 14301 passed；067 迁移隔离 DDL 验证 upgrade/downgrade 通过。	2026-09-05 19:07:47 +08:00
xiaoxia	8a6d51f6c3	fix(auth): 微信OAuth服务工厂改为真单例，修复回调state必校验失败 (#1718) (#1719) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-05 17:17:07 +08:00
xiaoxia	0a7ae8db4f	fix(upload): complete 接口幂等去重 + HEVC 转码回写占位 asset 禁止兜底新建 (#1714) (#1715) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-05 16:07:45 +08:00
xiaoxia	21c26b5b26	feat(generation): worker孤儿任务自动恢复 + 429限流结构化提示 (#1677) (#1710) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-05 11:37:49 +08:00
xiaoxia	cf83c0df9f	fix(dedup): pHash阈值二次校准12→16 + 时序对齐允许±1反向抖动，修复降重同源对漏检 (#1702) (#1709) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-05 11:30:11 +08:00
xiaoxia	ca7f875224	fix(dedup): scope=user跨项目查重不做时长预过滤，同源不同时长视频可互相检出 (#1702) (#1708) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-05 10:12:50 +08:00
xiaoxia	15909a92e5	fix(dedup): check_duplicate支持exclude_video_id，修复recompute自匹配 (#1702) (#1706)	2026-09-05 09:38:17 +08:00
xiaoxia	7a4aa27f71	fix(dedup): recompute任务从file_url派生OSS下载key，修复重算404 (#1702) (#1705) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-05 08:36:19 +08:00
xiaoxia	28b3010668	fix(dedup): 修复查重率恒为0%——指纹绕开降重裁剪+局部片段复用+阈值校准+3个单位bug (#1702) (#1703) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-05 07:57:23 +08:00
xiaoxia	c1763b995c	feat(#1677): 多视频批量生成后端补全 — 批量预览变体数组 + 按变体独立标题/配音/封面 (#1701) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-05 00:44:24 +08:00
CI Bot	3a8faeb31d	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-09-04 15:34:08 +00:00
xiaoxia	d947171713	fix(tests): 修复 test_duplicate_rate_scope 被黑屏过滤误拦截 ... test_formula_with_matching_frames 的测试数据用 5 个完全相同的 phash，被 PR #1688 新增的 _is_bad_fingerprint() 判定为黑屏视频 并跳过，导致 duplicate_rate=0.0。改为使用 5 个不同 phash 值。	2026-09-04 23:18:08 +08:00
CI Bot	eac05dee30	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-09-04 08:14:17 +00:00
xiaoxia	db244fe14c	feat: 片段时长自动对齐配音时长 (#1693)	2026-09-04 16:09:23 +08:00
xiaoxia	e86f137c3d	fix: 标题默认位置 fallback 改为 bottom，与前端 DEFAULT_TITLE_SETTINGS 对齐 (#1691)	2026-09-04 15:19:34 +08:00
xiaoxia	4633126bb4	fix: 查重系统黑屏视频过滤 — 跳过坏指纹防止虚假匹配 #1664 (#1688) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-04 14:56:47 +08:00
xiaoxia	452a484c5b	fix: 查重流程全面核实修复 — 两阶段持久化 + 重新计算查重API (#1664) (#1684) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-04 13:00:11 +08:00
xiaoxia	f523548eee	feat: 视频渲染后随机边缘裁剪 2-5% 降重 #1664 (#1682) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-04 11:56:18 +08:00
xiaoxia	0542654ca8	fix: 查重 worker 无限重试 bug + 补 3 个 API/repository 单测 (#1661 follow-up) (#1680) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-04 11:38:11 +08:00