384 Commits

Author	SHA1	Message	Date
xiaoxia	21c26b5b26	feat(generation): worker孤儿任务自动恢复 + 429限流结构化提示 (#1677) (#1710) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-05 11:37:49 +08:00
xiaoxia	e86f137c3d	fix: 标题默认位置 fallback 改为 bottom，与前端 DEFAULT_TITLE_SETTINGS 对齐 (#1691)	2026-09-04 15:19:34 +08:00
xiaoxia	2205adb8fb	feat(worker): 手动查重 worker task + visual_similarity/match_count 字段 #1661 (#1679) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-04 01:28:35 +08:00
xiaoxia	4725d94c7e	feat(api): 成品视频接口补全查重字段 duplicate_rate/visual_similarity/match_count #1660 (#1678) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-04 01:03:35 +08:00
xiaoxia	f10fd9cd5c	feat: 查重率百分比计算+跨项目查重 #1660 (#1675) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-04 00:11:51 +08:00
xiaoxia	159a62f9a5	Merge pull request 'feat: 跨视频片段避让 — 生成前注入已用区间 #1670' (#1671) from feat/cross-video-avoidance-1670 into develop	2026-09-03 22:42:03 +08:00
CI Bot	9d31818222	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-09-03 14:21:24 +00:00
saas-backend-agent	af4dd31dd1	feat: 跨视频片段避让 — 生成前注入已用区间 #1670 ... - Repository: list_used_segments_by_user() JOIN edit_plans 查用户最近 已完成 plan 的已渲染 clips，聚合为 {asset_id: [(start, end), ...]} - Domain: distribute_assets / _distribute_* 子函数新增 external_used_segments 参数，深拷贝注入 used_segments，让 _resolve_start_time 自动避让 - Service: _distribute_assets 新增 user_id 参数，预览和正式生成都查询 已用区间；查询失败时不阻塞，回退纯随机 - 12 个单元测试覆盖 Repository/Domain/Service 三层	2026-09-03 22:18:06 +08:00
saas-backend-agent	cbca0c3584	feat: 分片指纹存储改造 + 存量指纹重建脚本 #1657 ... ## 改动 ### 1. 新建 video_fingerprint_chunks 表（Migration 063） - 按时间分片存储 pHash + color_histogram - 索引：video_id, project_id, user_id ### 2. 新增 VideoFingerprintChunkModel - packages/adapters/sqlalchemy_impl/models.py ### 3. 改造 dedup.py 指纹计算 - compute_fingerprint() 改为按时间分片抽帧 - 短视频（≤60s）：每 2s 一片 - 长视频（>60s）：每 5s 一片 - VideoFingerprint 新增 chunks 字段（list of FingerprintChunk） - 向后兼容：keyframe_phashes/color_histograms 保留 - to_chunk_models() 方法转换为 SQLAlchemy Model - check_duplicate() 优先从分片表读取，回退到 JSON 字段 - check_duplicate_task() 写入分片表 ### 4. 改造 dedup_helpers.py - create_video_record_and_dedup() 同步写入分片表 ### 5. 存量指纹重建脚本 - apps/api/scripts/rebuild_fingerprint_chunks.py - 支持 --dry-run 和 --batch-size - 幂等：已有分片数据的视频跳过 ### 6. 单元测试（11 个） - 分片策略：60s→30片，120s→24片 - to_chunk_models() 输出正确 - _save_fingerprint_chunks 幂等性 - to_dict() 向后兼容 Closes #1657	2026-09-03 20:41:11 +08:00
xiaoxia	ec45d71d2c	fix: 上传素材后视频库立即显示（创建 PROCESSING 状态 Asset） (#1644) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-03 14:56:35 +08:00
xiaoxia	12f5ce9ab0	fix(mypy+ci): resolve mypy errors and fix integration tests PG dependency	2026-09-03 09:46:06 +08:00
xiaoxia	8f6a96ca22	fix(mypy+ci): resolve mypy errors and fix integration tests PG dependency	2026-09-03 09:46:04 +08:00
xiaoxia	b3b41838d8	fix(mypy+ci): resolve mypy errors and fix integration tests PG dependency	2026-09-03 09:46:02 +08:00
xiaoxia	e51a3deb5e	fix(mypy+ci): resolve mypy errors and fix integration tests PG dependency	2026-09-03 09:46:00 +08:00
xiaoxia	a633b64d4f	feat(migrations): 对齐 staging 数据库结构与生产 (#1627) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-02 15:30:38 +08:00
xiaoxia	24e66da061	feat: SceneChange 场景检测前置到渲染前 + 场景点缓存到素材 metadata (#1622) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-02 08:40:36 +08:00
xiaoxia	2c5600cfc9	feat: 素材选取评分注入随机噪声，降低成片查重率 (#1620) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-02 01:40:34 +08:00
CI Bot	25a98c33b9	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-09-01 13:32:22 +00:00
saas-backend-agent	827d8aafe5	feat: 素材分配顺序随机打乱 + MediaKit SceneChange智能选帧 ... 1. 素材分配顺序随机打乱 - segments 处理顺序通过 random.shuffle 随机化 - clips_data 最终按原始 segment order 排序返回 - 打乱的是分配顺序，不影响播放顺序 2. MediaKit SceneChange 智能选帧 - mediakit_client.py 新增 detect_scene_changes 方法 - SceneChange 优先，失败降级到 TimeInterval（5秒间隔） - 后台任务 _update_mediakit_recommendations_async 改用 SceneChange - 各片段优先从不同镜头段选取起始时间 - analyze_videos 保留为 fallback - 所有降级路径：MediaKit不可用/SceneChange失败 → 保持随机start_time 3. 测试 - 新增 tests/unit/test_scene_change_shuffle.py (12个测试用例) - 更新 test_editor_clips_random_start.py 适配 shuffle 逻辑 - 全部 108 个相关测试通过 - ruff check 通过	2026-09-01 21:16:51 +08:00
xiaoxia	4aeb1d5b66	fix(render): 修复生成视频时长短于模板要求时长 (#1614) ... fix(render): 修复生成视频时长短于模板要求时长 (#1614)	2026-09-01 20:00:12 +08:00
xiaoxia	34e8c56584	feat(title): 标题自由位置拖拽后端支持——pos_x/pos_y 注入 \\pos 定位 ... 工单 #1405 方案 B：前端支持用户在预览画面自由拖拽标题位置， 后端烧录 ASS 时按坐标定位。只动 Title，Subtitle 逻辑不变。 - title_config 新增可选字段 pos_x、pos_y（PlayRes 像素整数， PlayResX/Y = video_width/video_height） - 两字段同时存在、为 int（bool/float/字符串拒绝）、且落在 [0,video_width]×[0,video_height] 闭区间内时： - TitleStyle Alignment 固定 5（\an5 中对齐，\pos 锚点为文本块中心） - Dialogue 文本前注入 {\pos(x,y)} override tag - 字段缺失/非法/越界一律回退 position → alignment 三档逻辑， 现有 top/center/bottom 输出一字节不变 - 新增 9 个单测：合法坐标注入、边界值、无坐标回归、越界回退、 非法类型回退（含 bool/float/None/字符串）、单字段回退、 三档对齐不变、pos 覆盖 position、subtitle 不受影响	2026-09-01 01:25:25 +08:00
CI Bot	87cca302f4	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-31 13:26:58 +00:00
xiaoxia	6e76b45d34	feat: 统一模板 segments 数据源为 template_clip_configs ... - list_segments/list_by_user 优先读 clip_configs，回退 template_segments - create_segments 写入 clip_configs，material_type 存 config JSON - copy_template 复用 create_segments，使用 created.id - delete 复用 delete_segments_by_template 清理两张表 - migration 060: 方言感知(postgresql/mysql)一次性迁移历史数据 - 11 个新测试 + 120 个现有测试全部通过 Closes #1579	2026-08-31 19:58:51 +08:00
xiaoxia	afe78fb25f	feat: 成片 duplicate_rate 百分比 + 素材高频使用自动排除 (#1573) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-31 16:56:52 +08:00
xiaoxia	61295b9c25	feat(tts): 正式合成支持克隆音色 + 保存到配音库改写 assets 素材体系 + 克隆接口支持 asset_id (#1556) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-30 18:46:06 +08:00
CI Bot	e33502956c	feat(segments): 片段重复率控制（受控复用+15%闸门）与素材余量四字段 ... Task G：任意两条成片画面重复率 ≤15% - MediaKit 智能选片避让历史区间：历史区间并入冲突检查、0.3s 边缘间隙、 撞历史时放弃推荐保留原起点（不再挪到已用画面） - 自动轮回改造为受控复用：历史永不自动清空；used_time_ranges 增加 use_count/last_used_at；100 次随机失败后复用 last_used_at 最老且 use_count<3 的区间；单条成片复用占比 >15% 时该素材停止分配（分配闸门 + 复用回调内预判双闸门）；全部素材超限返回 400「素材可切区间不足，请补充新素材」 - 复用回调返回 None 时 calc 直接返回 None（删除末尾/0.0 重叠降级）， from-assets 轮询内 calc 失败切换下一素材 - 批量 N 条视频片段独立：count>1 时克隆独立 plan，禁止共用 source_edit_plan_id/clips（合并 Issue #1282）；预览同样克隆独立变体 - 常量：REUSE_RATIO_LIMIT=0.15 / SEGMENT_EDGE_GAP=0.3 / MAX_RANGE_USE_COUNT=3 Task H：素材余量透出与已用尽素材排除 - GET /assets 列表与详情响应附加 used_duration/available_duration/ used_ratio/usable 四字段（非视频/无时长/异常时 None + usable=True，零影响） - usable=false：零重复可切区间已耗尽（扩边后无 ≥3s 空闲段）且所有历史 区间 use_count 均达上限 - smart-match 结果层过滤 usable=false 素材（评分逻辑不动） - from-assets 对已用尽素材天然兜底：calc 返回 None → 轮询跳过 → 全部素材用尽时 400 测试：新增 test_mediakit_conflicts(10)/test_clone_plan_variant(7)/ test_asset_availability(23)，更新 tracker/clips/mediakit 既有用例； 全量 unit 13910 passed	2026-08-30 02:10:06 +08:00
CI Bot	1b83ec9952	fix: AI Code Review 阻塞问题修复 ... 1. remove_used_segment 旧数据兼容：记录缺 plan_id（本功能上线前的旧数据）时 退化为按时间匹配删除，避免旧区间永远删不掉导致素材容量泄漏 2. MediaKit 异步更新事务一致性：clip start_time 更新与 metadata 区间记录 删旧/写新放入同一事务，metadata 失败时 rollback 本次 clip 更新， 统一 commit，消除 clip 已提交、metadata 未更新的不一致 3. (建议) on_exhausted 回调异常增加 logger.warning，不再静默吞掉 4. 补充旧数据兼容单测	2026-08-29 20:38:56 +08:00
CI Bot	2174e91c48	feat: 素材片段区间持久化去重 + 区间用尽自动轮回 ... - 新增 asset_segment_tracker 服务：素材 metadata(used_time_ranges) 持久化片段级已用区间 - from-assets 创建片段时读取历史区间，新片段跨任务/跨调用自动避开 - 片段记录与 replace_all_clips_transactional 同事务，失败整体回滚 - MediaKit 异步移动片段起点后同步更新 metadata 区间记录（失败静默） - _calc_random_start_time 新增 on_exhausted 回调：100次找不到时清空该素材历史区间再重试，实现轮完一圈自动循环 详见 PR body 的 metadata schema 说明	2026-08-29 20:14:28 +08:00
xiaoxia	608e200c0c	fix: 恢复被误回退的后端文件（#1519 #1520）	2026-08-27 15:06:00 +08:00
xiaoxia	b12bb24d08	fix(ui): 模板选择预览条缩短+素材列表改为竖屏9:16卡片网格 (#1521)	2026-08-27 15:04:17 +08:00
xiaoxia	24c862c741	fix: 标题换行计算使用原始font_size，与CSS预览一致 (#1519) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-27 12:46:01 +08:00
xiaoxia	9709d5471b	fix(ass): Fontsize乘1.35补偿系数对齐CSS预览字号 (#1516)	2026-08-27 01:44:19 +08:00
xiaoxia	d4c8064cdc	fix(fonts): FONT_NAME_MAP改为Noto Sans SC适配容器实际字体 (#1514)	2026-08-27 00:35:48 +08:00
xiaoxia	57f16364f1	fix: 修复 CI 单测隔离问题 + ruff 代码质量违规 ... - test_generated_video_creation_logic: 添加 teardown_class 恢复 setup_class 中替换的 sys.modules 条目（video_processing.thumbnail_generator / dedup）， 避免 MagicMock 污染后续测试导致 4 个单测失败 - plan_generator_utils: 循环变量 seg_start 未使用 → _seg_start（B007） - acr_cleanup: 移除未使用变量 open_pr_shas（F841） - auto_fix_formatting: 移除未使用变量 head_branch_tmp / fix_mode（F841）	2026-08-26 18:36:37 +08:00
CI Bot	850559505f	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-26 09:28:53 +00:00
xiaoxia	ecbdd49dc1	feat: 素材片段随机起始时间+去重 + MediaKit智能封面抽帧 ... ## 任务1: 素材片段随机起始时间 - 修改 _calc_random_start_time 增加 used_segments 参数，避开已使用时间段 - 四个分配函数(ONE_TAKE/PIP/VOICE_OVER/VOICE_PIP)各自维护 used_segments - 同一素材被多个clip使用时，自动记录已用区间，下次随机时避开 - 如果无空间可用，回退到最后已用段之后或缩短时长 ## 任务2: MediaKit智能封面抽帧 - 新增 _extract_frames_via_mediakit 函数，上传视频到OSS后调用MediaKit API - 使用 SceneChange 策略智能选取关键帧 - 失败时自动降级到 ffmpeg 均匀抽帧 - 抽帧后下载帧图、可选叠加标题、上传OSS ## 测试 - 新增 8 个 _calc_random_start_time 单测 - 新增 4 个 distribute_assets 去重逻辑单测 - 新增 4 个 MediaKit 集成单测 - 修复 3 个因字体映射变更的测试断言	2026-08-26 17:22:08 +08:00
xiaoxia	23b6f23bad	fix: ASS Fontname 字体名称映射到服务器注册名 (#1508) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-26 16:56:01 +08:00
xiaoxia	32990194d4	fix: 标题顶部边距60→120，标题位置下移 (#1506) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-26 01:16:00 +08:00
xiaoxia	ddb1a3544d	fix: 混音主视频clip音量滤镜缺失 + 自动换行识别已有\N标记 (#1505) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-26 00:21:00 +08:00
xiaoxia	323bd2da5e	fix: 标题/换行 + TTS replace模式静音原音 + 配音素材库静音原音 (#1504) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-25 23:06:00 +08:00
xiaoxia	7635a20fdb	fix(ass): 字段名归一化(font_size/font_color→size/color) + 移除字号上限36 (#1501) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-25 21:56:02 +08:00
xiaoxia	7844b65afe	feat: create端点兜底复用预览产物 + confirm同步标题 (#1486) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-24 23:31:00 +08:00
xiaoxia	c873bb635f	refactor: 统一渲染链路，预览即所得（-3370行） (#1479) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-24 14:16:00 +08:00
xiaoxia	4de4b8dc08	fix(cover): E2兜底封面标题样式透传color/position/font_size (#1467)	2026-08-23 14:57:05 +08:00
agent	06f68230af	fix(edit-flow): 补全 title_config 数据链路，修复编辑流程断裂 ... 1. Schema: CreateGenerationTaskRequest 增加 title_config(dict|None=None) 2. DB: generation_tasks 新增 title_config JSON 列 (alembic 057) 3. Domain/ORM/Repo/UseCase 全链路透传 title_config 4. API 创建任务成功后，merge 回写 EditPlan.config (generation_task_id + title_config)，失败不影响主流程 5. Worker 优先使用 title_config 构建标题图层，custom_title 兜底 6. GenerationTaskResponse 返回 title_config 7. 旧路由 /generate 和 /generation-status 标记 DEPRECATED 所有新字段默认 None/{}，不传时行为与现在完全一致。	2026-08-23 13:12:40 +08:00
xiaoxia	5a5c653d2c	feat(cleanup): pending 任务自动清理，防止队列占满 (#1463)	2026-08-23 12:55:39 +08:00
CI Bot	f6b50b49ec	fix(cover): worker local ffmpeg cover frames + title overlay for source-asset fallback ... 问题： 1. 之前 Worker 用 MediaKit 网络抽帧写 cover_url，因状态字符串 bug（#1461 已修） 一直失败；且在 API 请求内同步抽帧易超时。 2. 封面从源素材抽取时无标题（源素材未烧录标题）。 修复： 1. Worker 渲染完成后直接复用 RenderAdapter 已用本地 ffmpeg 抽出的 cover_candidates： - _render_video 返回值改为 (output_path, render_duration, cover_candidates) - 第一帧写入 gen_task.cover_url，完整列表写入 metadata.cover_candidates - 删除步骤 4.5 的 MediaKit 抽帧代码（不依赖网络，不阻塞） 2. 标题叠加： - 新增 packages/shared/title_overlay.py，Pillow 绘制白色文字+黑色描边/阴影， 支持 CJK 字体和自动换行（API/Worker 共用） - thumbnail_generator.extract_and_upload_cover_frames 的 title_text 参数真正生效 - render_adapter 从已渲染视频抽帧时传空 title_text（标题已 ASS 烧录，避免重影） - 封面 API E2 从源素材抽帧后，从 plan.config.title.text 读取标题并叠加 3. API 基础镜像增加 Pillow 和 fonts-noto-cjk（E2 标题叠加依赖） 测试：新增 test_title_overlay.py（5）、E2 标题透传测试，更新 1294 解包； 相关 51 passed。	2026-08-23 10:28:52 +08:00
CI Bot	39683bda09	fix(mediakit): accept "completed" status in extract_frames polling ... 火山引擎 MediaKit 抽帧 API 完成时返回 status="completed"， 但 _poll_task_result_with_error 只判断 "success"， 导致任务实际已成功返回帧数据，客户端却继续轮询到超时返回 None， 封面抽帧一直失败。 与同文件 _poll_video_understand_result_with_error 的判断保持一致。 Worker 渲染后抽帧和 API E1/E2 兜底均受此 bug 影响。	2026-08-23 00:51:18 +08:00
xiaoxia	161c1a61b6	fix: HEVC 转码条件解耦 + 缩略图函数补全 + extra_meta 字段 (#1452) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-20 21:41:01 +08:00
xiaoxia	3c800d3f3f	fix(clips): 全面修复 Clips API 响应结构 — 替换 PR #1403 (#1404)	2026-08-17 18:18:48 +08:00