138 Commits

Author	SHA1	Message	Date
xiaoxia	54916aff86	fix(#1714): 同名兜底去重误杀新视频 + ingest 链路孤儿清理/启动恢复 (#1734) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-06 13:41:26 +08:00
xiaoxia	528f56254d	feat(#1718): PATCH /auth/me 资料更新接口 + profile_completed 字段 (#1728) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-06 12:06:58 +08:00
saas-backend-bot	df99305dd6	feat(worker): celery 队列隔离 + 孤儿任务消息作废 (#1714) ... 问题：素材转码与视频生成共用 celery 默认队列、worker 单进程消费， 20+ 转码积压会把用户生成任务堵 40 分钟以上；孤儿清理把任务标 failed 后 Redis 队列消息未作废，消息被重投导致 failed→running 非法转换， worker 打印 ERROR 后继续产出半成品。 队列隔离： - 新增 packages/shared/celery_queues.py：generation/transcode/celery 三队列与 task_routes（generate_video→generation；ingest_asset/ classify_asset/duplication→transcode），apply_queue_settings() - worker 入口改双进程：generation worker 独占队列并内嵌 beat （prefetch=1, GENERATION_CONCURRENCY 默认 2），transcode worker 消费 transcode,celery（并发=总-2，最小 1），任一退出则整体终止 - compose/部署脚本/ps1 同步新增 GENERATION_CONCURRENCY 与健康检查 消息作废： - 新增 packages/shared/celery_orphan_guard.py：终态守卫 ensure_task_claimable、Redis 队列消息物理清理（JSON 信封解析， 按业务 id + celery headers.id 双匹配，未命中 rpush 保序）、 revoke_and_purge（control.revoke + 物理清队列双保险） - 入队点（生成/上传/分片/重试）send_task 后持久化 celery_task_id 到 generation_tasks/ingest_jobs（新列，067 迁移，失败仅 warning） - generate_video/ingest_asset 执行前校验 DB 状态：终态直接 discarded 不进业务逻辑；mark_processing 返回 False（非法转换）安全中止 - 孤儿/超时清理标 failed 时同时 revoke + 清队列消息 - pending 超时阈值 15→45 分钟，与 running 孤儿(20min)区分 测试：新增 22 个单测（路由表/真实 Redis 消息清理/终态守卫/ 非法转换中止/标 failed 后消息不重投/入队持久化），全量 14301 passed；067 迁移隔离 DDL 验证 upgrade/downgrade 通过。	2026-09-05 19:07:47 +08:00
xiaoxia	0a7ae8db4f	fix(upload): complete 接口幂等去重 + HEVC 转码回写占位 asset 禁止兜底新建 (#1714) (#1715) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-05 16:07:45 +08:00
xiaoxia	21c26b5b26	feat(generation): worker孤儿任务自动恢复 + 429限流结构化提示 (#1677) (#1710) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-05 11:37:49 +08:00
xiaoxia	2205adb8fb	feat(worker): 手动查重 worker task + visual_similarity/match_count 字段 #1661 (#1679) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-04 01:28:35 +08:00
xiaoxia	4725d94c7e	feat(api): 成品视频接口补全查重字段 duplicate_rate/visual_similarity/match_count #1660 (#1678) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-04 01:03:35 +08:00
xiaoxia	f10fd9cd5c	feat: 查重率百分比计算+跨项目查重 #1660 (#1675) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-04 00:11:51 +08:00
xiaoxia	159a62f9a5	Merge pull request 'feat: 跨视频片段避让 — 生成前注入已用区间 #1670' (#1671) from feat/cross-video-avoidance-1670 into develop	2026-09-03 22:42:03 +08:00
saas-backend-agent	af4dd31dd1	feat: 跨视频片段避让 — 生成前注入已用区间 #1670 ... - Repository: list_used_segments_by_user() JOIN edit_plans 查用户最近 已完成 plan 的已渲染 clips，聚合为 {asset_id: [(start, end), ...]} - Domain: distribute_assets / _distribute_* 子函数新增 external_used_segments 参数，深拷贝注入 used_segments，让 _resolve_start_time 自动避让 - Service: _distribute_assets 新增 user_id 参数，预览和正式生成都查询 已用区间；查询失败时不阻塞，回退纯随机 - 12 个单元测试覆盖 Repository/Domain/Service 三层	2026-09-03 22:18:06 +08:00
saas-backend-agent	cbca0c3584	feat: 分片指纹存储改造 + 存量指纹重建脚本 #1657 ... ## 改动 ### 1. 新建 video_fingerprint_chunks 表（Migration 063） - 按时间分片存储 pHash + color_histogram - 索引：video_id, project_id, user_id ### 2. 新增 VideoFingerprintChunkModel - packages/adapters/sqlalchemy_impl/models.py ### 3. 改造 dedup.py 指纹计算 - compute_fingerprint() 改为按时间分片抽帧 - 短视频（≤60s）：每 2s 一片 - 长视频（>60s）：每 5s 一片 - VideoFingerprint 新增 chunks 字段（list of FingerprintChunk） - 向后兼容：keyframe_phashes/color_histograms 保留 - to_chunk_models() 方法转换为 SQLAlchemy Model - check_duplicate() 优先从分片表读取，回退到 JSON 字段 - check_duplicate_task() 写入分片表 ### 4. 改造 dedup_helpers.py - create_video_record_and_dedup() 同步写入分片表 ### 5. 存量指纹重建脚本 - apps/api/scripts/rebuild_fingerprint_chunks.py - 支持 --dry-run 和 --batch-size - 幂等：已有分片数据的视频跳过 ### 6. 单元测试（11 个） - 分片策略：60s→30片，120s→24片 - to_chunk_models() 输出正确 - _save_fingerprint_chunks 幂等性 - to_dict() 向后兼容 Closes #1657	2026-09-03 20:41:11 +08:00
xiaoxia	ec45d71d2c	fix: 上传素材后视频库立即显示（创建 PROCESSING 状态 Asset） (#1644) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-03 14:56:35 +08:00
xiaoxia	a633b64d4f	feat(migrations): 对齐 staging 数据库结构与生产 (#1627) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-02 15:30:38 +08:00
CI Bot	87cca302f4	style: auto-format with black + isort + prettier [skip ci-format-check]	2026-08-31 13:26:58 +00:00
xiaoxia	6e76b45d34	feat: 统一模板 segments 数据源为 template_clip_configs ... - list_segments/list_by_user 优先读 clip_configs，回退 template_segments - create_segments 写入 clip_configs，material_type 存 config JSON - copy_template 复用 create_segments，使用 created.id - delete 复用 delete_segments_by_template 清理两张表 - migration 060: 方言感知(postgresql/mysql)一次性迁移历史数据 - 11 个新测试 + 120 个现有测试全部通过 Closes #1579	2026-08-31 19:58:51 +08:00
xiaoxia	afe78fb25f	feat: 成片 duplicate_rate 百分比 + 素材高频使用自动排除 (#1573) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-31 16:56:52 +08:00
xiaoxia	61295b9c25	feat(tts): 正式合成支持克隆音色 + 保存到配音库改写 assets 素材体系 + 克隆接口支持 asset_id (#1556) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-30 18:46:06 +08:00
xiaoxia	c873bb635f	refactor: 统一渲染链路，预览即所得（-3370行） (#1479) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-24 14:16:00 +08:00
agent	06f68230af	fix(edit-flow): 补全 title_config 数据链路，修复编辑流程断裂 ... 1. Schema: CreateGenerationTaskRequest 增加 title_config(dict|None=None) 2. DB: generation_tasks 新增 title_config JSON 列 (alembic 057) 3. Domain/ORM/Repo/UseCase 全链路透传 title_config 4. API 创建任务成功后，merge 回写 EditPlan.config (generation_task_id + title_config)，失败不影响主流程 5. Worker 优先使用 title_config 构建标题图层，custom_title 兜底 6. GenerationTaskResponse 返回 title_config 7. 旧路由 /generate 和 /generation-status 标记 DEPRECATED 所有新字段默认 None/{}，不传时行为与现在完全一致。	2026-08-23 13:12:40 +08:00
xiaoxia	5a5c653d2c	feat(cleanup): pending 任务自动清理，防止队列占满 (#1463)	2026-08-23 12:55:39 +08:00
xiaoxia	3c800d3f3f	fix(clips): 全面修复 Clips API 响应结构 — 替换 PR #1403 (#1404)	2026-08-17 18:18:48 +08:00
CI Bot	7d6c0cc67e	fix: cover.py step3 改用 user+template 查找预览任务；删除 generation.py 冗余 rendered_url ... P0 修复：预览任务创建时 plan_id 尚未存在，source_edit_plan_id 始终为空， 导致封面生成第三步查找永远匹配不到。改为按 user_id + template_id + is_preview + status=completed 查找最近预览任务。 技术债：generation.py 复用预览产物分支删除冗余 rendered_url 写入， 统一只写 rendered_storage_key。 新增 repository 方法：list_latest_completed_preview(user_id, template_id)	2026-08-12 00:07:06 +08:00
CI Bot	e09fdda74c	fix: 确认生成兜底增强 — project_id 为空时通过 user_id 查找素材 ... 根因：模板编辑器直接创建的草稿 plan 没有 project_id 和 config.asset_ids， 导致 _auto_fallback_auto_material_mode 跳过素材分配， can_generate 报 "没有可渲染的就绪片段"。 修复： - asset_repository 新增 find_ready_videos_by_user 方法 - _auto_fallback_auto_material_mode 增加策略2：project_id 为空时 通过 uploaded_by_user_id 查找用户上传的就绪视频 - generation.py 传递 current_user.user.id 给兜底函数	2026-08-10 20:19:12 +08:00
xiaoxia	153b38a62f	feat: 封面模板 CRUD API (#1323) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-09 18:26:00 +08:00
xiaoxia	7d4e1b1b2f	fix: 确认生成 API 改为复用 worker.generate_video 渲染路径（适配 develop 分支） ... 从 main 分支 PR #1308 手动适配到 develop 分支，保留 develop 现有功能： Schema 层： - 新增 ConfirmGenerationRequest schema - CreateGenerationTaskRequest 增加 6 个新字段（is_preview, source_task_id, output_width, output_height, cover_url, custom_title） - GenerationTaskResponse 增加对应字段 Domain 层： - GenerationTask 实体增加 source_task_id, output_width, output_height, cover_url, custom_title 字段 - create() 工厂方法增加对应参数 Application 层： - CreateGenerationTaskCommand 增加对应字段 - UseCase 执行时传递新字段 DB 层： - GenerationTaskModel 增加 5 个新列（is_preview 已存在于 develop） - 仓储 _to_domain/create/update 映射更新 API 路由： - 新增 POST /tasks/{task_id}/confirm 端点 - 使用 safe_enqueue_generation_task 适配 develop 任务入队机制 - 更新 _to_generation_task_response 和 retry 端点 Worker 层： - _load_task_info 返回新字段 - generate_video 支持动态分辨率（output_width/output_height 覆盖默认分辨率） Alembic 迁移 054： - generation_tasks 表增加 source_task_id, output_width, output_height, cover_url, custom_title 列 单元测试： - tests/unit/test_confirm_generation.py（7 个测试用例全部通过） - 适配 develop 的 safe_enqueue_generation_task 入队机制	2026-08-08 21:44:30 +08:00
xiaoxia	3b6b32d561	feat(#1197): Phase 1 预览生成接口（单版本预览） ... 实现预览生成功能的后端 Phase 1：单版本预览接口（创建 + 查询）。 变更内容： - 领域模型 GenerationTask 新增 is_preview: bool = False 字段 - SQLAlchemy GenerationTaskModel 新增 is_preview 列（带索引） - 新增 alembic migration 053_generation_task_is_preview - 仓储层 _to_domain/create/update 同步 is_preview 字段（getattr 兼容旧数据） - CreateGenerationTaskCommand/UseCase 新增 is_preview 参数 - Schema 新增 CreatePreviewGenerationTaskRequest 和 PreviewGenerationTaskResponse - 新增 /api/v1/generation/preview 路由（POST 创建 + GET 查询） - Worker generate_video 检测 is_preview=True 时强制 854x480 + 1M 低码率 - 新增 29 个单元测试，全部通过 验收： - ✅ 所有新增文件写完，所有修改点完成 - ✅ 单元测试 29 个，全部通过 - ✅ 现有 generation 相关 174 个测试全部通过 - ✅ 代码通过 ruff + black 检查 - ✅ 在 feat/preview-generation-1197 分支上	2026-08-01 17:08:38 +08:00
xiaoxia	750444c8bb	fix(ci): 修复测试收集错误 — 模块名冲突 + SQLite 兼容 PG 特定 SQL (#1075) ... - 修复test_url_security.py等模块名冲突导致的测试收集错误 - SQLite兼容PG特定SQL语法 - 调整pytest.ini配置 Squash merged from fix/ci-test-collection-errors	2026-07-28 14:34:04 +08:00
CI Bot	a9896e1507	feat(#642): 一键生成支持自定义BGM ... - 领域模型 GenerationTask 新增 bgm_config 字段 - ORM/Repository/UseCase/API 全链路透传 bgm_config - Worker 端新增 BGM 配置合并逻辑（用户配置 > 模板配置） - enabled 字段特殊处理：用户显式传才覆盖模板状态 - 合并逻辑抽至 packages/domain/bgm_utils.py 纯函数 - 14个BGM合并单测 + 2个领域单测，全量4246通过	2026-07-23 18:25:06 +08:00
xiaoxia	b701182f6b	fix(api): 修复验证码repository datetime时区问题 - 数据库naive转aware ... SQLAlchemy 从数据库读出的 DateTime 是 naive（不带时区）， 但领域模型 VerificationCode 用的是 aware datetime（带 timezone.utc）， 直接比较会报 "can't compare offset-naive and offset-aware datetimes"。 修复：_to_entity 时给所有 datetime 字段补 timezone.utc。 影响：send-verification-code 限流检查、bind-contact 验证码校验（is_expired）	2026-07-23 13:20:59 +08:00
xiaoxia	9d3a8852e5	feat(#632): 一键生成输出分辨率可配置 (#749) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-23 10:27:37 +08:00
xiaoxia	833c604fd7	feat(video-share): 视频分享后端 - 密码保护/有效期/浏览下载计数 (#737)	2026-07-23 09:38:21 +08:00
xiaoxia	269723ced2	feat(#558): 微信登录 + 绑定手机号邮箱完整后端实现 (#670) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-21 09:21:01 +08:00
xiaoxia	981d965d89	feat(phase3): 下线/edit-plans/*旧路由 + 清理废弃代码 + 数据库冗余字段清理 (#657) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-20 23:48:36 +08:00
xiaoxia	419cc3fb6a	feat(phase2): 模板发布版本化 + 回滚能力 (#646) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-20 18:15:00 +08:00
xiaoxia	2f64fea7f0	fix(P0): 视频标题全链路打通 (#585) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-19 14:32:25 +08:00
xiaoxia	55835c609f	fix(P1): 成片库越权漏洞修复-全链路加user_id校验 (#573) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-19 12:01:14 +08:00
xiaoxia	fca186533b	feat(P1): 成片库按用户维度改造，修复一键生成查不到+越权漏洞 (#563) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-19 10:28:33 +08:00
xiaoxia	9afd4060d1	feat(P1): 素材列表支持按类型过滤 - 视频库/配音库分类 (#561) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-19 07:40:37 +08:00
xiaoxia	48c8d1fe3e	fix(P0+P1): 孤儿任务清理 + 时间时区统一 (#535) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-18 19:58:08 +08:00
xiaoxia	12c48e4fd1	fix(P1): 素材列表status默认过滤 + page/page_size分页支持 (#532) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-18 18:47:38 +08:00
xiaoxia	40cb1ab8f3	fix(P0): 成片库download_url签名修复 + 删除接口补齐 (#531) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-18 18:23:01 +08:00
xiaoxia	e724225f8a	fix: 素材列表默认按created_at倒序，新上传素材在最前面 (#505) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-18 15:05:08 +08:00
CI Bot	8e2e352cfe	fix(worker): 素材下载改用storage_key字段，修复file_url为URL导致下载无效文件 ... - AssetModel新增storage_key字段（OSS存储键） - render_adapter _download_assets改用a.storage_key - render_adapter BGM下载改用storage_key - edit_plan_generation legacy路径同步修复 - generation.py BGM下载同步修复 - asset_repository映射同步更新storage_key字段 - 单元测试同步更新	2026-07-17 18:04:51 +08:00
xiaoxia	09d2b12ea8	feat(ci): P1-1 Phase2 后端启用F401+F841并修复存量 (#470) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-17 14:06:50 +08:00
xiaoxia	c99f3f75ad	fix: 硬切场景改用concat filter替代xfade，提升多素材性能与稳定性 (#350)	2026-07-15 16:16:54 +08:00
CI Bot	73826d2f81	fix: EditPlan增加result_count字段，渲染成功后回写=1 ... - domain层EditPlan新增result_count字段（int，默认0） - ORM模型EditPlanModel新增result_count列（Integer，默认0） - repository层create/update/_model_to_entity三处同步 - 渲染成功回调与total_duration一起回写result_count=1	2026-07-15 13:28:25 +08:00
xiaoxia	2081c72be6	feat: 视频调速引擎（快进/慢放） (#294)	2026-07-14 11:36:24 +08:00
xiaoxia	ff38ee0f2b	feat: 转场特效引擎 — 14种转场预设 + TransitionEngine抽象 + 降级策略 ... Squash merge PR #293	2026-07-14 11:03:56 +08:00
xiaoxia	94aead4342	feat: 任务中心升级（失败重试/错误追踪/列表筛选） (#289)	2026-07-14 09:55:53 +08:00
xiaoxia	295d7f0765	feat: 素材智能视图筛选 + 标题使用次数闭环 (#282)	2026-07-14 09:53:07 +08:00