29 Commits

Author	SHA1	Message	Date
saas-backend-bot	df99305dd6	feat(worker): celery 队列隔离 + 孤儿任务消息作废 (#1714) ... 问题：素材转码与视频生成共用 celery 默认队列、worker 单进程消费， 20+ 转码积压会把用户生成任务堵 40 分钟以上；孤儿清理把任务标 failed 后 Redis 队列消息未作废，消息被重投导致 failed→running 非法转换， worker 打印 ERROR 后继续产出半成品。 队列隔离： - 新增 packages/shared/celery_queues.py：generation/transcode/celery 三队列与 task_routes（generate_video→generation；ingest_asset/ classify_asset/duplication→transcode），apply_queue_settings() - worker 入口改双进程：generation worker 独占队列并内嵌 beat （prefetch=1, GENERATION_CONCURRENCY 默认 2），transcode worker 消费 transcode,celery（并发=总-2，最小 1），任一退出则整体终止 - compose/部署脚本/ps1 同步新增 GENERATION_CONCURRENCY 与健康检查 消息作废： - 新增 packages/shared/celery_orphan_guard.py：终态守卫 ensure_task_claimable、Redis 队列消息物理清理（JSON 信封解析， 按业务 id + celery headers.id 双匹配，未命中 rpush 保序）、 revoke_and_purge（control.revoke + 物理清队列双保险） - 入队点（生成/上传/分片/重试）send_task 后持久化 celery_task_id 到 generation_tasks/ingest_jobs（新列，067 迁移，失败仅 warning） - generate_video/ingest_asset 执行前校验 DB 状态：终态直接 discarded 不进业务逻辑；mark_processing 返回 False（非法转换）安全中止 - 孤儿/超时清理标 failed 时同时 revoke + 清队列消息 - pending 超时阈值 15→45 分钟，与 running 孤儿(20min)区分 测试：新增 22 个单测（路由表/真实 Redis 消息清理/终态守卫/ 非法转换中止/标 failed 后消息不重投/入队持久化），全量 14301 passed；067 迁移隔离 DDL 验证 upgrade/downgrade 通过。	2026-09-05 19:07:47 +08:00
xiaoxia	7844b65afe	feat: create端点兜底复用预览产物 + confirm同步标题 (#1486) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-24 23:31:00 +08:00
xiaoxia	c873bb635f	refactor: 统一渲染链路，预览即所得（-3370行） (#1479) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-24 14:16:00 +08:00
agent	06f68230af	fix(edit-flow): 补全 title_config 数据链路，修复编辑流程断裂 ... 1. Schema: CreateGenerationTaskRequest 增加 title_config(dict|None=None) 2. DB: generation_tasks 新增 title_config JSON 列 (alembic 057) 3. Domain/ORM/Repo/UseCase 全链路透传 title_config 4. API 创建任务成功后，merge 回写 EditPlan.config (generation_task_id + title_config)，失败不影响主流程 5. Worker 优先使用 title_config 构建标题图层，custom_title 兜底 6. GenerationTaskResponse 返回 title_config 7. 旧路由 /generate 和 /generation-status 标记 DEPRECATED 所有新字段默认 None/{}，不传时行为与现在完全一致。	2026-08-23 13:12:40 +08:00
xiaoxia	161c1a61b6	fix: HEVC 转码条件解耦 + 缩略图函数补全 + extra_meta 字段 (#1452) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-08-20 21:41:01 +08:00
CI Bot	29994ffcbc	feat: 统一预览与确认生成渲染路径 — 预览=正式品质+确认复用 ... ## 渲染管线统一 - UnifiedRenderService: 移除 is_preview 参数，统一 CRF 23 + medium preset - RenderAdapter: 移除 is_preview 参数，统一执行校验和缩略图生成 - Worker generation.py: 移除 480p+1M 码率覆盖逻辑 - generation_preview.py: 删除 PREVIEW_RESOLUTION 常量和 _calc_preview_resolution() ## 确认生成复用预览产物 - Domain: 新增 GenerationTask.mark_confirmed() 方法 - confirm_generation: 预览已完成时直接复用产物（秒出），无需重新渲染 - Editor generate: 检查 plan 关联的预览任务，plan未修改时复用产物 - Schema: CreatePreviewGenerationTaskRequest 新增 source_edit_plan_id 字段 ## 测试更新 - test_1280_preview_speedup: 重写为验证统一品质参数 - test_confirm_generation: 重写为验证复用逻辑 ## 交付标准 - 预览渲染质量与确认生成一致（1080p, CRF 23, medium） - 预览后确认生成直接复用产物（秒出） - Worker 端无任何 is_preview 低质量渲染代码残留	2026-08-10 22:32:35 +08:00
xiaoxia	7d4e1b1b2f	fix: 确认生成 API 改为复用 worker.generate_video 渲染路径（适配 develop 分支） ... 从 main 分支 PR #1308 手动适配到 develop 分支，保留 develop 现有功能： Schema 层： - 新增 ConfirmGenerationRequest schema - CreateGenerationTaskRequest 增加 6 个新字段（is_preview, source_task_id, output_width, output_height, cover_url, custom_title） - GenerationTaskResponse 增加对应字段 Domain 层： - GenerationTask 实体增加 source_task_id, output_width, output_height, cover_url, custom_title 字段 - create() 工厂方法增加对应参数 Application 层： - CreateGenerationTaskCommand 增加对应字段 - UseCase 执行时传递新字段 DB 层： - GenerationTaskModel 增加 5 个新列（is_preview 已存在于 develop） - 仓储 _to_domain/create/update 映射更新 API 路由： - 新增 POST /tasks/{task_id}/confirm 端点 - 使用 safe_enqueue_generation_task 适配 develop 任务入队机制 - 更新 _to_generation_task_response 和 retry 端点 Worker 层： - _load_task_info 返回新字段 - generate_video 支持动态分辨率（output_width/output_height 覆盖默认分辨率） Alembic 迁移 054： - generation_tasks 表增加 source_task_id, output_width, output_height, cover_url, custom_title 列 单元测试： - tests/unit/test_confirm_generation.py（7 个测试用例全部通过） - 适配 develop 的 safe_enqueue_generation_task 入队机制	2026-08-08 21:44:30 +08:00
xiaoxia	3b6b32d561	feat(#1197): Phase 1 预览生成接口（单版本预览） ... 实现预览生成功能的后端 Phase 1：单版本预览接口（创建 + 查询）。 变更内容： - 领域模型 GenerationTask 新增 is_preview: bool = False 字段 - SQLAlchemy GenerationTaskModel 新增 is_preview 列（带索引） - 新增 alembic migration 053_generation_task_is_preview - 仓储层 _to_domain/create/update 同步 is_preview 字段（getattr 兼容旧数据） - CreateGenerationTaskCommand/UseCase 新增 is_preview 参数 - Schema 新增 CreatePreviewGenerationTaskRequest 和 PreviewGenerationTaskResponse - 新增 /api/v1/generation/preview 路由（POST 创建 + GET 查询） - Worker generate_video 检测 is_preview=True 时强制 854x480 + 1M 低码率 - 新增 29 个单元测试，全部通过 验收： - ✅ 所有新增文件写完，所有修改点完成 - ✅ 单元测试 29 个，全部通过 - ✅ 现有 generation 相关 174 个测试全部通过 - ✅ 代码通过 ruff + black 检查 - ✅ 在 feat/preview-generation-1197 分支上	2026-08-01 17:08:38 +08:00
xiaoxia	be0b4f4dac	fix: 状态枚举添加_missing_兼容历史脏数据，修复Staging模板生成接口500 #809 (#835)	2026-07-25 10:04:00 +08:00
CI Bot	a9896e1507	feat(#642): 一键生成支持自定义BGM ... - 领域模型 GenerationTask 新增 bgm_config 字段 - ORM/Repository/UseCase/API 全链路透传 bgm_config - Worker 端新增 BGM 配置合并逻辑（用户配置 > 模板配置） - enabled 字段特殊处理：用户显式传才覆盖模板状态 - 合并逻辑抽至 packages/domain/bgm_utils.py 纯函数 - 14个BGM合并单测 + 2个领域单测，全量4246通过	2026-07-23 18:25:06 +08:00
xiaoxia	9d3a8852e5	feat(#632): 一键生成输出分辨率可配置 (#749) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-23 10:27:37 +08:00
xiaoxia	2f64fea7f0	fix(P0): 视频标题全链路打通 (#585) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-19 14:32:25 +08:00
xiaoxia	48c8d1fe3e	fix(P0+P1): 孤儿任务清理 + 时间时区统一 (#535) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-07-18 19:58:08 +08:00
xiaoxia	531aacb57e	fix(code-quality): 第二批 - B904 raise-without-from 批量修复 (71个) (#353)	2026-07-15 11:51:45 +08:00
xiaoxia	94aead4342	feat: 任务中心升级（失败重试/错误追踪/列表筛选） (#289)	2026-07-14 09:55:53 +08:00
xiaoxia	b66de19be8	feat: 一键生成链路日志最小集 (#205)	2026-07-10 23:57:38 +08:00
xiaoxia	5ec71f5e1e	fix(generation): 修复生成任务状态机缺失导致状态永不更新的问题 (#198)	2026-07-09 15:42:43 +08:00
灵应	9f0c064f2a	feat: 任务4 视频查重 — 历史+批次双重去重 ... - Alembic 033: generation_tasks 加 batch_id 列+索引 - Route: count>1 时生成共享 batch_id - Repository: list_by_batch() 批次内查询 - dedup.py: check_batch_duplicate() 批次内查重 - Worker: 生成视频后创建 GeneratedVideo 记录 + 双重查重 - 单元测试: 6 个批次查重测试用例	2026-07-07 15:26:41 +08:00
灵应	1ea8fd3989	feat: P2 素材库自动匹配 - 支持 all/random/smart 三种素材选取模式 ... - Schema: 新增 asset_select_mode + asset_select_count 字段 - Domain: GenerationTask 新增 asset_select_mode 字段 - Application: Command/UseCase 透传 asset_select_mode - Route: _select_assets_from_library() 辅助函数 + 创建任务集成 - SQLAlchemy: Model/Repository 映射 asset_select_mode - Alembic: 032 号迁移 - Worker: _download_library_assets() 支持 asset_ids 过滤 - 单测: 15 个测试覆盖三种模式 + 边界情况	2026-07-07 15:13:05 +08:00
灵应	356df4663e	fix: 修复素材库诊断/缩略图/视频URL + 剪辑计划错误处理 ... Task #105: 修复剪辑计划/模板页面报服务器繁忙 - templates.py: list_templates/get_template/list_categories 加 try/except - templates.py: 新增 POST /{template_id}/toggle-favorite 兼容端点 - edit_plans.py: list_plans 加 try/except，ai_tasks 加 ImportError 守卫 Task #106: 修复素材库诊断按钮 + 缩略图/视频URL - asset_diagnosis.py: get_project_asset_diagnosis 加 try/except - assets.py: 注入 storage_service，生成签名 file_url - asset.py schema: 新增 file_url 字段 - 视频素材 thumbnail_url 为空时复用 file_url 作为封面 其他: - edit_plans/generation_tasks 支持 source_edit_plan_id - Alembic 迁移 022: 两表加 source_edit_plan_id 字段	2026-07-04 21:46:32 +08:00
Deploy Bot	3fe48b37d4	fix: replace StrEnum with Python 3.10 compatible implementation	2026-06-30 19:03:38 +08:00
Audit Bot	f9e8d6efdc	fix: 修复 3 个 P0 端点 500 错误的真正根因 ... Bug 1 — GET /api/v1/assets → 500: asset_repository 所有方法为 async def，但调用方为同步上下文， 未 await 导致返回 coroutine 对象而非实际数据。 修复：全部改为 def（同步），与 SQLAlchemy 同步 Session 一致。 Bug 2 — POST /api/v1/generation/tasks → 500: GenerationTaskModel 仍定义 edit_plan_id 列，但迁移 011 已从数据库 删除该列，INSERT 时报 column does not exist。 修复：从 model、repository、domain entity、application use case、 所有路由中彻底移除 edit_plan_id 引用。 Bug 3 — GET /api/v1/dashboard/overview → 500: generation_task_repository._to_domain() 访问 model.edit_plan_id， 该列已被迁移 011 删除，触发 AttributeError。 修复：同上，移除 edit_plan_id 引用。 涉及文件： - packages/adapters/sqlalchemy_impl/asset_repository.py (async→sync) - packages/ports/asset_repository.py (async→sync 接口) - packages/adapters/sqlalchemy_impl/models.py (移除 edit_plan_id 列) - packages/adapters/sqlalchemy_impl/generation_task_repository.py - packages/domain/generation_task.py - packages/application/generation_tasks.py - apps/api/app/api/routes/generation_tasks.py - apps/api/app/api/routes/task_center.py	2026-06-29 20:10:51 +08:00
Audit Bot	ea9e536740	feat: 扩展生成任务API支持模板模式 ... 方案A: 后端扩展3处API改动，支持前端模板中心化模型。 1. POST /api/v1/generation/tasks — project_id改为可选，新增template_id/asset_ids/title_ids/voice_ids 2. GET /api/v1/generation/tasks + GET /api/v1/tasks — 新增用户级列表（跨project） 3. POST /api/v1/tasks/{task_id}/retry + POST /api/v1/generation/tasks/{task_id}/retry — 简化重试 改动涉及： - Domain: GenerationTask新增6个字段，放宽create()校验 - Application: CreateGenerationTaskCommand新增字段 - Ports: GenerationTaskRepository新增list_by_user() - Adapter: SQLAlchemy模型+仓储实现新字段和list_by_user - Schema: 双模式校验（project模式/模板模式） - Routes: generation_tasks + task_center双路由注册 - Migration: 015_add_generation_task_extensions 向后兼容：所有旧端点和参数不变。	2026-06-29 17:05:53 +08:00
API文档维护Agent	a43ddb4b63	feat: Phase 1 - 核心重构（去Project层/标题库API/配音库API/清理废弃代码） ... ## 主要变更 ### 1. 清理废弃代码（18个文件删除） - 删除 TaskModel/MilestoneModel/TaskIssueModel 及相关文件 - 删除 ProjectTitleModel/EditPlanModel/EditPlanClipModel 及相关文件 - 清理 domain/ports/adapters/application/api 各层引用 - 从 GenerationTaskModel 移除 edit_plan_id 字段 ### 2. 新建标题库 API（/api/v1/titles） - Domain: TitleLibraryItem 数据类 - Ports: TitleLibraryRepository 接口 - Adapters: SQLAlchemy 实现（软删除） - Application: CRUD Use Cases + 配额检查（max_titles: free=50, basic=500, premium=500） - API: GET/POST/PUT/DELETE 端点 - Schema: Pydantic 请求/响应模型 ### 3. 新建配音库 API（/api/v1/voices） - Domain: VoiceLibraryItem 数据类 - Ports: VoiceLibraryRepository 接口 - Adapters: SQLAlchemy 实现（软删除） - Application: CRUD Use Cases + 配额检查（max_voiceovers: free=10, basic=100, premium=100） - API: GET/POST/PUT/DELETE 端点 - Schema: Pydantic 请求/响应模型 ### 4. 去掉 Project 层依赖 - 修复 authenticated_user.id → authenticated_user.user.id bug - asset_libraries.py: project_id 改为可选查询参数 - generated_videos.py: project_id 改为可选查询参数 - 无 project_id 时通过 find_accessible_projects 获取用户可访问的所有项目 ### 5. 数据库迁移 - 创建 011_phase1_core_refactor.py - 删除 6 个废弃表：tasks, milestones, task_issues, project_titles, edit_plans, edit_plan_clips - 从 generation_tasks 表删除 edit_plan_id 列 ### 6. 其他改进 - 迁移 EditingMode 到独立模块 packages/domain/editing_mode.py - 注册 titles_router 和 voices_router - 添加 get_title_library_repository 和 get_voice_library_repository 依赖 - 更新 domain/ports __init__.py 导出新实体和仓储接口 ## 技术细节 - 遵循六边形架构模式 - 配额检查通过 QuotaRegistry 实现 - 软删除：标题库用 is_active=False，配音库用 status='deleted' - 配音库支持可选的 project_id 关联 ## 破坏性变更 - 删除 6 个废弃表（需先备份数据） - 删除 /api/v1/edit-plans, /api/v1/project-titles, /api/v1/project-management 端点 - generation_tasks API 不再包含 edit_plan_id 字段	2026-06-28 15:02:10 +08:00
API文档维护Agent	e3fb518ab2	refactor: remove all workspace_id references from codebase ... - Remove workspace_id from Pydantic models in project_management routes - Remove workspace_id from SQLAlchemy and SQLite project management repos - Remove workspace_id from worker tasks (storage keys, entity creation) - Remove workspace_id from video dedup and title usage modules - Remove workspace_id from generation and ingest worker tasks - Clean workspace_id from all test files and scripts - Remove workspace-specific test files (list_workspaces, workspace repos) Task: #14 workspace_id 残留清理	2026-06-27 22:52:09 +08:00
CI Bot	4a8cbd5021	fix: correct dataclass field ordering and create() param order in generated_video and generation_task ... - Move workspace_id after required fields in both dataclass and create() - Fix indentation in create() method body - Add missing timezone import in generation_task.py	2026-06-27 09:44:24 +08:00
CI Bot	38c66a9c68	fix: add workspace_id compatibility for removed workspace concept	2026-06-27 08:43:02 +08:00
Xiaoxia AI	0f59b412bc	feat(plans): add edit plan preview workflow	2026-06-24 10:10:25 +08:00
Xiaoxia AI	758c2c7e13	feat(phase7): align asset flow and scaffold generation pipeline	2026-06-18 19:59:37 +08:00