78 Commits

Author	SHA1	Message	Date
灵应	9f0c064f2a	feat: 任务4 视频查重 — 历史+批次双重去重 ... - Alembic 033: generation_tasks 加 batch_id 列+索引 - Route: count>1 时生成共享 batch_id - Repository: list_by_batch() 批次内查询 - dedup.py: check_batch_duplicate() 批次内查重 - Worker: 生成视频后创建 GeneratedVideo 记录 + 双重查重 - 单元测试: 6 个批次查重测试用例	2026-07-07 15:26:41 +08:00
灵应	1ea8fd3989	feat: P2 素材库自动匹配 - 支持 all/random/smart 三种素材选取模式 ... - Schema: 新增 asset_select_mode + asset_select_count 字段 - Domain: GenerationTask 新增 asset_select_mode 字段 - Application: Command/UseCase 透传 asset_select_mode - Route: _select_assets_from_library() 辅助函数 + 创建任务集成 - SQLAlchemy: Model/Repository 映射 asset_select_mode - Alembic: 032 号迁移 - Worker: _download_library_assets() 支持 asset_ids 过滤 - 单测: 15 个测试覆盖三种模式 + 边界情况	2026-07-07 15:13:05 +08:00
灵应	4fee87c5e8	feat: 素材重复上传检测 + 批量生成视频 ... 任务1: 素材重复上传检测 - 上传接口支持 file_hash 参数，通过 MD5+素材库ID 去重 - 命中去重直接返回已有 asset_id，不重复存 OSS - file_hash 透传: API → IngestJob → Asset 全链路 - 三条上传路径（表单/直传/分片）均支持去重 - Alembic 031: assets + ingest_jobs 加 file_hash 列+索引 - 6 个单元测试覆盖去重命中/未命中/空hash/透传 任务3: 批量生成视频 - POST /generations 支持 count 参数，一次创建多条生成任务 - 每条任务独立状态跟踪，响应返回 task_ids 列表 Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>	2026-07-07 14:57:37 +08:00
灵应	d6ab413dcd	feat: P1 长文本分段合成 ... - 新增 text_splitter.py: 长文本智能分段（句子边界 + 短段合并） - 新增 audio_merger.py: FFmpeg concat 音频合并器 - workflow.py: 分段合成完整流程（同步合并 / 异步轮询 / 失败处理） - tts_synthesis.py: 新增 process_tts_segment_synthesis Celery 任务 - tts.py: 路由层自动识别分段任务并分发到对应 Celery task - 23 个单元测试全部通过，P0 回归测试无退化	2026-07-07 12:56:52 +08:00
灵应	48d7e01498	feat(edit-plans): AI推荐片段方案 + 封面生成接口 + config JSON schema 标准化 ... 新增接口: - POST /api/v1/edit-plans/{plan_id}/ai-recommend — AI分析素材推荐片段编排 - POST /api/v1/edit-plans/{plan_id}/generate-cover — AI智能选帧/生成封面 config 标准化: - packages/domain/config_schemas.py: cover/title/subtitle/bgm 完整 schema 定义 - normalize_plan_config() / normalize_template_config() 自动填充默认值 - edit_plans create/update 和 edit_templates create/update 均已接入标准化 AI任务: - apps/worker/worker_app/tasks/ai_tasks.py: stub实现，后续替换为真实AI服务 - Celery lazy import 已注册 run_ai_recommend / run_generate_cover 测试: 33个新用例覆盖 schema验证、AI任务、API端点、config标准化	2026-07-04 20:06:30 +08:00
灵应	9519216df4	fix: 全面修复CI Validate阶段所有检查失败项 ... - 修复 video_compose_service.py StrEnum Python 3.10 兼容性（添加回退实现） - 修复 test_dedup_engine.py celery mock 污染导致测试收集失败 - 修复 edit_plans.py update_plan 路由：不存在返回 404 而非 400 - 修复 edit_plans.py generate_plan/get_generation_status 路由：不存在返回 404 - 修复 edit_templates.py update_template 路由：不存在返回 404 而非 400 - 修复 upload.py 添加 image/svg+xml 到允许的 MIME 类型 - 修复 test_edit_plans_api.py StubEditPlanRepository 添加 delete_by_plan 方法 CI Validate 8 项检查全部通过：compileall/black/isort/flake8/bandit/bash-n/alembic/pytest 831 单元测试全部通过，0 失败	2026-07-03 21:06:05 +08:00
灵应	3dcba4c44c	fix: 修复Bandit安全扫描硬编码临时目录问题	2026-07-03 19:48:11 +08:00
灵应	e25fd86171	style: 后端代码isort import排序	2026-07-03 18:56:16 +08:00
灵应	8935196fcd	style: 后端代码black格式化	2026-07-03 18:49:54 +08:00
CI Test	d6b11ea1cd	fix: 清理全局 except:pass（22处）改为 logger.warning 记录异常	2026-07-03 09:38:57 +08:00
CI Test	464e13686e	fix: 修复 Image.open() 资源泄漏 ... - asset_analyzer.py _load_image_as_array 使用 with 语句确保文件句柄关闭	2026-07-03 08:36:39 +08:00
CI Test	58b7c876a5	fix(security): 移除遗留 tasks.py 消除 Celery 任务名冲突 ... - 删除 apps/worker/tasks.py（遗留文件，其依赖的 celery_app.py 已不存在） - 该文件中的 worker.generate_video 与 worker_app/tasks/generation.py 冲突 - 活跃版本在 worker_app/tasks/generation.py，由当前 celery_app 加载	2026-07-03 08:33:42 +08:00
CI Test	abfc598d3f	refactor: 代码精简优化 - 移除无用代码和重复定义 ... 1. 删除无用文件: - apps/api/app/core/database.py (未被引用的死代码) - requirements-quality.txt (与 requirements-dev.txt 完全重复) - fix_script.py, fix_tracker_encoding.py (一次性修复脚本) - init_tracker_phase4.py, init_tracker_simple.py, update_tracker.py (SQLite迁移脚本) 2. 清理死代码: - apps/api/app/db.py: 移除未使用的 get_db() 函数和 sqlalchemy.orm 导入 - 11个路由/中间件文件: 移除未使用的 import (os, datetime, BaseModel, Session, List 等) 3. 消除重复定义: - apps/worker/video_processing/video_compose_service.py: 移除重复的 EditingMode 枚举 - 改为从 packages.domain.editing_mode 导入统一的 EditingMode 影响: 无功能变更，仅移除未使用的代码	2026-07-03 00:44:29 +08:00
灵应	e539105256	fix: 3.09 审计问题修复 — P1-1 TTS Celery 执行器 + P2-1~P2-4 ... P1-1 (阻塞性): TTS 合成完整异步链路 - CosyVoiceService 新增 submit_synthesize_task() + poll_synthesize_task() - 新建 TTSWorkflowService 编排层 (packages/application/tts_job/workflow.py) - 新建 Celery 任务 process_tts_synthesis (apps/worker/worker_app/tasks/tts_synthesis.py) - 注册到 celery_app.conf.imports + tasks/__init__.py 懒加载 - TTS 路由 synthesize() 增加 CosyVoice 提交 + Celery 调度 P2-1: voice_clone.py 添加详细 Celery 重试策略注释 P2-2: 修复 voice_clone.py Session 泄漏 (session=None 安全模式) P2-3: ListVoiceLibraryUseCase 返回 (items, count) 元组，消除重复 count_by_user() P2-4: 新增 find_profile_ids_by_voice_ids() 批量方法，填充 voice_clone_profile_id 测试: 749 passed, 0 failed	2026-07-02 16:30:37 +08:00
灵应	796aeff499	fix: 修复 PR #169 代码审查发现的 4 个 P2 问题 ... P2-1: workflow.py start_clone() 将 mark_processing() 移到音频 URL 检查之后， 无 URL 时保持 pending 状态，避免永久卡在 processing P2-2: voice_clone.py Celery 任务改用 VoiceCloneWorkflowService 公开方法 (process_clone_result/process_clone_failure)，不再直接操作 profile P2-3: voice_clones.py 路由中 Celery .delay() 失败时调用 process_clone_failure() 标记 profile 为 failed（create + retry 两个路由） P2-4: 由 P2-2 修复自动解决 同步更新 test_voice_clone_workflow.py 测试用例适配 P2-1 行为变更 Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>	2026-07-02 14:37:37 +08:00
灵应	24ac12167c	feat(task-308): 音色克隆完整流程实现 ... - CosyVoiceService: 新增 submit_clone_task() 和 check_task_status() 非阻塞方法 - VoiceCloneWorkflowService: 编排层，处理 start_clone/process_result/process_failure/retry - Celery 任务 process_voice_clone: 异步轮询 CosyVoice 克隆结果 - API 路由: 创建后触发 Celery 异步任务，支持重试 - 57 个单元测试全部通过（workflow 14 + task 6 + cosyvoice 37）	2026-07-02 12:46:44 +08:00
CI Test	43366f290c	feat: 实现任务2.10 JobService — 异步任务管理 ... - 新增 Job 领域模型（状态机、JobType/JobStatus 枚举） - 新增 JobRepository 端口 + SQLAlchemy 实现 - 新增 10 个 Use Cases（CreateJob/Submit/Progress/Complete/Fail/Retry/Cancel/Get/List/Statistics） - 新增 JobService 服务层，集成 VideoComposeService - 新增 Pydantic schemas + RESTful API 路由 - 新增 Celery compose_video 任务（含进度追踪） - 新增数据库迁移 018（jobs 表） - 新增 44 个单元测试，全部通过 - 修复状态转换：允许 pending→success（快速完成场景）	2026-07-01 22:54:21 +08:00
xiaoxia	51f5a960f1	fix: 修复 PR #159 安全审计发现的 P0/P1 问题 ... - 添加 output_path 路径穿越校验 (P0) - 添加 asset_id 输入路径格式校验 (P1) - 添加 transition 参数白名单校验 (P1) - 新增 37 个安全测试用例	2026-07-01 21:30:09 +08:00
灵应	b41e0255ef	feat(phase8-task205): API 剪辑生成 — 渲染触发 + 进度查询 + Celery任务 + 单元测试 ... - POST /edit-plans/{id}/generate: 触发剪辑渲染生成 - 验证 editing 状态 + 片段存在 - pending 片段标记为 ready - 创建 GenerationTask 并调度 Celery 任务 - 计划状态流转为 rendering - GET /edit-plans/{id}/generation-status: 查询生成进度 - 返回计划状态、GenerationTask ID、各片段状态 - Celery 任务 worker.render_edit_plan: - 下载素材 → FFmpeg concat 拼接 → 上传 OSS - 更新 EditPlan/EditPlanClip/GenerationTask 状态 - 失败重试(max_retries=2, countdown=60s) - 16 个单元测试全部通过	2026-07-01 16:28:59 +08:00
灵应	ed7de72b0c	refactor(dedup): 优化查重算法 — XOR 汉明距离 + 简化判定逻辑 ... - hamming_distance: 替换 zfill+字符比较为 XOR bit 计数 (bin(h1^h2).count('1')) - check_duplicate: 移除直方图融合和 best_match，返回第一个匹配 - compute_phash: 补充详细中文算法注释（DCT 步骤说明） - 修复 similarity 精度：移除 round(x, 4) 保留完整浮点精度 所有 74 个测试通过（8 个 cv2 依赖跳过）。	2026-07-01 15:37:05 +08:00
灵应	ee8c60a143	perf(duplication): 查重模块代码优化 — 修复6个代码质量问题 ... 1. 修复 hamming_distance 不等长哈希处理（hex() 前导零丢失） 2. 集成颜色直方图到 check_duplicate（此前计算但未使用，浪费 CPU） 3. check_duplicate 改为返回最佳匹配而非首个匹配 4. 修复仓库删除顺序（先删片段再删记录，防止孤儿数据） 5. 域模型添加 can_retry()/reset_for_retry()，仅 failed 状态允许重试 6. 列表接口暴露 offset/limit 分页参数	2026-07-01 14:48:15 +08:00
Deploy Bot	3fe48b37d4	fix: replace StrEnum with Python 3.10 compatible implementation	2026-06-30 19:03:38 +08:00
Deploy Bot	c85b999404	fix: add missing _safe_parse_fps function definition in ingest.py	2026-06-30 19:00:09 +08:00
xiaoxia	3106a56536	style: apply black formatting to ingest.py (#134)	2026-06-30 18:43:43 +08:00
xiaoxia	8e924dc660	fix: correct _safe_parse_fps placement and format setup.ts (#133)	2026-06-30 18:40:02 +08:00
xiaoxia	fff644deac	fix: resolve bandit security issues and fix vitest configuration (#132)	2026-06-30 18:35:20 +08:00
xiaoxia	560856cf22	fix: resolve all flake8 errors and apply Prettier formatting (#131)	2026-06-30 18:26:53 +08:00
xiaoxia	1217d8cef0	style: apply isort formatting to pass CI validation (#129)	2026-06-30 18:17:44 +08:00
xiaoxia	52ff2f80ad	style: apply black formatting to pass CI validation (#126)	2026-06-30 17:23:08 +08:00
API文档维护Agent	9b016e3b2d	fix: 回退域对象 extra_meta → metadata（5文件16处） ... Asset 域对象属性名为 metadata，不是 extra_meta。 extra_meta 仅用于 SQLAlchemy model 层（对应 DB 列）。 修复文件： - packages/adapters/sqlalchemy_impl/asset_repository.py (L63, L88) - apps/api/app/api/routes/assets.py (L30, L72, L73) - apps/api/app/api/routes/asset_diagnosis.py (L52, L55, L56, L57) - apps/worker/worker_app/core/asset_usage.py (L5, L6, L7, L9) - apps/worker/worker_app/tasks/voice_extraction.py (L69, L70, L71, L104, L105, L106)	2026-06-28 17:56:02 +08:00
API文档维护Agent	87360051fa	fix: rename metadata to extra_meta to avoid SQLAlchemy reserved field conflict ... SQLAlchemy's 'metadata' attribute is reserved for model metadata, causing service startup crash. Changed to 'extra_meta' with Column('metadata', JSON) mapping to preserve database column name. Affected models (7): - AssetLibraryModel, AssetModel, AssetClassificationModel - GenerationTaskModel, DuplicationRecordModel - TitleLibraryModel, VoiceLibraryModel Updated all references across: - packages/adapters/sqlalchemy_impl/{title_library,voice_library,asset}_repository.py - apps/worker/worker_app/{core/asset_usage.py,tasks/voice_extraction.py} - apps/api/app/api/routes/{asset_diagnosis.py,assets.py}	2026-06-28 16:49:23 +08:00
API文档维护Agent	a43ddb4b63	feat: Phase 1 - 核心重构（去Project层/标题库API/配音库API/清理废弃代码） ... ## 主要变更 ### 1. 清理废弃代码（18个文件删除） - 删除 TaskModel/MilestoneModel/TaskIssueModel 及相关文件 - 删除 ProjectTitleModel/EditPlanModel/EditPlanClipModel 及相关文件 - 清理 domain/ports/adapters/application/api 各层引用 - 从 GenerationTaskModel 移除 edit_plan_id 字段 ### 2. 新建标题库 API（/api/v1/titles） - Domain: TitleLibraryItem 数据类 - Ports: TitleLibraryRepository 接口 - Adapters: SQLAlchemy 实现（软删除） - Application: CRUD Use Cases + 配额检查（max_titles: free=50, basic=500, premium=500） - API: GET/POST/PUT/DELETE 端点 - Schema: Pydantic 请求/响应模型 ### 3. 新建配音库 API（/api/v1/voices） - Domain: VoiceLibraryItem 数据类 - Ports: VoiceLibraryRepository 接口 - Adapters: SQLAlchemy 实现（软删除） - Application: CRUD Use Cases + 配额检查（max_voiceovers: free=10, basic=100, premium=100） - API: GET/POST/PUT/DELETE 端点 - Schema: Pydantic 请求/响应模型 ### 4. 去掉 Project 层依赖 - 修复 authenticated_user.id → authenticated_user.user.id bug - asset_libraries.py: project_id 改为可选查询参数 - generated_videos.py: project_id 改为可选查询参数 - 无 project_id 时通过 find_accessible_projects 获取用户可访问的所有项目 ### 5. 数据库迁移 - 创建 011_phase1_core_refactor.py - 删除 6 个废弃表：tasks, milestones, task_issues, project_titles, edit_plans, edit_plan_clips - 从 generation_tasks 表删除 edit_plan_id 列 ### 6. 其他改进 - 迁移 EditingMode 到独立模块 packages/domain/editing_mode.py - 注册 titles_router 和 voices_router - 添加 get_title_library_repository 和 get_voice_library_repository 依赖 - 更新 domain/ports __init__.py 导出新实体和仓储接口 ## 技术细节 - 遵循六边形架构模式 - 配额检查通过 QuotaRegistry 实现 - 软删除：标题库用 is_active=False，配音库用 status='deleted' - 配音库支持可选的 project_id 关联 ## 破坏性变更 - 删除 6 个废弃表（需先备份数据） - 删除 /api/v1/edit-plans, /api/v1/project-titles, /api/v1/project-management 端点 - generation_tasks API 不再包含 edit_plan_id 字段	2026-06-28 15:02:10 +08:00
CI Test	95fbf52049	fix(P2-1): EditingMode 枚举改为从 packages.domain 导入，消除重复定义	2026-06-28 10:26:06 +08:00
CI Test	ecfa0d33e4	fix(P1-2): generation.py _download_library_assets 改用 Worker SessionLocal 替代直接 create_engine	2026-06-28 10:25:38 +08:00
API文档维护Agent	e3fb518ab2	refactor: remove all workspace_id references from codebase ... - Remove workspace_id from Pydantic models in project_management routes - Remove workspace_id from SQLAlchemy and SQLite project management repos - Remove workspace_id from worker tasks (storage keys, entity creation) - Remove workspace_id from video dedup and title usage modules - Remove workspace_id from generation and ingest worker tasks - Clean workspace_id from all test files and scripts - Remove workspace-specific test files (list_workspaces, workspace repos) Task: #14 workspace_id 残留清理	2026-06-27 22:52:09 +08:00
Celery Worker Fix Agent	8210806632	fix: 修复 Celery Worker 任务注册和导入问题 ... 1. 修复 Worker 启动入口: celery_app → worker_app.celery_app - 旧 celery_app.py 不导入任何任务模块，导致 Worker 注册 0 个任务 - 删除旧版 apps/worker/celery_app.py，统一使用 worker_app/celery_app.py 2. 为缺少装饰器的任务补充 @celery_app.task: - classification.py: classify_asset() 添加装饰器 - generation.py: generate_video() 添加装饰器，修正签名匹配 API 调用方式 3. 确保 voice_extraction 任务被正确注册: - 添加 voice_extraction 到 celery_app imports - 修复 voice_extraction.py 中错误的相对导入 (.celery_app → worker_app.celery_app) - 修复 dedup.py 中指向已删除模块的导入 4. 修复 worker_app/celery_app.py: - 添加 broker_connection_retry_on_startup=True - imports 中添加 voice_extraction 和 dedup 模块 5. 修复 Dockerfile: - CMD 改为 celery -A worker_app.celery_app - 添加非 root 用户 celery 运行 Worker 6. 新建 packages/shared/config.py 和 storage.py 兼容层 - 为 worker 任务模块提供统一的 config/storage 访问入口	2026-06-27 19:31:07 +08:00
CI Bot	c98ab4c1ef	feat: decouple API and Worker cross-service dependencies	2026-06-27 10:22:25 +08:00
CI Bot	11494918eb	fix: resolve all workspace removal breakage - stub permissions, quota, ports, adapters ... - Remove Workspace from domain/__init__.py exports - Stub domain/permissions.py (all checks pass) - Stub domain/quota.py (all checks pass) - Create missing port stubs: workspace_member_repository, workspace_repository, workspace_invitation_repository - Create missing adapter stubs: workspace_repository, workspace_invitation_repository - Create routes/permissions.py stub (require_workspace_member no-op) - Fix .env Redis URL encoding on production server	2026-06-27 09:16:53 +08:00
CI Bot	db8c6d55ce	fix: 统一编辑模式枚举名并删除重复workflow ... 1. 修复 edit_plan_generator.py 中的枚举名与 editing_modes.py 保持一致: - ONE_TAKE: one-take -> one_take - VOICEOVER -> VOICE_OVER: voiceover -> voice_over 2. 更新相关文档字符串和注释 3. 删除重复的 .gitea/workflows/tests.yml (ci-cd.yml 已包含完整测试)	2026-06-26 23:12:06 +08:00
CI Bot	a97e3e72e9	fix: 修复 dedup.py 语法错误和 pHash DCT 实现，修复 chunked_upload.py 缩进错误	2026-06-26 22:46:21 +08:00
CI Test	bd9e9fba45	chore: squash merge feature/voice-dedup into develop (resolve conflicts) ... - Add voice extraction and deduplication functionality - Add dedup.py for video deduplication - Add voice_extraction.py task for worker - Resolve CI/CD and deploy workflow conflicts with develop version - Keep new voice dedup features from feature branch	2026-06-26 21:23:39 +08:00
CI Test	cd887909c7	chore: squash merge feature/smart-edit-plan into develop (resolve conflicts) ... - Resolve CI/CD and deploy workflow conflicts with develop version - Resolve database and dependencies conflicts with develop version - Keep new edit plan generator and API functionality from feature branch	2026-06-26 21:21:39 +08:00
xiaoxia	f687b4207f	feat: add download_url field to generated video APIs (#20)	2026-06-26 21:13:18 +08:00
xiaoxia	bfbc5855e8	feat: 实现真实素材AI分类和视频质量评估 (#19)	2026-06-26 21:11:06 +08:00
xiaoxia	299f42a6aa	feat: 实现四种视频剪辑模式 (#23)	2026-06-26 20:58:26 +08:00
xiaoxia	2666eba384	fix(P2-6): use NamedTemporaryFile for automatic temp file cleanup	2026-06-26 17:54:42 +08:00
xiaoxia	bc89d757da	fix(P1-3,P1-4): fix DB connection leak and implement real metadata extraction	2026-06-26 17:53:08 +08:00
Xiaoxia AI	6e8394d749	style: sort Python imports for CI	2026-06-24 19:57:19 +08:00
Xiaoxia AI	f85e389ced	style: format Python files for CI	2026-06-24 19:54:36 +08:00
Xiaoxia AI	0f59b412bc	feat(plans): add edit plan preview workflow	2026-06-24 10:10:25 +08:00