5 Commits

Author	SHA1	Message	Date
CI Bot	efb7fa5729	style: auto-format with black + isort + ruff + prettier [skip ci-format-check]	2026-09-29 11:17:23 +00:00
saas-backend-agent	5e1520230f	test(api+worker): align unit tests with #2098 soft user limit + override refactor ... - Bug B: check_queue_limits no longer raises UserPendingLimitExceeded (user limit is soft); only global GLOBAL_PENDING_LIMIT hard-rejects with 503. - safe_enqueue_generation_task user over-limit is warning-only (pre/post enqueue); GlobalQueueFull still hard-rejects/rolls-back. - Preview route (/generation/preview) user-pending pre-check removed to match batch/generation/retry routes; only global 503 pre-check kept. - Route enqueue-loop: UserPendingLimitExceeded except branch removed; all-failed rate-limit response only triggers on GlobalQueueFull (503). - Tests rewritten to reflect new semantics (197 queue/preview/batch/pipeline tests pass). - test_worker_generate_video_task_binding: replaced legacy _sync_task_config_to_plan helper test with _build_task_config_override + _download_voice_for_task (Bug A refactor). - USER_PENDING_LIMIT constant verified at 20 (soft cap).	2026-09-29 19:06:12 +08:00
saas-backend-bot	df99305dd6	feat(worker): celery 队列隔离 + 孤儿任务消息作废 (#1714) ... 问题：素材转码与视频生成共用 celery 默认队列、worker 单进程消费， 20+ 转码积压会把用户生成任务堵 40 分钟以上；孤儿清理把任务标 failed 后 Redis 队列消息未作废，消息被重投导致 failed→running 非法转换， worker 打印 ERROR 后继续产出半成品。 队列隔离： - 新增 packages/shared/celery_queues.py：generation/transcode/celery 三队列与 task_routes（generate_video→generation；ingest_asset/ classify_asset/duplication→transcode），apply_queue_settings() - worker 入口改双进程：generation worker 独占队列并内嵌 beat （prefetch=1, GENERATION_CONCURRENCY 默认 2），transcode worker 消费 transcode,celery（并发=总-2，最小 1），任一退出则整体终止 - compose/部署脚本/ps1 同步新增 GENERATION_CONCURRENCY 与健康检查 消息作废： - 新增 packages/shared/celery_orphan_guard.py：终态守卫 ensure_task_claimable、Redis 队列消息物理清理（JSON 信封解析， 按业务 id + celery headers.id 双匹配，未命中 rpush 保序）、 revoke_and_purge（control.revoke + 物理清队列双保险） - 入队点（生成/上传/分片/重试）send_task 后持久化 celery_task_id 到 generation_tasks/ingest_jobs（新列，067 迁移，失败仅 warning） - generate_video/ingest_asset 执行前校验 DB 状态：终态直接 discarded 不进业务逻辑；mark_processing 返回 False（非法转换）安全中止 - 孤儿/超时清理标 failed 时同时 revoke + 清队列消息 - pending 超时阈值 15→45 分钟，与 running 孤儿(20min)区分 测试：新增 22 个单测（路由表/真实 Redis 消息清理/终态守卫/ 非法转换中止/标 failed 后消息不重投/入队持久化），全量 14301 passed；067 迁移隔离 DDL 验证 upgrade/downgrade 通过。	2026-09-05 19:07:47 +08:00
xiaoxia	ad671d94c5	fix(voice-clone): source_audio_url 不做预签名转换，原样返回用户输入 ... fix(voice-clone): source_audio_url 不做预签名转换，原样返回用户输入	2026-07-11 19:50:30 +08:00
xiaoxia	efe7f6b52a	feat: 任务队列限流防护 ... feat: 任务队列限流防护 - 用户级 pending 限流（3 个上限，返回 429） - 全局队列保护（20 个上限，返回 503） - 4 处入口全覆盖：批量创建、generation 重试、任务中心两级重试 - 入队前预检查 + 入队后最终校验双层兜底，处理并发竞态 - 阈值统一常量管理，边界语义一致 - 350+ 行单元测试覆盖所有边界场景	2026-07-11 16:29:07 +08:00