29 Commits

Author	SHA1	Message	Date
saas-backend	ffb8ea6790	fix: 移除 MCI 插帧，60fps 输入直接输出 25fps 结果 ... - 移除 Step 8 的 minterpolate MCI 运动补偿插帧（CPU密集，343帧超6分钟导致超时504） - 高帧率视频降帧至 25fps 后直接输出，对口型数字人场景完全够用 - 插帧失败不再导致整个任务 504，直接降级返回 25fps 结果	2026-09-21 19:22:52 +08:00
xiaoxia	cc01a5da69	perf: RTX3060 12G显存适配，batch_size上限提升到8 (#2007) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-21 19:09:01 +08:00
xiaoxia	7babea3d24	fix: musetalk_server 60fps降帧+超时终止+health GFPGAN字段 (#2006) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-21 17:24:13 +08:00
saas-backend-agent	3424e55a32	feat(gpu): #1978 MuseTalk v1.5 + GFPGAN face enhancement + ffmpeg pipe optimization (#2003) ... - MuseTalk v1.5 完整推理pipeline（DWPose+SFD GPU人脸检测） - GFPGANv1.4 人脸超分增强（FP16, 可通过 MUSE_USE_GFPGAN=0 关闭） - ffmpeg rawvideo pipe 编码替代PNG磁盘IO，省~2s - 异步推理架构 + /cancel 端点 + 线程锁并发控制 - 长音频驱动架构，禁止ffmpeg预循环视频（避免16x性能退化） # Conflicts: # deploy/gpu_worker/musetalk_server.py	2026-09-21 00:09:57 +08:00
ying	93cb3e12a0	feat(gpu): add GFPGAN face enhancement + ffmpeg pipe optimization ... - Add GFPGANv1.4 face super-resolution (FP16, +170MB VRAM, ~64ms/frame) - Controllable via MUSE_USE_GFPGAN env var (default enabled) - Enhances generated face region before blending with original frame - Replace PNG disk I/O with ffmpeg stdin pipe encoding (~2s faster) - Frames streamed directly to ffmpeg as raw BGR24, no temp files - Eliminates output_frames_dir/ PNG write/read cycle - Total warm inference: 54s for 5s video (was 56s with PNG, 48s without GFPGAN) - VRAM usage: ~3.3GB with MuseTalk+GFPGAN loaded (RTX 2060 6GB OK)	2026-09-20 22:51:02 +08:00
ying	e7bf85ca86	fix(gpu): #1978 MuseTalk v1.5 推理修复与Worker稳定性补丁 ... musetalk_server.py: - v3 API兼容性：支持新的请求格式（audio_url/video_url字段） - v4 正确pipeline：使用vae.get_latents_for_unet()生成8ch输入 - v4.4 VRAM优化：batch_size=2 + CPU offload + PYTORCH_CUDA_ALLOC_CONF=max_split_size_mb:128 - RTX2060 6GB可稳定运行，22s视频推理约204s（0.11x实时） gpu_worker.py: - 修复健康检查响应格式适配musetalk_server - REQUEST_TIMEOUT提升到900s，与服务端GPU_TASK_TIMEOUT_SECONDS对齐 - TASK_MAX_RETRY降到1，避免与服务端MAX_ATTEMPTS=3相乘放大重试 - 增加TASK_HEARTBEAT_INTERVAL=30s，推理期间独立线程心跳防超时 - 增加MIN_VIDEO_DURATION_SECONDS=3s前置拦截，避免1s视频division by zero	2026-09-20 21:29:31 +08:00
xiaoxia	c9876d70e4	fix(1978): fix xiaoxia-gpu-worker.service bad unit file & log path permissions ... - User=%i -> User=ying (%%i is template-only specifier, not valid here) - After=musetalk.service -> After=musetalk-worker.service (match actual service name) - Log path from /tmp/ to $HOME/ to avoid permission issues for ying user	2026-09-20 13:36:36 +08:00
xiaoxia	db621b4fcb	feat(deploy): #1978 GPU节点自动部署配置文件入库 ... 新增 deploy/gpu_worker/ 下 3 个 systemd 单元 + 3 个运维脚本： - musetalk-worker.service: MuseTalk 推理 API systemd 服务 - gpu-poll.service + gpu-poll.timer: 每30秒轮询Gitea最新commit - scripts/update-gpu-worker.sh: 备份→拉代码→重启→健康检查→失败回滚 - scripts/poll_and_update.sh: SHA比对触发update - scripts/setup-gpu-node.sh: 新节点一键初始化(apt依赖+目录+systemd+sudo免密+首次启动) - README.md 追加第七章「自动部署」说明服务架构/部署步骤/更新机制/日志/注意事项 不改动现有 gpu_worker.py/musetalk_server.py/requirements.txt/xiaoxia-gpu-worker.service/.env.example 不改动CI/Docker/镜像构建。脚本路径写死/home/ying，后续多节点再参数化。	2026-09-20 10:28:24 +08:00
xiaoxia	08de0d9946	perf: async GPU lipsync inference + fix 16x performance regression ... - Move GPU wait_for_result to Celery background task (lipsync_gpu_process_async) POST /lipsync/jobs now returns <1s instead of blocking 200s+ - Rewrite musetalk_server.py: MuseTalk receives full audio directly (v2 architecture) — no pre-looping video before inference Output video length = audio length, mux is fast stream copy - Frontend polls GET /lipsync/jobs/{id} for status updates - refresh_job_status: GPU async path (processing + no mediakit_task_id) skips MediaKit polling; stale jobs (>30min) auto-marked failed - 21 unit tests pass (11 GPU integration + 10 musetalk audio mux) Co-Authored-By: Coze <coze-opensource@bytedance.com>	2026-09-20 09:43:47 +08:00
xiaoxia	b0b81a5d60	fix(1978): MuseTalk 封装强制替换为 TTS 驱动音轨 + 音频长于视频时循环画面 (#1997) ... Co-authored-by: backend-dev <dev@xiaoxiajianji.com> Co-committed-by: backend-dev <dev@xiaoxiajianji.com>	2026-09-20 02:27:44 +08:00
xiaoxia	112f0eb277	feat(gpu): #1978 AI数字人口型同步接入MuseTalk GPU Worker（业务侧集成） (#1991)	2026-09-19 22:43:57 +08:00
xiaoxia	32473485d7	fix(gpu): #1970 重写 MuseTalk 服务端 + 客户端超时取消，修复 8 项工程 bug ... 服务端新建 deploy/gpu_worker/musetalk_server.py（替代原 ~/projects/MuseTalk/worker.py）： 1. Flask app.run(threaded=True)：推理阻塞时 /health 仍可达 2. _get_video_fps 兜底：ffprobe 返回 0 或失败时 fallback 到 default_fps(25) 3. _run_ffmpeg 统一封装：subprocess.run(check=True) + timeout，失败/超时抛 RuntimeError 4. inference_lock 并发锁：多请求同时到达时第二请求立即 503 5. 推理超时控制：thread.join(timeout=inference_timeout) 默认 600s，超时返回 504 6. finally 块清理临时目录：成功/失败/超时都删除 task_dir 7. 无人脸检测兜底：_run_inference 中帧提取后校验，无帧直接抛错返回 500 8. 上传大小限制：视频 <=100MB / 音频 <=20MB，超限返回 413 9. 新增 POST /cancel 端点：终止当前推理、清理临时文件、释放锁 10. GET /health 返回 GPU 显存信息（nvidia-smi）+ 当前任务状态 客户端 deploy/gpu_worker/gpu_worker.py 配套： - _call_musetalk 超时后 POST /cancel 终止服务端僵尸推理 - _call_musetalk 返回 (ok, duration, err, retryable) 四元组 - _handle_task 仅 retryable=True 时重试，4xx/短视频等确定性失败直接上报 - 新增 _cancel_musetalk_task 辅助方法 测试：新增 15 个单测覆盖服务端全部修复点；全量 15854 passed / 28 skipped 部署提醒：用户需在 RTX2060 上 wget 新 musetalk_server.py 替换旧 worker.py 并重启服务。	2026-09-19 19:35:23 +08:00
xiaoxia	1591259bb8	fix(gpu): #1970 MuseTalk worker 推理期心跳/超时900/重试收敛/短视频前置失败 (#1990) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-19 15:06:51 +08:00
xiaoxia	65a77e3fb6	Merge branch 'feat/add-doubao-vision-model-env' into develop ... # Conflicts: # scripts/render_env.sh	2026-09-19 10:32:46 +08:00
xiaoxia	9a57b0d5b8	feat: add DOUBAO_VISION_MODEL env to staging/production deployment ... - Add DOUBAO_VISION_MODEL placeholder to .env.staging and .env.production - Add DOUBAO_VISION_MODEL to render_env.sh SHARED_SECRETS - Add DOUBAO_VISION_MODEL secret ref in ci-pipeline.yml (staging + production) - Uses existing endpoint ep-20260721114705-b568m which supports vision	2026-09-19 10:23:22 +08:00
xiaoxia	fbf8844f25	feat(gpu): #1978 MuseTalk GPU Worker 反向轮询对接（后端API + Worker脚本） (#1979) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-18 19:59:49 +08:00
xiaoxia	428b9eeb3b	chore(ci): 在CI secrets/env模板中添加TIKHUB_API_KEY和APIZERO_API_KEY ... - Gitea Actions Secrets已添加TIKHUB_API_KEY - render_env.sh SHARED_SECRETS增加两个新key - deploy/configs/.env.staging和.env.production模板增加三层兜底配置段 - ci-pipeline.yml的staging/production deploy步骤env中注入新secret	2026-09-17 22:36:44 +08:00
xiaoxia	731d3297b3	chore(douyin): 关闭 DOUYIN_DEBUG_ERRORS；cookies 文件改为占位（CI 部署时 scp 真实 cookies） ... 根因定位结果：yt-dlp DouyinIE 需要 X-Bogus/_signature 等 JS 签名参数（源码自带 TODO）， 匿名 cookies 即使新鲜也无法直接调用 web/aweme/detail API，目前抖音链接解析会稳定返回 503 友好错误提示："抖音链接解析暂时不可用，请稍后重试或手动输入文案"。 后续可考虑：(a) 容器内集成 Playwright 直取视频页；(b) 部署专用解析服务；(c) 跟进 yt-dlp 上游对抖音签名的支持。	2026-09-16 21:54:57 +08:00
xiaoxia	ebb3c79d63	debug(douyin): staging 临时开启 DOUYIN_DEBUG_ERRORS 暴露原始错误以定位 503 根因 ... - scripts_ai.py: 加 DOUYIN_DEBUG_ERRORS 开关（staging env 开启），错误 detail 附带 yt-dlp 原始错误前 300 字符 - _dbg helper + cookies 路径/字节数日志 - .env.staging: DOUYIN_DEBUG_ERRORS=true（定位完成后关闭）	2026-09-16 21:17:49 +08:00
xiaoxia	4f5ae52a40	fix(douyin): 升级 yt-dlp>=2026.8.19 + 桌面浏览器 UA/Referer 绕过抖音反爬 ... - requirements.txt + api.Dockerfile 强制升级 yt-dlp（基础镜像旧版 cookies 支持差） - scripts_ai.py ydl_opts 加 http_headers（桌面 Chrome UA + Referer: douyin.com） - 配合 baked-in cookies fallback + host scp 机制，提升抖音提取成功率	2026-09-16 20:40:21 +08:00
xiaoxia	a425103b4f	fix(douyin): cookies 文件 host 挂载为空时 fallback 到镜像内 baked-in 默认 cookies ... - api.Dockerfile: COPY cookies 到 /app/configs/douyin_cookies_default.txt（镜像内兜底） - scripts_ai.py: _resolve_cookies_file() 优先 host 挂载路径，文件<200B 时 fallback 到镜像内 default - 解决 staging 部署时 host 空占位文件覆盖镜像内有效 cookies 导致抖音提取一直 503 的问题 - 单测 15560 passed	2026-09-16 20:27:58 +08:00
xiaoxia	35c00ccbb7	fix(douyin): 打包抖音匿名 cookies 到 API 镜像 + 容器内路径兜底 ... - api.Dockerfile: COPY deploy/configs/douyin_cookies.txt 到 /app/configs/ （ci_staging_deploy.sh 的 volume mount 会覆盖为 host 上的真实文件） - deploy/configs/douyin_cookies.txt: 替换占位符为从浏览器导出的真实匿名 cookies （31条，包含 ttwid/passport_csrf_token/odin_tt/s_v_web_id 等） - 过期后可用 scripts/refresh_douyin_cookies.py 重新导出； 过期时 extract-from-douyin 已返回 503 友好文案，不会 500	2026-09-16 19:38:13 +08:00
xiaoxia	67a1ed6430	feat(#1894): 清理文案库多余字段 / 废弃标题库 API / 旧定价档位清理 (#1968) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 18:58:04 +08:00
xiaoxia-agent	300f4b2abd	fix(staging): add DOUBAO_API_KEY to CI env render (fix 502 AI unavailable) ... Root cause: Doubao (ARK) AI client configuration was missing from staging .env template and CI render pipeline. The DOUBAO_API_KEY/MODEL/BASE_URL variables were added to packages/config/api_settings.py but never wired through deploy/configs/.env.staging, render_env.sh shared secrets, or ci-pipeline.yml. After recent PRs that added AI endpoints (ai-rewrite, extract-from-douyin, lipsync/digital-human) calling get_doubao_client(), is_available returned False because settings.doubao_api_key was empty → all AI routes returned 502. Fix: 1. deploy/configs/.env.staging: add DOUBAO_API_KEY/MODEL/BASE_URL/TIMEOUT/MAX_RETRIES 2. deploy/configs/.env.production: same (for prod parity) 3. scripts/render_env.sh: add DOUBAO_API_KEY/MODEL/BASE_URL to SHARED_SECRETS 4. .gitea/workflows/ci-pipeline.yml: pass DOUBAO secrets to deploy-staging env 5. Gitea Actions secrets: DOUBAO_API_KEY/MODEL/BASE_URL added (already set) Verified render_env.sh produces correct .env.rendered with all 19 vars substituted. Full unit test suite: 15523 passed.	2026-09-16 11:54:44 +08:00
xiaoxia	2ce3a5efd3	fix: SPA 路由回退的 HTML 补 no-cache 头（配合 #1732 白屏修复） (#1735) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-06 14:05:44 +08:00
xiaoxia	9840d5d778	deploy(#1718): 微信OAuth凭证纳入env模板+CI渲染，修复staging部署覆盖丢失 (#1721) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-05 17:39:46 +08:00
xiaoxia	b8d3f3aa16	fix: 修正 PR #1630 三处问题 ... 1. Production 模板 SMTP_HOST 改为空值（与实际一致） 2. ci-pipeline.yml MinIO Bucket Secret 名称修正为 STAGING_MINIO_BUCKET - render_env.sh 增加特殊映射：STAGING_MINIO_BUCKET → MINIO_BUCKET_NAME 3. 修正模板中与实际运行不一致的配置值： Staging: JWT_ACCESS_TOKEN_EXPIRE_MINUTES=1440, COSYVOICE_VOICE=longxiaoxia_v3, COSYVOICE_FORMAT=wav, CORS_ORIGINS_RAW 使用 staging-api Production: COSYVOICE_VOICE=longxiaoxia_v3, COSYVOICE_FORMAT=wav, CORS_ORIGINS_RAW 使用 api（非 www）	2026-09-02 17:12:59 +08:00
xiaoxia	459cf61495	feat(config): Phase 4 — 修正模板 + 渲染脚本 + CI 部署改造 ... 第一部分：修正配置模板（7 处差异） - MINIO_BUCKET → MINIO_BUCKET_NAME（统一变量名） - 删除 DOUBAO_API_KEY 区块（两个环境都没在用） - 新增 DASHSCOPE_API_KEY（实际在用，模板漏了） - 新增 MediaKit 区块（3 个变量） - staging DEBUG=true（实际在用 true） - ENABLE_EMAIL_DELIVERY=false（邮件功能未上线） - SMTP 相关默认值改为空 第二部分：创建 env 渲染脚本 - scripts/render_env.sh：从模板 + Secrets 渲染 .env - 使用 Python 实现变量替换（CI runner 无 envsubst） - 支持 STAGING_xxx/PRODUCTION_xxx 前缀映射 - 自动校验所有必需变量已设置 - 输出文件权限 600，不打印到日志 第三部分：改造 CI 部署流程 - deploy-staging 新增 'Render .env from template' 步骤 - SSH deploy 前先 SCP 渲染后的 .env 到服务器 - 自动备份旧 .env（带时间戳） - 部署完成后清理 CI runner 上的渲染文件 - ci_staging_deploy.sh 改为显式检查 .env 来源 安全: .env.rendered 加入 .gitignore	2026-09-02 17:02:45 +08:00
xiaoxia	7eecabaf3d	feat(deploy): 添加环境配置模板 + 修复 compose 路径 bug ... - 新增 deploy/configs/.env.staging — Staging 环境配置模板（含 MinIO） - 新增 deploy/configs/.env.production — Production 环境配置模板（无 MinIO） - 新增 deploy/configs/nginx-staging.conf — Staging Nginx 配置 - 新增 deploy/configs/nginx-production.conf — Production Nginx 配置 - 修复 infra/docker/compose.yml: GENERATED_FILES_HOST_DIR 去掉默认值， 改为 ?: 语法强制要求显式设置，防止 Production 静默指向 staging 目录 - 更新 .gitignore: 为 deploy/configs/ 下的模板文件添加例外	2026-09-02 15:25:27 +08:00