3534 Commits

This Branch

This Branch

All Branches

Author	SHA1	Message	Date
CI Bot	46bce0dee8	style: auto-format with black + isort + ruff + prettier [skip ci-format-check]	2026-09-17 06:19:31 +00:00
xiaoxia	20751428a8	fix(douyin): 合成cookies自动ttwid+h264优先+下载优化，大幅提升成功率	2026-09-17 14:14:52 +08:00
CI Bot	f655462fd6	style: auto-format with black + isort + ruff + prettier [skip ci-format-check]	2026-09-17 05:37:48 +00:00
xiaoxia-bot	787bb0ee31	fix(douyin): 合成cookies自动获取ttwid，yt-dlp解析成功率大幅提升 ... - 通过 ttwid.bytedance.com/ttwid/union/register/ 接口自动获取 ttwid cookie（无需浏览器） - 生成带随机 s_v_web_id(verify_+22位随机串) + 真实ttwid的Netscape格式cookies文件 - yt-dlp 解析失败时自动重试10次（每次生成新s_v_web_id，每3次刷新ttwid） - 本地实测约30%单次成功率，10次重试≈97%成功率 - yt-dlp下载兜底路径同样使用8次合成cookies重试 - 修复Netscape cookies文件格式（7个tab分隔字段） - 修复代码中残留的重复return语句 - _fetch_ttwid优先走字节跳动注册接口，回退到主页访问 - 移除旧的函数残留代码	2026-09-17 13:32:32 +08:00
CI Bot	7a2d235685	style: auto-format with black + isort + ruff + prettier [skip ci-format-check]	2026-09-17 04:50:04 +00:00
xiaoxia-bot	78c7fcca5c	fix(douyin): 增强解析鲁棒性——重试、APIKey支持、HTML兜底 ... - 第三方解析API增加3次自动重试+退避，应对瞬时限流（apizero免费额度波动） - 支持环境变量 APIZERO_API_KEY 配置apizero付费key - 兼容多种解析API响应结构（code=0/200/success:true） - 质量优先级选最优（原画>1080p>720p） - 新增HTML直抓兜底（iesdouyin分享页正则匹配CDN链接） - 主流程增加2轮完整链路重试，502/503/504时自动重试 - 优化日志记录	2026-09-17 12:44:47 +08:00
CI Bot	14b9a9d0fc	style: auto-format with black + isort + ruff + prettier [skip ci-format-check]	2026-09-17 03:26:56 +00:00
saas-backend-agent	132ca6bb70	fix(douyin): 修复抖音真实链接503，增加第三方解析API兜底 ... 根因： - yt-dlp DouyinIE 当前需要 fresh cookies（即使只提取元信息）， staging 上的 douyin_cookies.txt 是占位文件（3行），导致直链拿不到 - 原代码路径A（MediaKit ASR）因 direct_url=None 完全跳过 - 路径B（下载+本地ASR）同样因 cookies 失败返回友好 503 修复： 1. 修复 MediaKitClient monkey-patch 属性名错误 （原用 self.base_url/self.api_key/self.timeout，实际是 self._base_url 等私有属性； 错误添加了 _mk_headers 与类自带 _headers() 重复） 2. yt-dlp 增加 extractor_args 和 Accept-Language header 3. 新增第三方无水印解析 API 兜底（apizero.cn）， yt-dlp 失败时自动切换，拿到直链后仍走 MediaKit ASR 4. 路径B 支持直接用第三方直链下载 MP4（不依赖 yt-dlp/cookies） 5. MediaKit ASR 轮询增加瞬时网络错误重试 6. 全部路径失败时返回友好 503（不再返回空 text 导致前端异常） 验证：本地通过 apizero 成功解析 https://v.douyin.com/hb-giW8cC1Q/ 返回直链可下载（23MB mp4），HTTP 200	2026-09-17 11:22:01 +08:00
xiaoxia	b2ba78c16c	fix(ux): #1894 抖音提取前端不再拦截非http开头文本，透传后端400错误 (#1972) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-17 10:01:31 +08:00
saas-backend-agent	605a3eb841	revert(ci): 回滚 ACR 默认域名切换（公共域名凭据无效，等待自定义域名恢复） ... 公共域名 registry.cn-hangzhou.aliyuncs.com 使用独立凭据， 现有 ACR_USERNAME/ACR_PASSWORD 绑定自定义域名企业版实例， docker login 报 unauthorized 无法拉/推镜像。 等 ACR 自定义域名 xiaoxia-registry 公网接入恢复后， 基于原有配置即可正常构建。	2026-09-17 07:45:05 +08:00
saas-backend-agent	bf6c66d71c	fix(ci): 补上 infra/docker/{api,worker}.Dockerfile 里的基础镜像域名替换 ... - infra/docker/api.Dockerfile: FROM xiaoxia-registry → registry.cn-hangzhou.aliyuncs.com - infra/docker/worker.Dockerfile: 同上 - 上一次替换漏了 Dockerfile 里的 FROM，导致 buildx 仍解析到旧域名	2026-09-17 07:30:39 +08:00
saas-backend-agent	30bf66b307	fix(ci): ACR 临时切回默认域名 registry.cn-hangzhou.aliyuncs.com（自定义域名 114.55.99.108:443 拒绝连接） ... - .gitea/workflows/*.yml: docker login/REGISTRY/ACR_IMAGE/ACR_REGISTRY - scripts/ci/*.sh, scripts/ci/*.py: ACR_REGISTRY/GRAY_REGISTRY/REGISTRY 默认值 - 共 12 个文件 31 处替换 - 待 ACR 自定义域名恢复后可切回	2026-09-17 07:16:08 +08:00
xiaoxia	b68c29c69b	fix(ux): #1894 文案/标题数据源全面切到 /api/v1/scripts（P1 阻塞发版） (#1971) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-17 04:53:59 +08:00
CI Bot	4da3eae11a	style: auto-format with black + isort + ruff + prettier [skip ci-format-check]	2026-09-16 16:50:47 +00:00
xiaoxia-agent	c7a34fb297	fix(douyin): 支持分享文本自动提取URL + MediaKit ASR 云端转写 ... P1 修复： 1. 抖音链接提取：后端自动从分享文本（如"这个视频 https://v.douyin.com/xxx/ 快来看看"） 中正则提取 http(s) URL，不再要求用户只粘贴纯链接； 裸域名（v.douyin.com/xxx）自动补 https://；ftp/file 等非 http(s) 协议拒绝。 2. 抖音文案提取换方案：优先走火山引擎 MediaKit asr-subtitles API（云端 ASR）， 利用 yt-dlp 解析无水印直链（不下载整段视频）→ 提交 MediaKit → 轮询拿字幕； MediaKit 未配置/失败时回退到原"下载视频+本地 ASR"路径；cookies 503 友好错误保留。 3. 文案库 P1-1 排查结论：后端 GET /api/v1/scripts CRUD 正常，scripts 表结构/数据 在 070/077/078 迁移链路中无数据丢失；"数据不显示"应是前端未正确切换到新接口， 已在回复中说明。 测试：新增 13 个 URL 提取单测；原有 15576 单测全绿；ruff clean.	2026-09-17 00:43:31 +08:00
xiaoxia	115b428cb3	fix(lipsync): 修复 GET /jobs/{id} 轮询 500（naive/aware datetime 减法 TypeError） ... Postgres TIMESTAMP WITHOUT TIMEZONE 返回 naive datetime，路由层 (_now - job.updated_at).total_seconds() 抛 TypeError: can't subtract offset-naive and offset-aware datetimes，被全局异常 handler 吞为 500 INTERNAL_ERROR，前端持续轮询一直报错。 修复：比较前把 naive datetime 当作 UTC wall clock 补 tzinfo（与代码写入 default=datetime.now(UTC) 一致），补 2 个单测覆盖 naive stale/fresh 两个分支。 176 tests passed.	2026-09-16 23:24:26 +08:00
xiaoxia	cd4274553c	style: isort/ruff 格式化 scripts_ai.py 导入顺序	2026-09-16 22:58:21 +08:00
CI Bot	d825756c67	style: auto-format with black + isort + ruff + prettier [skip ci-format-check]	2026-09-16 14:28:30 +00:00
xiaoxia	b4724a866f	fix(ruff): 移除可变 ContextVar 默认值（B039），_dbg 改为 logger.debug	2026-09-16 22:15:02 +08:00
xiaoxia	731d3297b3	chore(douyin): 关闭 DOUYIN_DEBUG_ERRORS；cookies 文件改为占位（CI 部署时 scp 真实 cookies） ... 根因定位结果：yt-dlp DouyinIE 需要 X-Bogus/_signature 等 JS 签名参数（源码自带 TODO）， 匿名 cookies 即使新鲜也无法直接调用 web/aweme/detail API，目前抖音链接解析会稳定返回 503 友好错误提示："抖音链接解析暂时不可用，请稍后重试或手动输入文案"。 后续可考虑：(a) 容器内集成 Playwright 直取视频页；(b) 部署专用解析服务；(c) 跟进 yt-dlp 上游对抖音签名的支持。	2026-09-16 21:54:57 +08:00
CI Bot	ef6766dd58	style: auto-format with black + isort + ruff + prettier [skip ci-format-check]	2026-09-16 13:43:17 +00:00
CI Bot	0c41816a6d	style: auto-format with black + isort + ruff + prettier [skip ci-format-check]	2026-09-16 13:30:56 +00:00
xiaoxia	ebb3c79d63	debug(douyin): staging 临时开启 DOUYIN_DEBUG_ERRORS 暴露原始错误以定位 503 根因 ... - scripts_ai.py: 加 DOUYIN_DEBUG_ERRORS 开关（staging env 开启），错误 detail 附带 yt-dlp 原始错误前 300 字符 - _dbg helper + cookies 路径/字节数日志 - .env.staging: DOUYIN_DEBUG_ERRORS=true（定位完成后关闭）	2026-09-16 21:17:49 +08:00
xiaoxia	4f5ae52a40	fix(douyin): 升级 yt-dlp>=2026.8.19 + 桌面浏览器 UA/Referer 绕过抖音反爬 ... - requirements.txt + api.Dockerfile 强制升级 yt-dlp（基础镜像旧版 cookies 支持差） - scripts_ai.py ydl_opts 加 http_headers（桌面 Chrome UA + Referer: douyin.com） - 配合 baked-in cookies fallback + host scp 机制，提升抖音提取成功率	2026-09-16 20:40:21 +08:00
xiaoxia	a425103b4f	fix(douyin): cookies 文件 host 挂载为空时 fallback 到镜像内 baked-in 默认 cookies ... - api.Dockerfile: COPY cookies 到 /app/configs/douyin_cookies_default.txt（镜像内兜底） - scripts_ai.py: _resolve_cookies_file() 优先 host 挂载路径，文件<200B 时 fallback 到镜像内 default - 解决 staging 部署时 host 空占位文件覆盖镜像内有效 cookies 导致抖音提取一直 503 的问题 - 单测 15560 passed	2026-09-16 20:27:58 +08:00
xiaoxia	018e1bcb9b	fix(ci): deploy-staging job 直接 scp 抖音 cookies 到 staging host，避免空占位覆盖镜像内 cookies ... - ci-pipeline.yml: 在 .env scp 之后增加 douyin_cookies.txt scp - ci_staging_deploy.sh: 简化逻辑，不再尝试从本地 repo 路径拷贝（脚本是通过管道 SSH 执行无本地文件）	2026-09-16 20:14:37 +08:00
xiaoxia	221eed2a25	fix(deploy): staging 部署时自动从 repo 拷贝真实抖音 cookies（>200B），避免空占位覆盖镜像内 cookies	2026-09-16 19:47:07 +08:00
xiaoxia	35c00ccbb7	fix(douyin): 打包抖音匿名 cookies 到 API 镜像 + 容器内路径兜底 ... - api.Dockerfile: COPY deploy/configs/douyin_cookies.txt 到 /app/configs/ （ci_staging_deploy.sh 的 volume mount 会覆盖为 host 上的真实文件） - deploy/configs/douyin_cookies.txt: 替换占位符为从浏览器导出的真实匿名 cookies （31条，包含 ttwid/passport_csrf_token/odin_tt/s_v_web_id 等） - 过期后可用 scripts/refresh_douyin_cookies.py 重新导出； 过期时 extract-from-douyin 已返回 503 友好文案，不会 500	2026-09-16 19:38:13 +08:00
xiaoxia	67a1ed6430	feat(#1894): 清理文案库多余字段 / 废弃标题库 API / 旧定价档位清理 (#1968) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 18:58:04 +08:00
frontend-dev	ae733312db	fix(e2e): 修复 step3→step4 导航 — 确认生成按钮在 step4 不在 step3 (#1969) ... Co-authored-by: frontend-dev <frontend-dev@xiaoxiajianji.com> Co-committed-by: frontend-dev <frontend-dev@xiaoxiajianji.com>	2026-09-16 18:38:12 +08:00
frontend-dev	43a584d041	fix(test): 修复 CI 三个失败项 — navigation mock + subscription mock + E2E 渲染等待 (#1967) ... Co-authored-by: frontend-dev <frontend-dev@xiaoxiajianji.com> Co-committed-by: frontend-dev <frontend-dev@xiaoxiajianji.com>	2026-09-16 17:47:50 +08:00
xiaoxia	c7662f0515	fix(ci): fix worker HEALTHCHECK quoting bug (#1966) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 17:31:15 +08:00
xiaoxia-agent	2d7f1c3a71	chore: rebuild API image with updated base (includes yt-dlp dependency)	2026-09-16 16:54:21 +08:00
xiaoxia	8637ed1576	fix(ux): #1894 删除标题库入口 + 文案名称改标题 + AI改写UX + 清理旧定价硬编码 (#1965) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 16:04:08 +08:00
xiaoxia-agent	6bcd255e85	fix(ci): 修复 ci-pipeline.yml 触发器被误改为 'true:' 导致 push 事件不触发 CI ... YAML 1.1 把未加引号的 on 解析为布尔 true，之前用 PyYAML dump/字符串替换时 意外把顶层 'on:' 写成了 'true:'，导致 push 到 develop 后 CI 完全不触发， staging 一直停留在旧版本 410487fe。恢复原始的 on: 结构和 tags/schedule 格式（参照 410487fe 最后可用版本）。	2026-09-16 15:21:19 +08:00
xiaoxia	17c6b0e3bd	Merge pull request 'chore: CHANGELOG for #1963 (douyin extract error handling)' (#1964) from chore/trigger-ci-after-1963 into develop ... chore: CHANGELOG for #1963 (#1964)	2026-09-16 14:48:57 +08:00
xiaoxia-agent	78cab46578	chore: update CHANGELOG for #1963 (douyin extract error handling)	2026-09-16 14:21:02 +08:00
xiaoxia-agent	9e87781a85	chore: trigger CI deploy to staging after #1963	2026-09-16 13:43:23 +08:00
xiaoxia	57545ab694	Merge pull request 'fix(scripts): extract-from-douyin 异常路径全部返回业务码，杜绝 500 INTERNAL_ERROR' (#1963) from fix/extract-douyin-error-handling into develop ... fix(scripts): extract-from-douyin 异常路径全部返回业务码，杜绝 500 (#1963)	2026-09-16 13:36:47 +08:00
xiaoxia	51694cbd0c	test(e2e): 放宽生成完成等待超时至7分钟（DOUBAO 真生成偶发超3分钟） (#1962) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 13:18:15 +08:00
xiaoxia-agent	fca943428b	fix(scripts): extract-from-douyin 异常路径全部返回业务码，杜绝 500 INTERNAL_ERROR ... 问题：POST /api/v1/scripts/extract-from-douyin 在抖音短链无效/网络异常/ASR 兜底异常等 场景下冒泡未捕获 Exception，被全局 general_exception_handler 吞成 500 INTERNAL_ERROR， 前端无法区分业务错误。 修复（apps/api/app/api/routes/scripts_ai.py）： 1. yt-dlp 导入失败（缺依赖）→ 503（提示功能不可用） 2. yt_dlp.utils.DownloadError 单独捕获： - 含 404/not found/unable to download/unsupported url → 400「无法解析该抖音链接」 - 其它网络/上游异常 → 502「视频下载失败」 3. 下载 info 成功但文件未落地（isfile False / size 0）→ 502「未获取到有效文件」 4. duration 非数字（TypeError/ValueError）→ 安全降级为 0 5. ASR 转写兜底 catch Exception → 502「语音识别失败」（原只 catch 两个自定义异常） 6. 最外层兜底 catch Exception → 500 但带具体 detail（不再是通用 INTERNAL_ERROR） 7. text/duration 提前初始化，避免异常路径 UnboundLocalError 测试： - 新增 tests/unit/test_extract_from_douyin_errors.py，覆盖 8 个失败场景 - 更新 tests/unit/test_scripts_ai.py 三个成功/ASR 路径测试，mock os.path.isfile/getsize - 全量单测 15531 passed	2026-09-16 13:16:45 +08:00
xiaoxia	3eb2fcf3ec	Merge pull request 'fix(ci): 生产环境部署也通过 CI 渲染 .env（避免 DOUBAO 等密钥丢失导致 AI 502）' (#1961) from fix/production-doubao-env-pipeline into develop	2026-09-16 12:50:28 +08:00
xiaoxia-agent	50b413a6fa	fix(ci): 生产环境部署也通过 CI 渲染 + 上传 .env（与 staging 对齐，避免 DOUBAO 等密钥丢失） ... - deploy-production 新增 Render .env from template 步骤（复用 render_env.sh production） - Deploy production over SSH 在拉镜像前加 SCP 上传渲染后的 .env + config diff 检查 - ci_production_deploy.sh: .env 不存在时给出清晰错误提示（对齐 staging） 本次主因修复：#1958 只补了 staging 的 DOUBAO 注入路径，但生产环境 deploy-production 直接读取服务器上手写的 .env，下次 release 到 main 时 AI 端点同样会因缺 DOUBAO_API_KEY 返回 502。本次同步补齐，确保生产也走 CI 统一渲染管线。	2026-09-16 12:36:19 +08:00
xiaoxia	410487fef5	test(e2e): #1954 用稳定的「下载」按钮断言代替易消失toast+封面选择器收紧 (#1960) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 12:33:17 +08:00
xiaoxia	fc99b5a080	Merge pull request 'fix(staging): 补 DOUBAO_API_KEY 环境变量配置（修复 AI 服务 502）' (#1958) from fix/staging-doubao-key into develop	2026-09-16 12:20:52 +08:00
xiaoxia-agent	300f4b2abd	fix(staging): add DOUBAO_API_KEY to CI env render (fix 502 AI unavailable) ... Root cause: Doubao (ARK) AI client configuration was missing from staging .env template and CI render pipeline. The DOUBAO_API_KEY/MODEL/BASE_URL variables were added to packages/config/api_settings.py but never wired through deploy/configs/.env.staging, render_env.sh shared secrets, or ci-pipeline.yml. After recent PRs that added AI endpoints (ai-rewrite, extract-from-douyin, lipsync/digital-human) calling get_doubao_client(), is_available returned False because settings.doubao_api_key was empty → all AI routes returned 502. Fix: 1. deploy/configs/.env.staging: add DOUBAO_API_KEY/MODEL/BASE_URL/TIMEOUT/MAX_RETRIES 2. deploy/configs/.env.production: same (for prod parity) 3. scripts/render_env.sh: add DOUBAO_API_KEY/MODEL/BASE_URL to SHARED_SECRETS 4. .gitea/workflows/ci-pipeline.yml: pass DOUBAO secrets to deploy-staging env 5. Gitea Actions secrets: DOUBAO_API_KEY/MODEL/BASE_URL added (already set) Verified render_env.sh produces correct .env.rendered with all 19 vars substituted. Full unit test suite: 15523 passed.	2026-09-16 11:54:44 +08:00
xiaoxia	bb47e89a47	fix(wizard): #1954 生成完成后底部按钮显示「下一步：选择封面」+ E2E封面步骤断言 (#1957) ... fix(wizard): #1954 生成完成后底部按钮正确显示「下一步：选择封面」+ E2E封面步骤断言 - GenerateStepActions.tsx: currentStep===4 且 generated&&!generating&&!generateError 时返回「下一步：选择封面」按钮；移除 dead 的 currentStep===5 分支；更新注释反映 5 步结构 - e2e/core-generation.spec.ts: 视频生成完成后断言「下一步：选择封面」可见并点击，进入步骤5后断言 h3「🖼️ 选择封面」可见 + 主按钮消失 Closes #1954	2026-09-16 11:33:55 +08:00
xiaoxia	6155b4d21e	feat(points): 对齐后端积分/订阅 API 最终契约（types + API 层改造） (#1956) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 10:53:58 +08:00
xiaoxia	41cd9cdc56	fix(#1895): /subscription/plans 路由挂载位置修复（解决 404） (#1955) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 09:59:30 +08:00
xiaoxia	799a7f7367	fix(e2e): v4 核心生成向导冒烟测试终点改为「视频生成完成」 (#1953) ... Co-authored-by: xiaoxia <dev@xiaoxiajianji.com> Co-committed-by: xiaoxia <dev@xiaoxiajianji.com>	2026-09-16 09:24:39 +08:00