diff --git a/.dockerignore b/.dockerignore new file mode 100644 index 0000000..3c3629e --- /dev/null +++ b/.dockerignore @@ -0,0 +1 @@ +node_modules diff --git a/CHANGELOG.md b/CHANGELOG.md index 9dff237..c0ae99b 100644 --- a/CHANGELOG.md +++ b/CHANGELOG.md @@ -6,6 +6,39 @@ ## 2026-11-11 +### ✨ 新功能 + +**AI 一键出片 · 素材三选一(图片 / Word·PDF 文档 / 网址)** + +- 第 1 步素材来源新增三选一:默认「添加图片」;「上传文档」支持 Word(.docx) 与 PDF,自动提取正文,docx 内嵌图片一并取出当配图,PDF 文字层抽取 + 前几页渲染成画面(扫描件/受保护文档会明确提示换文件);「输入网址」抓取页面正文与配图 +- 网址抓取走同源 `/grab/` 反代(nginx 动态上游):仅放行 http/https,拒绝回环 / 内网 / 链路本地地址与带凭据(`user:pass@`)URL,防止被当跳板打内网;重定向折返回本域再次校验 +- 纯文档 / 纯文字素材没有配图时,自动生成一张标题封面,保证时间轴始终有画面可用 +- 来源打标:素材卡片显示「文档 / 网址」标签,便于区分最近一次导入 +- PDF.js worker 由 vite 打进本地产物,离线可用;新增依赖 `pdfjs-dist` + +**纯文本对话模型也能出片(提示属实化)** + +- AI 面板出片卡片新增提示:「只需纯文本模型即可使用;模型支持多模态(视觉)就能自动生成出片」 +- 未配视觉模型时:调用层剥掉消息里的 `image_url` 图片块(避免不支持多模态的主模型被图片顶回错误),文案 prompt 改为「你看不到图片本身,image 按图片编号顺序循环分配画面(第1段填1、第2段填2…循环)」——纯文本模型照样能出完整片 +- 已配视觉模型时行为不变:逐张压图后看图配画面;`aiVisionAvailable()`(对话模型已配置 && 视觉模型非空)作为唯一判据集中在 `localAi.ts` +- 四步说明第 2 步同步改为不依赖视觉能力的表述:「AI 自动写口播文案,每段配好对应画面」 + +### 🔧 构建 / 质量 + +**`/grab/` 网址反代实测修复(首测即抓出两个致命 bug)** + +- query 传参被误杀:`encodeURIComponent` 的产物 nginx `$arg_` 不做解码,合法目标全部匹配不到 `^https?://` 被打成 400——改为 `X-Grab-Url` 请求头传输目标(免编码),nginx 断言改读 `$http_x_grab_url`,上游侧同名头清空不外泄 +- 裸域名路径错位:`https://host`(无路径)反代时会把原始 `/grab/?url=…` 请求路径透给上游——前端 `new URL(cur).href` 规范化补默认路径 `/` 后再发 +- 实测断言:正例抓取成功;回环 127.0.0.1、内网 192.168.x、`file://` 协议、`user:pass@` 带凭据 URL 全部正确拒绝 + +**断网 lint 门禁修复(external_refs 20 → 0,门禁恢复全绿)** + +- pdf.js 的 XFA/Adobe XML 命名空间字符串(w3.org / xfa.org / adobe.com 等 17 条)登记入 `NAMESPACE_HOSTS` —— 纯命名空间字符串,浏览器不发请求 +- pdf.worker 模板字面量 `http://${A}` 的提取截断产物入白名单(仅 `new URL()` 构造,不发起请求) +- 代码内两处 `example.com` 示例域名删除:文章生成器占位域名改为中文示意文字、候选解析错误提示不再回显域名 +- 官方自有域名入白名单并注明理由:`ai.88531.cn`(官方 AI 网关默认接口 `https://ai.88531.cn/v1` +「获取 Key」引导链接)、`nav.88531.cn`(首页导航站入口)—— 产品默认配置本体,断网时静默降级,删掉功能即失效 +- 实测 `external_refs = 0`(`00_lint_dist.py --dist` 对构建产物复跑确认),`BUILD_EXIT=0` + ### 🏠 首页调整 **移除「受到众多大品牌信赖」品牌背书块** diff --git a/README.md b/README.md index 29d484d..de53ace 100644 --- a/README.md +++ b/README.md @@ -56,6 +56,9 @@ ### 最近更新(2026-11-11) +- **AI 一键出片素材三选一**:图片 / Word·PDF 文档(自动提取正文与配图,扫描件有提示)/ 网址自动抓取正文和配图(同源 `/grab/` 反代,拒绝内网回环目标);纯文字素材自动补标题封面; +- **纯文本模型也能出片**:出片卡片新增提示「只需纯文本模型即可使用;模型支持多模态(视觉)就能自动生成出片」;未配视觉模型时剥掉图片块、按图片编号循环分配画面,纯文本主模型不再被顶回错误; +- **断网 lint 门禁修复**:`external_refs` 20 → 0(PDF.js 命名空间入册、示例域名清除、官方自有域名注明理由入白名单),构建门禁恢复全绿; - **首页移除品牌背书块**:删掉「受到众多大品牌信赖」与 UCAP / 圆通 / 中国电信 / 中国移动 logo 区,功能展示与 AI 功能区直接衔接; - **移除 AI 视频生成 / AI 图片生成页签**:左侧「AI创作」面板只保留「一键出片」与「生成结果」,生图 / 生视频走 AI 助手对话; - **AI 默认接入官方网关**:接口地址与模型全部预填,用户只需粘贴 API Key; diff --git a/data-quality/scripts/site/00_lint_dist.py b/data-quality/scripts/site/00_lint_dist.py index b3ea7ef..336b058 100644 --- a/data-quality/scripts/site/00_lint_dist.py +++ b/data-quality/scripts/site/00_lint_dist.py @@ -109,7 +109,10 @@ def load_allowlist(): return rules -NAMESPACE_HOSTS = {'www.w3.org', 'purl.org', 'schemas.openxmlformats.org', 'www.opengis.net'} +NAMESPACE_HOSTS = {'www.w3.org', 'purl.org', 'schemas.openxmlformats.org', 'www.opengis.net', + # pdf.js XFA/XMP:XML 命名空间与 schema 标识符(xmlns:xfa=...、startsWith判断), + # 浏览器不会发起请求,与 w3.org 同类 + 'www.xfa.org', 'ns.adobe.com'} DOC_EXT = {'.md', '.map', '.txt'} diff --git a/data-quality/scripts/site/external_ref_allowlist.txt b/data-quality/scripts/site/external_ref_allowlist.txt index f414e08..e513278 100644 --- a/data-quality/scripts/site/external_ref_allowlist.txt +++ b/data-quality/scripts/site/external_ref_allowlist.txt @@ -13,6 +13,9 @@ # 说明:unpkg.com / cdn.jsdelivr.net 不在清单里 —— 它们出现在 vendored ffmpeg/tesseract # 的默认参数中,已通过改写 public/ 下的文件指向本地路径,lint 必须能发现回归。 +^http://\$$ allow pdf.worker 模板字面量 http://${A} 的提取截断产物,仅 new URL() 构造不发起请求 +^https://ai\.88531\.cn(/.*)?$ allow 自有域名:官方 AI 网关默认接口地址与「获取 Key」引导链接(产品默认配置本体,删掉功能即失效;断网时静默降级不拦功能) +^https://nav\.88531\.cn(/.*)?$ allow 自有域名:首页导航站入口链接(纯跳转,断网时点击打不开但不影响编辑器功能) github\.com allow vendored 依赖(pixi/semi/opencv 等)压缩产物里的项目主页与许可证链接,仅字符串 gist\.github\.com allow vendored 依赖 README 片段里的示例链接,仅字符串 raw\.githubusercontent\.com allow vendored 依赖 README 片段里的源码链接,仅字符串 diff --git a/nginx.conf b/nginx.conf index ec04168..feabf5d 100644 --- a/nginx.conf +++ b/nginx.conf @@ -99,6 +99,28 @@ server { client_max_body_size 1m; } + # 网址抓取(AI 一键出片「输入网址」):同源动态反代任意公网 URL。 + # 浏览器只请求 /grab/,避开跨域限制;只放行 http/https, + # 并拒绝回环/内网/链路本地地址,防止被当成跳板打内网服务。 + # 目标放 X-Grab-Url 头里:query 传参要 percent-编码,而 nginx $arg_ 不做解码, + # 会把 encodeURIComponent 过的合法目标误杀成 400(实测)。3xx 原样透传给前端, + # 由 redirect:manual 逐跳重进 /grab/(每跳重新过一遍下面的断言)。 + location = /grab/ { + resolver 223.5.5.5 119.29.29.29 valid=30s ipv6=off; + if ($http_x_grab_url = '') { return 400; } + if ($http_x_grab_url !~* '^https?://') { return 400; } + if ($http_x_grab_url ~* '^https?://[^/?#]*@') { return 403; } + if ($http_x_grab_url ~* '^https?://(localhost|127\.|0\.0\.0\.0|10\.|192\.168\.|169\.254\.|172\.(1[6-9]|2[0-9]|3[01])\.|\[?::1)') { return 403; } + proxy_pass $http_x_grab_url; + proxy_ssl_server_name on; + proxy_set_header Host $proxy_host; + proxy_set_header Connection ""; + proxy_set_header X-Grab-Url ""; + proxy_http_version 1.1; + proxy_read_timeout 20s; + proxy_send_timeout 20s; + } + # 本机 LLM 网关(NewAPI,OpenAI 兼容 /v1)同源反代: # 浏览器只请求 https://<站点>/newapi/v1/*,既避免 HTTPS 页面直连 HTTP 被拦(混合内容), # 也保证站点在只有本机网络时可用。密钥仍留在服务端,前端不出现。 diff --git a/package.json b/package.json index e80b2e1..87ac5b3 100644 --- a/package.json +++ b/package.json @@ -48,6 +48,7 @@ "p-limit": "^4.0.0", "pixi-color-effects": "^1.0.0", "pixi-filters": "^5.2.1", + "pdfjs-dist": "^4.7.76", "pixi.js": "^7.3.0", "pubsub-js": "^1.9.4", "qrcode": "^1.5.4", diff --git a/src/pages/editor/components/sources/ai/AiMain.tsx b/src/pages/editor/components/sources/ai/AiMain.tsx index 1389221..19de317 100644 --- a/src/pages/editor/components/sources/ai/AiMain.tsx +++ b/src/pages/editor/components/sources/ai/AiMain.tsx @@ -42,6 +42,7 @@ export default function AiMain() { 字幕动效 画面转场 +
只需纯文本模型即可使用;模型支持多模态(视觉)就能自动生成出片
立即生成 →
@@ -61,7 +62,7 @@ export default function AiMain() {

四步出一条视频

  1. 添加几张图片,写一个标题
  2. -
  3. AI 看懂图片,自动写出口播文案
  4. +
  5. AI 自动写口播文案,每段配好对应画面
  6. 挑人声、情绪、语速,试听满意再合成
  7. 确认生成:图片排进时间轴,自动加字幕、配音、运镜和转场
diff --git a/src/pages/editor/components/sources/ai/QuickVideo.tsx b/src/pages/editor/components/sources/ai/QuickVideo.tsx index b33f83a..c76c753 100644 --- a/src/pages/editor/components/sources/ai/QuickVideo.tsx +++ b/src/pages/editor/components/sources/ai/QuickVideo.tsx @@ -1,5 +1,19 @@ import React, { useCallback, useEffect, useMemo, useRef, useState } from 'react'; -import { Modal, Steps, Button, Input, TextArea, Select, Slider, Toast, Spin, Tag, Empty } from '@douyinfe/semi-ui'; +import { + Modal, + Steps, + Button, + Input, + TextArea, + Select, + Slider, + Toast, + Spin, + Tag, + Empty, + Radio, + RadioGroup, +} from '@douyinfe/semi-ui'; import { VolumeNotice, Delete, Up, Down, Plus, Play, MusicOne } from '@icon-park/react'; import styles from './quickvideo.module.less'; import { addImageVideoAudioItem } from '../addItem'; @@ -15,6 +29,7 @@ import { synthesizeSegment, decodeAudio, } from '@utils/aiQuickVideo'; +import { parseDocx, parsePdf, importFromUrl, makeTitleCover } from '@utils/sourceImport'; /** 界面上的文案段(带稳定 uid,便于配音结果对应) */ type Seg = QvSegment & { uid: string }; @@ -37,7 +52,20 @@ interface PickImage { h: number; } -const STEP_TITLES = ['图片与标题', '生成文案', '配置声音', '确认生成']; +const STEP_TITLES = ['素材与标题', '生成文案', '配置声音', '确认生成']; + +/** 素材来源:图片 / 文档 / 网址(第 1 步的输入方式) */ +type SrcMode = 'image' | 'doc' | 'url'; +const GEN_LABEL: Record = { + image: '① 识别图片 · 生成文案', + doc: '① 读取文档 · 生成文案', + url: '① 分析网页 · 生成文案', +}; +const GEN_LOADING: Record = { + image: '正在识别图片写文案…', + doc: '正在读取文档写文案…', + url: '正在分析网页写文案…', +}; const MAX_IMAGES = 8; const { Option } = Select; @@ -305,6 +333,12 @@ export default function QuickVideo({ const [title, setTitle] = useState(''); const [style, setStyle] = useState(COPY_STYLES[0].value); + /* 素材来源:图片 / Word·PDF 文档 / 网址(src 是最近一次成功导入的正文) */ + const [mode, setMode] = useState('image'); + const [src, setSrc] = useState<{ mode: SrcMode; text: string; name: string } | null>(null); + const [urlInput, setUrlInput] = useState(''); + const [importing, setImporting] = useState(false); + const [segs, setSegs] = useState([]); const [genLoading, setGenLoading] = useState(false); @@ -328,6 +362,7 @@ export default function QuickVideo({ const [capEnter, setCapEnter] = useState('zoom'); const fileRef = useRef(null); + const docRef = useRef(null); const playingRef = useRef