From 5b8e53f9c8ee6faeb9b5999e7b56550b39762873 Mon Sep 17 00:00:00 2001
From: 3970260761 <3970260761@qq.com>
Date: Wed, 11 Nov 2026 14:21:39 +0800
Subject: [PATCH] =?UTF-8?q?AI=E4=B8=80=E9=94=AE=E5=87=BA=E7=89=87=E7=B4=A0?=
=?UTF-8?q?=E6=9D=90=E4=B8=89=E9=80=89=E4=B8=80=E4=B8=8E=E7=BA=AF=E6=96=87?=
=?UTF-8?q?=E6=9C=AC=E6=A8=A1=E5=9E=8B=E6=8F=90=E7=A4=BA=EF=BC=9B=E4=BF=AE?=
=?UTF-8?q?=E5=A4=8D/grab/=E7=BD=91=E5=9D=80=E5=8F=8D=E4=BB=A3=E4=B8=A4?=
=?UTF-8?q?=E4=B8=AA=E8=87=B4=E5=91=BDbug=EF=BC=9B=E6=96=AD=E7=BD=91lint?=
=?UTF-8?q?=E9=97=A8=E7=A6=81external=5Frefs=E5=BD=92=E9=9B=B6?=
MIME-Version: 1.0
Content-Type: text/plain; charset=UTF-8
Content-Transfer-Encoding: 8bit
- 素材导入三选一:图片 / Word·PDF 文档(新 sourceImport.ts 解析正文与内嵌配图)/ 输入网址(抓取正文与配图)
- AI出片卡片新增提示「只需纯文本模型即可使用;模型支持多模态(视觉)就能自动生成出片」,四步说明第2步改为「AI 自动写口播文案,每段配好对应画面」
- /grab/ 反代改 X-Grab-Url 头传参:修复 encodeURIComponent 产物被 $arg_ 不解码误杀400、裸域名路径错位两个bug;SSRF防护(回环/内网/file/带凭据403、缺头400)保留
- 断网lint门禁 external_refs 20→0:PDF.js命名空间、example.com示例域名、${A}截断产物、ai/nav.88531.cn 自有域名登记白名单
- README/CHANGELOG 已同步本次更新
---
.dockerignore | 1 +
CHANGELOG.md | 33 ++
README.md | 3 +
data-quality/scripts/site/00_lint_dist.py | 5 +-
.../scripts/site/external_ref_allowlist.txt | 3 +
nginx.conf | 22 +
package.json | 1 +
.../editor/components/sources/ai/AiMain.tsx | 3 +-
.../components/sources/ai/QuickVideo.tsx | 204 ++++++++-
.../sources/ai/quickvideo.module.less | 74 +++
.../components/sources/ai/styles.module.less | 7 +
src/utils/aiQuickVideo.ts | 62 ++-
src/utils/localAi.ts | 23 +-
src/utils/sourceImport.ts | 420 ++++++++++++++++++
yarn.lock | 216 ++++++++-
15 files changed, 1049 insertions(+), 28 deletions(-)
create mode 100644 .dockerignore
create mode 100644 src/utils/sourceImport.ts
diff --git a/.dockerignore b/.dockerignore
new file mode 100644
index 0000000..3c3629e
--- /dev/null
+++ b/.dockerignore
@@ -0,0 +1 @@
+node_modules
diff --git a/CHANGELOG.md b/CHANGELOG.md
index 9dff237..c0ae99b 100644
--- a/CHANGELOG.md
+++ b/CHANGELOG.md
@@ -6,6 +6,39 @@
## 2026-11-11
+### ✨ 新功能
+
+**AI 一键出片 · 素材三选一(图片 / Word·PDF 文档 / 网址)**
+
+- 第 1 步素材来源新增三选一:默认「添加图片」;「上传文档」支持 Word(.docx) 与 PDF,自动提取正文,docx 内嵌图片一并取出当配图,PDF 文字层抽取 + 前几页渲染成画面(扫描件/受保护文档会明确提示换文件);「输入网址」抓取页面正文与配图
+- 网址抓取走同源 `/grab/` 反代(nginx 动态上游):仅放行 http/https,拒绝回环 / 内网 / 链路本地地址与带凭据(`user:pass@`)URL,防止被当跳板打内网;重定向折返回本域再次校验
+- 纯文档 / 纯文字素材没有配图时,自动生成一张标题封面,保证时间轴始终有画面可用
+- 来源打标:素材卡片显示「文档 / 网址」标签,便于区分最近一次导入
+- PDF.js worker 由 vite 打进本地产物,离线可用;新增依赖 `pdfjs-dist`
+
+**纯文本对话模型也能出片(提示属实化)**
+
+- AI 面板出片卡片新增提示:「只需纯文本模型即可使用;模型支持多模态(视觉)就能自动生成出片」
+- 未配视觉模型时:调用层剥掉消息里的 `image_url` 图片块(避免不支持多模态的主模型被图片顶回错误),文案 prompt 改为「你看不到图片本身,image 按图片编号顺序循环分配画面(第1段填1、第2段填2…循环)」——纯文本模型照样能出完整片
+- 已配视觉模型时行为不变:逐张压图后看图配画面;`aiVisionAvailable()`(对话模型已配置 && 视觉模型非空)作为唯一判据集中在 `localAi.ts`
+- 四步说明第 2 步同步改为不依赖视觉能力的表述:「AI 自动写口播文案,每段配好对应画面」
+
+### 🔧 构建 / 质量
+
+**`/grab/` 网址反代实测修复(首测即抓出两个致命 bug)**
+
+- query 传参被误杀:`encodeURIComponent` 的产物 nginx `$arg_` 不做解码,合法目标全部匹配不到 `^https?://` 被打成 400——改为 `X-Grab-Url` 请求头传输目标(免编码),nginx 断言改读 `$http_x_grab_url`,上游侧同名头清空不外泄
+- 裸域名路径错位:`https://host`(无路径)反代时会把原始 `/grab/?url=…` 请求路径透给上游——前端 `new URL(cur).href` 规范化补默认路径 `/` 后再发
+- 实测断言:正例抓取成功;回环 127.0.0.1、内网 192.168.x、`file://` 协议、`user:pass@` 带凭据 URL 全部正确拒绝
+
+**断网 lint 门禁修复(external_refs 20 → 0,门禁恢复全绿)**
+
+- pdf.js 的 XFA/Adobe XML 命名空间字符串(w3.org / xfa.org / adobe.com 等 17 条)登记入 `NAMESPACE_HOSTS` —— 纯命名空间字符串,浏览器不发请求
+- pdf.worker 模板字面量 `http://${A}` 的提取截断产物入白名单(仅 `new URL()` 构造,不发起请求)
+- 代码内两处 `example.com` 示例域名删除:文章生成器占位域名改为中文示意文字、候选解析错误提示不再回显域名
+- 官方自有域名入白名单并注明理由:`ai.88531.cn`(官方 AI 网关默认接口 `https://ai.88531.cn/v1` +「获取 Key」引导链接)、`nav.88531.cn`(首页导航站入口)—— 产品默认配置本体,断网时静默降级,删掉功能即失效
+- 实测 `external_refs = 0`(`00_lint_dist.py --dist` 对构建产物复跑确认),`BUILD_EXIT=0`
+
### 🏠 首页调整
**移除「受到众多大品牌信赖」品牌背书块**
diff --git a/README.md b/README.md
index 29d484d..de53ace 100644
--- a/README.md
+++ b/README.md
@@ -56,6 +56,9 @@
### 最近更新(2026-11-11)
+- **AI 一键出片素材三选一**:图片 / Word·PDF 文档(自动提取正文与配图,扫描件有提示)/ 网址自动抓取正文和配图(同源 `/grab/` 反代,拒绝内网回环目标);纯文字素材自动补标题封面;
+- **纯文本模型也能出片**:出片卡片新增提示「只需纯文本模型即可使用;模型支持多模态(视觉)就能自动生成出片」;未配视觉模型时剥掉图片块、按图片编号循环分配画面,纯文本主模型不再被顶回错误;
+- **断网 lint 门禁修复**:`external_refs` 20 → 0(PDF.js 命名空间入册、示例域名清除、官方自有域名注明理由入白名单),构建门禁恢复全绿;
- **首页移除品牌背书块**:删掉「受到众多大品牌信赖」与 UCAP / 圆通 / 中国电信 / 中国移动 logo 区,功能展示与 AI 功能区直接衔接;
- **移除 AI 视频生成 / AI 图片生成页签**:左侧「AI创作」面板只保留「一键出片」与「生成结果」,生图 / 生视频走 AI 助手对话;
- **AI 默认接入官方网关**:接口地址与模型全部预填,用户只需粘贴 API Key;
diff --git a/data-quality/scripts/site/00_lint_dist.py b/data-quality/scripts/site/00_lint_dist.py
index b3ea7ef..336b058 100644
--- a/data-quality/scripts/site/00_lint_dist.py
+++ b/data-quality/scripts/site/00_lint_dist.py
@@ -109,7 +109,10 @@ def load_allowlist():
return rules
-NAMESPACE_HOSTS = {'www.w3.org', 'purl.org', 'schemas.openxmlformats.org', 'www.opengis.net'}
+NAMESPACE_HOSTS = {'www.w3.org', 'purl.org', 'schemas.openxmlformats.org', 'www.opengis.net',
+ # pdf.js XFA/XMP:XML 命名空间与 schema 标识符(xmlns:xfa=...、startsWith判断),
+ # 浏览器不会发起请求,与 w3.org 同类
+ 'www.xfa.org', 'ns.adobe.com'}
DOC_EXT = {'.md', '.map', '.txt'}
diff --git a/data-quality/scripts/site/external_ref_allowlist.txt b/data-quality/scripts/site/external_ref_allowlist.txt
index f414e08..e513278 100644
--- a/data-quality/scripts/site/external_ref_allowlist.txt
+++ b/data-quality/scripts/site/external_ref_allowlist.txt
@@ -13,6 +13,9 @@
# 说明:unpkg.com / cdn.jsdelivr.net 不在清单里 —— 它们出现在 vendored ffmpeg/tesseract
# 的默认参数中,已通过改写 public/ 下的文件指向本地路径,lint 必须能发现回归。
+^http://\$$ allow pdf.worker 模板字面量 http://${A} 的提取截断产物,仅 new URL() 构造不发起请求
+^https://ai\.88531\.cn(/.*)?$ allow 自有域名:官方 AI 网关默认接口地址与「获取 Key」引导链接(产品默认配置本体,删掉功能即失效;断网时静默降级不拦功能)
+^https://nav\.88531\.cn(/.*)?$ allow 自有域名:首页导航站入口链接(纯跳转,断网时点击打不开但不影响编辑器功能)
github\.com allow vendored 依赖(pixi/semi/opencv 等)压缩产物里的项目主页与许可证链接,仅字符串
gist\.github\.com allow vendored 依赖 README 片段里的示例链接,仅字符串
raw\.githubusercontent\.com allow vendored 依赖 README 片段里的源码链接,仅字符串
diff --git a/nginx.conf b/nginx.conf
index ec04168..feabf5d 100644
--- a/nginx.conf
+++ b/nginx.conf
@@ -99,6 +99,28 @@ server {
client_max_body_size 1m;
}
+ # 网址抓取(AI 一键出片「输入网址」):同源动态反代任意公网 URL。
+ # 浏览器只请求 /grab/,避开跨域限制;只放行 http/https,
+ # 并拒绝回环/内网/链路本地地址,防止被当成跳板打内网服务。
+ # 目标放 X-Grab-Url 头里:query 传参要 percent-编码,而 nginx $arg_ 不做解码,
+ # 会把 encodeURIComponent 过的合法目标误杀成 400(实测)。3xx 原样透传给前端,
+ # 由 redirect:manual 逐跳重进 /grab/(每跳重新过一遍下面的断言)。
+ location = /grab/ {
+ resolver 223.5.5.5 119.29.29.29 valid=30s ipv6=off;
+ if ($http_x_grab_url = '') { return 400; }
+ if ($http_x_grab_url !~* '^https?://') { return 400; }
+ if ($http_x_grab_url ~* '^https?://[^/?#]*@') { return 403; }
+ if ($http_x_grab_url ~* '^https?://(localhost|127\.|0\.0\.0\.0|10\.|192\.168\.|169\.254\.|172\.(1[6-9]|2[0-9]|3[01])\.|\[?::1)') { return 403; }
+ proxy_pass $http_x_grab_url;
+ proxy_ssl_server_name on;
+ proxy_set_header Host $proxy_host;
+ proxy_set_header Connection "";
+ proxy_set_header X-Grab-Url "";
+ proxy_http_version 1.1;
+ proxy_read_timeout 20s;
+ proxy_send_timeout 20s;
+ }
+
# 本机 LLM 网关(NewAPI,OpenAI 兼容 /v1)同源反代:
# 浏览器只请求 https://<站点>/newapi/v1/*,既避免 HTTPS 页面直连 HTTP 被拦(混合内容),
# 也保证站点在只有本机网络时可用。密钥仍留在服务端,前端不出现。
diff --git a/package.json b/package.json
index e80b2e1..87ac5b3 100644
--- a/package.json
+++ b/package.json
@@ -48,6 +48,7 @@
"p-limit": "^4.0.0",
"pixi-color-effects": "^1.0.0",
"pixi-filters": "^5.2.1",
+ "pdfjs-dist": "^4.7.76",
"pixi.js": "^7.3.0",
"pubsub-js": "^1.9.4",
"qrcode": "^1.5.4",
diff --git a/src/pages/editor/components/sources/ai/AiMain.tsx b/src/pages/editor/components/sources/ai/AiMain.tsx
index 1389221..19de317 100644
--- a/src/pages/editor/components/sources/ai/AiMain.tsx
+++ b/src/pages/editor/components/sources/ai/AiMain.tsx
@@ -42,6 +42,7 @@ export default function AiMain() {
字幕动效
画面转场
+
只需纯文本模型即可使用;模型支持多模态(视觉)就能自动生成出片
立即生成 →
@@ -61,7 +62,7 @@ export default function AiMain() {
四步出一条视频
- 添加几张图片,写一个标题
- - AI 看懂图片,自动写出口播文案
+ - AI 自动写口播文案,每段配好对应画面
- 挑人声、情绪、语速,试听满意再合成
- 确认生成:图片排进时间轴,自动加字幕、配音、运镜和转场
diff --git a/src/pages/editor/components/sources/ai/QuickVideo.tsx b/src/pages/editor/components/sources/ai/QuickVideo.tsx
index b33f83a..c76c753 100644
--- a/src/pages/editor/components/sources/ai/QuickVideo.tsx
+++ b/src/pages/editor/components/sources/ai/QuickVideo.tsx
@@ -1,5 +1,19 @@
import React, { useCallback, useEffect, useMemo, useRef, useState } from 'react';
-import { Modal, Steps, Button, Input, TextArea, Select, Slider, Toast, Spin, Tag, Empty } from '@douyinfe/semi-ui';
+import {
+ Modal,
+ Steps,
+ Button,
+ Input,
+ TextArea,
+ Select,
+ Slider,
+ Toast,
+ Spin,
+ Tag,
+ Empty,
+ Radio,
+ RadioGroup,
+} from '@douyinfe/semi-ui';
import { VolumeNotice, Delete, Up, Down, Plus, Play, MusicOne } from '@icon-park/react';
import styles from './quickvideo.module.less';
import { addImageVideoAudioItem } from '../addItem';
@@ -15,6 +29,7 @@ import {
synthesizeSegment,
decodeAudio,
} from '@utils/aiQuickVideo';
+import { parseDocx, parsePdf, importFromUrl, makeTitleCover } from '@utils/sourceImport';
/** 界面上的文案段(带稳定 uid,便于配音结果对应) */
type Seg = QvSegment & { uid: string };
@@ -37,7 +52,20 @@ interface PickImage {
h: number;
}
-const STEP_TITLES = ['图片与标题', '生成文案', '配置声音', '确认生成'];
+const STEP_TITLES = ['素材与标题', '生成文案', '配置声音', '确认生成'];
+
+/** 素材来源:图片 / 文档 / 网址(第 1 步的输入方式) */
+type SrcMode = 'image' | 'doc' | 'url';
+const GEN_LABEL: Record = {
+ image: '① 识别图片 · 生成文案',
+ doc: '① 读取文档 · 生成文案',
+ url: '① 分析网页 · 生成文案',
+};
+const GEN_LOADING: Record = {
+ image: '正在识别图片写文案…',
+ doc: '正在读取文档写文案…',
+ url: '正在分析网页写文案…',
+};
const MAX_IMAGES = 8;
const { Option } = Select;
@@ -305,6 +333,12 @@ export default function QuickVideo({
const [title, setTitle] = useState('');
const [style, setStyle] = useState(COPY_STYLES[0].value);
+ /* 素材来源:图片 / Word·PDF 文档 / 网址(src 是最近一次成功导入的正文) */
+ const [mode, setMode] = useState('image');
+ const [src, setSrc] = useState<{ mode: SrcMode; text: string; name: string } | null>(null);
+ const [urlInput, setUrlInput] = useState('');
+ const [importing, setImporting] = useState(false);
+
const [segs, setSegs] = useState([]);
const [genLoading, setGenLoading] = useState(false);
@@ -328,6 +362,7 @@ export default function QuickVideo({
const [capEnter, setCapEnter] = useState('zoom');
const fileRef = useRef(null);
+ const docRef = useRef(null);
const playingRef = useRef