12 Commits
Author SHA1 Message Date
hz4th_coder dcd13dec4f 抓取前检查内容库是否已存在相同链接
- 抓取前先搜索内容库检查 URL 是否已存在
- 已存在的链接标记为黄色,显示'已存在'
- 避免重复抓取和保存
- 添加 checkUrlExists 函数
v1.6.1
2026-07-13 17:20:33 +08:00
hz4th_coder c3eef4fa21 互联网搜索支持多搜索引擎选择
- 新增搜索引擎选择下拉框
- 支持 Bing 中国(默认)、Bing 国际、Google、百度
- 后端 API 支持 engine 参数
- 添加百度搜索结果解析方法
v1.6.0
2026-07-13 17:03:26 +08:00
hz4th_coder 9d6481bd06 修复页面内容提取,过滤 JSON 错误信息
- 改进 StaticText 解析逻辑
- 过滤知乎等网站的反爬 JSON 错误
- 正确提取页面文本内容
v1.5.1
2026-07-13 16:56:08 +08:00
hz4th_coder e13e4074f1 互联网搜索独立页面 + 一键保存全部功能
- 新增独立搜索页面 /search
- 支持一键保存所有搜索结果到内容库
- 支持自动抓取和自动保存选项
- 显示保存进度条
- 主页添加搜索入口链接
- 搜索结果状态实时显示(已抓取/已保存)
v1.5.0
2026-07-13 16:38:14 +08:00
hz4th_coder 20f3ec1f18 修复页面抓取功能,使用 agent-browser 替代 requests
- 改用浏览器方式抓取页面内容,绑过反爬虫机制
- 从 accessibility tree snapshot 中提取文本内容
- 增加等待时间让页面完全加载
- 可抓取知乎等有反爬措施的网站
v1.4.1
2026-07-13 12:14:21 +08:00
hz4th_coder 7bb5a250c8 前端增加人工互联网搜索功能
- 新增互联网搜索面板,支持手动输入关键词搜索
- 搜索结果展示为卡片形式,显示标题和链接
- 支持抓取单个结果的详细内容
- 可一键保存搜索结果到内容库
- 新增搜索 API 端点:/api/articles/internet-search
- 搜索结果详情模态框展示
- 响应式设计,搜索结果自适应布局
v1.4.0
2026-07-13 12:04:20 +08:00
hz4th_coder 4f02a6a0ea 实现浏览器方式互联网搜索功能
- 使用 agent-browser 浏览器自动化进行 Bing 搜索
- 解析 accessibility tree 提取搜索结果
- 自动获取每个结果的 URL
- 支持设置最大结果数量
v1.3.0
2026-07-13 11:55:33 +08:00
hz4th_coder 187d5037b8 添加Git推送说明文档 2026-07-12 01:24:46 +08:00
hz4th_coder 47729a52da 添加部署文档和说明 v1.2.0 2026-07-12 01:24:19 +08:00
hz4th_coder 8ad0246567 添加前端界面和操作页面
功能:
- 统计数据展示
- 待处理产品列表管理
- 内容库文章展示和搜索
- 处理历史查看
- 系统配置管理
- 添加产品/文章的模态框
- 手动触发处理和批量处理

界面设计:
- 现代化渐变风格
- 响应式布局
- 交互式操作按钮
- 实时数据刷新
v1.1.0
2026-07-12 01:23:15 +08:00
hz4th_coder e3bc88343a 添加.gitignore文件,排除缓存和临时文件 v1.0.0 2026-07-12 01:08:08 +08:00
hz4th_coder b7b09251f8 初始化参数数据自动化管理系统
功能:
- 文章内容库管理
- 待处理产品列表管理
- 自动处理流程
- 智能搜索和数据提取
- ParamHub API集成
- 定时任务调度

部署端口: 16043
2026-07-12 01:07:26 +08:00