全新爬虫界面与用户体验
非官方测试版翻译
本页面由 PageTurner AI 翻译(测试版)。未经项目官方认可。 发现错误? 报告问题 →
Algolia 爬虫可视化界面提供了一种更新、更友好的方式来管理爬取设置并监控索引过程。本指南将介绍新界面的主要功能。
DocSearch 标签页
爬虫界面现包含专门的 DocSearch 标签页,该标签页提供了在网站实现 DocSearch 所需的所有功能,包括:
-
实现代码:可直接复制粘贴的代码片段,用于将 DocSearch 集成到前端
-
API 密钥:您唯一的 Application ID 和 Search API Key,用于连接 Algolia 索引
-
快速链接:用于查看记录、探索文档以及加入支持 Discord 的访问入口

触发新爬取
前往 Overview 区域即可 start、restart 或 pause 爬取任务,并查看实时摘要

监控爬取任务
Monitoring 区域可帮助您发现爬取错误或优化搜索结果

更新配置
您可通过两种方式更新爬虫配置:
可视化配置界面: 使用全新的可视化配置界面,无需编写代码即可快速编辑常用选项

代码编辑器:
对于高级配置,可使用实时代码编辑器直接修改配置文件并测试 URL(URL tester)

URL 测试器
通过editor可使用 URL 测试器调试选择器或查看爬虫解析网站的方式

建议功能
爬虫界面的 建议 区域提供可操作的反馈,帮助改进爬取和数据提取效果。每次爬取后您将看到针对以下方面的优化建议:
-
修复重定向或域名问题
-
处理被忽略或失败的 URL
-
添加缺失的站点地图
每条建议均包含问题描述、解决方案以及相关文档或监控工具的快速链接,助您高效解决问题并优化搜索体验
