Data AI
v1.0.0
基于人工智能的网页抓取框架,用于从网站中提取结构化数据。当Codex需要通过AI解析技术爬取、抓取或提取网页数据、处理动态内容或应对复杂HTML结构时使用。
基于人工智能的网页抓取框架,用于从网站中提取结构化数据。当Codex需要通过AI解析技术爬取、抓取或提取网页数据、处理动态内容或应对复杂HTML结构时使用。
使用本地 Crawl4AI 实例进行网页爬取,适用于获取需 JavaScript 渲染的完整页面内容,优于 Tavily 处理复杂页面,无使用限制
使用 crawl4ai 在本地抓取网站以提取联系邮箱,支持多个 URL,输出按域名分组的结果以便明确归属。通过深度抓取并结合联系、关于、支持等 URL 过滤器,在相关页面中查找邮箱地址。适用于从网站提取邮箱、查找联系信息或抓取邮箱地址的场景。