用于从网页中抓取和提取数据的网络爬虫工具
用于从网页中抓取和提取数据的网络爬虫工具
为 Namecheap 域名提供安全的 DNS 记录管理。通过自动安全检查和模拟运行模式,获取、添加、删除、备份和恢复 DNS 记录,防止因 Namecheap API 的破坏性 setHosts 方法导致 DNS 记录意外清空。
OpenClaw 网页抓取结果的封装技能,适用于需要对抓取页面进行 MECE 后处理的场景:基于内容信号进行策略决策、隐私信息脱敏、可选的 Markdown 标准化回退,以及无需重新实现网络抓取即可获得稳定输出格式
通过 markdown.new 服务从任意网址获取精简、专为代理优化的 Markdown 内容。当 web_fetch 或浏览器无法提供干净内容,或需要节省令牌的网页版本以进行深度分析时使用。
持久研究线程管理器,带命令行界面用于跟踪主题、笔记、源文件和发现成果。配合每日定时任务,逐步构建个人研究简报。分发的代码为本地Python命令行工具,用于管理线程;研究工作由代理通过其标准的网页搜索和网页抓取工具执行。
使用OpenClaw的网页搜索和抓取功能,以合规设计搜索微信公众号文章
无需API密钥或外部依赖的简单网页内容获取工具,仅使用Python标准库(urllib)。支持从URL获取HTML/文本内容,提供基本的HTML转Markdown功能,并通过路径校验确保文件写入安全(阻止系统路径访问),同时校验URL(阻止本地主机和内网地址)。文件写入使用is_safe_path()防止恶意写入,适用于无API成本和依赖的内容聚合、研究收集和网页抓取。
为XMTP代理提供ENS和Web3身份解析功能,用于解析域名、提取提及信息或获取Farcaster资料。在进行ENS解析、Farcaster查询或提及提取时触发。