语义搜索与排序发现
使用自然语言查询搜索网络,并接收带标题和描述的排序链接;当你需要在提取前先进行发现时,这很有用。
Olostep 是面向 AI agents 和开发团队的 Web 数据基础设施平台,可通过一个 API 搜索、抓取、爬取、结构化和监控网页内容。该网站将其定位为一种以结构化、LLM-ready 输出来支持研究、增强、RAG 和实时数据工作流的方式。
其公开 API 按不同任务划分为多个聚焦端点:Scrapes 用于已知 URL,Maps 用于域名 URL 发现,Crawls 用于多页面站点遍历,Batches 用于大型任意 URL 列表,Searches 用于语义发现,Answers 用于带来源依据的回复,Monitors 用于定期检查。主页还展示了原生 Python 和 NodeJS SDK 客户端,以及 cURL 示例,因此团队可以通过代码或直接通过 HTTP 使用该服务。
使用自然语言查询搜索网络,并接收带标题和描述的排序链接;当你需要在提取前先进行发现时,这很有用。
从你已知的 URL 中提取内容,并可请求 markdown、HTML、文本、JSON、截图和解析器输出等格式。
从起始 URL 开始,结合深度和页面限制遍历网站,然后分别列出页面并检索每个页面的内容。
通过筛选和 cursor 分页发现某个域名下的 URL,有助于在不维护自有发现管道的情况下构建来源列表。
在一个任务中处理大型任意 URL 列表,并支持解析器、元数据、webhook 和基于 cursor 的条目访问。
设置定期监控以跟踪网页,并通过 email、Slack、SMS 或 webhook 发送变更提醒。
当你需要从自然语言问题中获得排序后的链接,并希望在不自行维护搜索抓取器的情况下从发现过渡到提取时,使用 Search。
当你已经知道 URL,并且需要以特定格式(如 markdown、HTML、JSON 或截图)获取页面内容用于下游处理时,使用 Scrapes。
当内容分布在网站中,例如文档、博客或其他多页面结构,并且你需要从起始 URL 逐页检索时,使用 Crawls。
当你需要先盘点某个域名上的 URL,再决定要抓取或进一步处理哪些页面时,使用 Maps。
当你有一份大型任意 URL 列表,并希望在一个任务中以可预测的完成方式以及 webhooks 等运维工具进行处理时,使用 Batches。
Olostep 为不同的 Web 数据任务提供了聚焦的端点。源页面说明,Scrapes 用于已知的单个 URL,Maps 用于发现某个域名上的 URL,Crawls 用于从起始 URL 遍历网站,Batches 用于大型任意 URL 列表,Searches 用于排序后的网页结果,Answers 用于带来源依据的自然语言回复,Monitors 用于定期检查。
源信息显示了原生 Python 和 NodeJS SDK 客户端,以及 cURL 示例。公开页面还展示了针对 Scrapes、Crawls、Maps 和 Batches 的按端点 HTTP 请求与代码示例。
定价页面说明免费试用包含 500 次成功请求,付费方案从每月 9 美元起。同一页面还提到可加购的额度包以及自定义定价的企业方案。
主页显示 Scrapes 可返回 markdown、HTML、截图和 JSON,而端点页面还提到 text 和 parser output。Crawls 会返回每页的 retrieve ID,之后可从 /v1/retrieve 获取内容。
端点页面将 Monitors 描述为可检测页面变更并通过 email、Slack、SMS 或 webhook 发送提醒的定期检查。主页和定价页更侧重 Web 数据 API,而 monitors 的详细信息出现在端点概览页。
Mindcase 是一款 web data API 和控制台,可从网站及主流在线平台提取结构化数据。支持通过 prompt 或 API 获取清洗后的数据行,按预付费按记录计费。
ByteAsk 是面向 C 和 C++ 的终端优先 AI 编码 agent,可直接编辑仓库,并在展示 diff 前用真实编译器、调试器、sanitizers 和测试验证修改。提供免费版与付费方案。
CreateOS Sandbox 是基于 Firecracker 微型虚拟机的隔离计算环境,用于运行代码和 agent 工作负载,支持私有网络、SDK、CLI 和 MCP 程序化控制。
hob 是面向编码 agent 的独立工作区,可将 agent 会话、终端、历史记录和后续工作围绕你已在用的工具与提供商有序管理,适合重视本地路由、历史和工作区结构控制的开发者。
Ably Chat 是用于构建自定义实时聊天应用的 chat API 平台,支持房间消息、输入指示、在线状态、表情回应与消息更新,并提供按使用量计费选项。
Manta AI 是面向团队的自治式网页应用测试工具,可从 URL 自动探索应用、映射行为、捕捉回归,并用自然语言生成测试,无需脚本或维护选择器。