跳转到内容

把 Firecrawl 连接到你的 MonstarX 应用

要点Firecrawl 替你的应用读取网页,返回去掉菜单和广告后的整洁文字。把你的 Firecrawl API 密钥粘贴到“后端 → 云服务”中,然后提出功能需求,比如“粘贴菜谱链接,导入菜谱”。它可以读取单个页面、整个网站,或搜索网络并读取搜索结果。

从应用中读取和搜索网页。

类型
用于你的应用
类别
网页数据与调研
连接方式
API 密钥

Firecrawl 是一项访问网页并把页面内容整理成整洁文字的服务,你的应用或应用里的 AI 可以直接使用这些文字。当你的应用需要其他网站的内容时,就连接它:比如链接里的一份菜谱、供应商网站上的商品、一篇文章的正文。

  • 从链接导入:粘贴菜谱、招聘启事或商品链接,用页面内容自动填写表单。
  • 链接预览:显示页面的标题、摘要和主图。
  • 价格或变动监控:检查一组页面,告诉你哪些内容变了。
  • 调研工具:搜索网络并读取排名靠前的结果,再用 AI 总结。
  • 网站导入:读取旧网站的每个页面,把内容搬到你的新应用中。
任务你的应用得到什么
抓取单个页面整洁文字(markdown)格式的页面内容,去掉了菜单、Cookie 提示条和广告。
爬取整个网站从起始地址出发能访问到的所有页面。大网站需要一些时间,所以应用会反复查看,直到完成。
搜索网络某次搜索的结果,以及每个页面的文字。

结合 AI,你的应用还能把页面内容提取成准确的字段,比如名称、价格和描述。

MonstarX 内置的网页搜索已经可以从网络上查找答案并附上来源(参阅为应用添加 AI 功能中的“应用能搜索网页吗?”)。当你的应用需要页面的完整内容时,才需要 Firecrawl。

  1. 登录 Firecrawl,打开控制台中的 API Keys。

  2. 复制你的密钥(以 fc- 开头)。

  1. 打开你的项目,点击顶部栏中的后端,再点击云服务。

  2. 在连接器下,点击 Firecrawl 旁边的连接。

  3. 把密钥粘贴到 API 密钥中。

  4. 点击连接 Firecrawl。这一行会显示已连接,你的预览会带着这个密钥重新启动。

你输入会发生什么
“让我能粘贴菜谱链接,用页面内容填写菜谱表单。”Firecrawl 读取页面,AI 从中提取标题、食材和步骤。
“把我的旧网站 oldsite.com 的每个页面都导入为博客文章。”如果还没连接 Firecrawl,MonstarX 会先请你连接,因为它需要你的密钥来读取那个网站,然后再导入页面。
“每天早上检查这 5 个竞争对手页面,如果价格有变化就发邮件告诉我。”一个每日检查任务,会和前一天比较,并给你发邮件。
“加一个调研页面:搜索某个主题,总结排名前 5 的页面。”一次搜索、这些页面的文字,以及附带链接的 AI 总结。
  • 你的密钥和这个应用一起加密存储,只由应用的服务器使用。使用你应用的人永远看不到它。
  • 你的应用读取的网址会在你的账户下发送给 Firecrawl。
  • 只有项目所有者可以连接、更新或断开 Firecrawl。
  • 如果要更换密钥,请在 Firecrawl 中创建一个新密钥,点击 Firecrawl 一行中的更新密钥,粘贴后点击保存密钥。重新发布,然后删除旧密钥。
  • 请尊重你读取的网站:你的应用如何使用它们的内容,仍然受这些网站的使用条款和版权约束。
  • 需要登录才能看的页面通常无法读取。
  • 爬取大网站可能会消耗大量额度。可以让 MonstarX 设置页面数量上限。
用 Firecrawl 还是内置的网页搜索?

网页搜索用来回答问题并附上来源,不需要密钥。Firecrawl 返回页面的完整文字,用于导入或进一步处理。

Firecrawl 能读取任何网站吗?

大多数公开页面都可以,包括用 JavaScript 动态生成的页面。需要登录的页面通常无法读取。

费用是多少?

Firecrawl 按页面在你自己的账户上扣除额度。MonstarX 不额外收费。

还没有密钥,可以先构建吗?

大多数功能都可以:在卡片上点击稍后,MonstarX 会把所有内容都构建出来。如果请求依赖你指定的某个网站,它会等到 Firecrawl 连接后再自动继续。