firecrawl-core-workflow-a
Skillgithub.com
执行 FireCrawl 的核心业务流程,完成从初始化、调用 API 到结果确认的端到端自动化操作,支撑主要功能实现与系统级集成,适用于生产环境下的标准爬取与数据处理任务。
阿钰同学
浏览可复用的 Skill 能力条目,登录后查看来源说明。
github.com
执行 FireCrawl 的核心业务流程,完成从初始化、调用 API 到结果确认的端到端自动化操作,支撑主要功能实现与系统级集成,适用于生产环境下的标准爬取与数据处理任务。
github.com
执行 FireCrawl 的次要核心任务,用于补充主流程或处理衍生用例,在完成基础认证与配置后,通过读取、写入、编辑及命令行脚本协同调用 API,实现轻量级但可靠的网络数据抓取与结构化输出。
github.com
通过分析 FireCrawl 使用量、预估费用并匹配合适订阅层级,结合请求采样、批量调用、缓存与压缩等手段降低 API 开销,同时建立用量监控和预算超支预警机制。
github.com
处理 FireCrawl 集成中的敏感数据,实现 PII 识别与自动脱敏,支持 GDPR 和 CCPA 合规需求,提供数据留存策略配置及自动化清理机制,确保用户数据导出、删除请求的完整执行,适用于需要隐私保护的数据处理场景。
github.com
自动收集 FireCrawl 相关的诊断信息,涵盖运行环境版本、SDK 配置、红acted 日志及网络连通性测试结果,生成结构化压缩包供技术支持分析,全程自动脱敏敏感数据。
github.com
支持将集成了 FireCrawl 的应用部署至 Vercel、Fly.io 和 Cloud Run 平台,自动配置密钥与环境变量,完成生产环境发布并验证服务健康状态,适用于多云架构的持续交付流程。
github.com
实现 FireCrawl 企业级身份与权限统一管控,支持通过 SAML 或 OIDC 协议对接外部身份提供商,完成组织架构映射、角色权限分级配置及细粒度 API 访问控制,并配套审计日志与安全告警机制。
github.com
提供快速启动 FireCrawl 集成的最小可行示例,涵盖环境验证、客户端初始化与基础 API 调用流程,适用于新手入门、配置测试及开发初期的端到端连通性验证。
github.com
提供 FireCrawl服务中断时的标准化响应流程,覆盖快速诊断、分级处置、故障隔离、通信协同及事后复盘全环节,支持对 API 异常、认证失败、限流错误和后端故障等典型问题进行自动化排查与恢复操作。
github.com
完成 FireCrawl 开发环境的初始化配置,包括 SDK 或 CLI 的安装、API 密钥的安全写入(支持环境变量或 .env 文件),并验证基础连接可用性,为后续网页爬取与结构化数据提取提供认证就绪的运行环境。
github.com
提供 FireCrawl 集成过程中的常见问题识别与规避能力,涵盖同步阻塞、限流失控、密钥泄露、幂等缺失、签名失效、错误裸奔、配置固化、熔断缺位、敏感日志及降级失能等十大典型缺陷,支撑代码审查、新人培训与架构审计。
github.com
执行负载测试并配置自动扩缩容策略,通过压测数据评估系统吞吐能力,结合资源利用率与请求延迟等指标进行容量规划,确保 FireCrawl 集成在高并发场景下的稳定性与可扩展性。
github.com
支持 FireCrawl 本地开发环境的快速搭建与持续迭代,涵盖项目结构初始化、环境变量配置、依赖安装、热重载服务启动及单元测试集成,适用于需要高频调试和验证 FireCrawl 集成逻辑的开发场景。
github.com
提供系统级火爬迁移能力,支持从旧架构或竞品平台平滑过渡到FireCrawl,涵盖现状评估、适配层开发、分批数据迁移、渐进式流量切换及回滚验证全流程,适用于重大版本升级与全量重构场景。
github.com
支持多环境下的 FireCrawl 配置管理,通过分离开发、预发与生产环境的密钥及参数实现安全隔离,结合密钥管理系统与环境检测逻辑确保配置正确加载,并为不同环境提供差异化功能开关与操作保护机制。
github.com
为 FireCrawl 集成提供端到端可观测性能力,涵盖请求指标采集、分布式链路追踪、结构化日志记录及基于错误率与延迟的智能告警,支持在 Prometheus、OpenTelemetry 和 Grafana 环境中快速部署监控看板与响应机制。
github.com
通过缓存、批量处理和连接池优化 API 性能,降低延迟并提升吞吐量,适用于高并发场景下的数据获取与处理效率提升。
github.com
为 FireCrawl 集成提供全链路合规保障,覆盖代码编写、提交前检查、CI 构建验证及运行时防护四个阶段,重点防范密钥硬编码、配置不安全、类型缺失、环境误用和高频调用等风险,确保开发流程符合最佳实践。
github.com
负责 FireCrawl 集成服务在生产环境的全流程部署与应急回滚,涵盖密钥配置、代码质量验证、基础设施就绪检查、文档完备性确认及渐进式发布操作,确保上线过程可控、可观测且可快速恢复。
github.com
通过指数退避与抖动机制处理请求限流,结合幂等性键确保操作唯一性,实现对 FireCrawl API 的稳定调用。动态监控限流头信息以调整请求节奏,适用于高并发场景下的可靠通信。
github.com
提供对 FireCrawl 集成的标准化架构设计,支持项目结构规范化、客户端封装、错误处理与健康检查配置,适用于构建可维护的分布式数据抓取系统。
github.com
构建高可用的 FireCrawl 集成系统,通过熔断机制防止级联故障,利用幂等性保障操作唯一性,结合隔离舱模式实现资源隔离,并在服务异常时自动切换至备用方案。引入超时控制与死信队列处理失败请求,支持降级状态健康检查,确保系统在部分依赖失效时仍可稳定运行。
github.com
从指定网页抓取内容并提取结构化信息,支持按搜索关键词获取结果,输出为 Markdown、HTML 或纯文本格式,适用于自动化采集和数据处理场景。
github.com
将网站内容转化为适合大语言模型处理的结构化数据,支持动态页面渲染、反爬虫绕过、多格式文档解析及品牌元素提取,具备自动导航、批量采集、变更追踪与智能搜索能力,适用于复杂环境下的实时数据抓取与监控。