firecrawl-crawl
Vollständige Websites für die Massen-Extraktion von Inhalten crawlen
Die manuelle Extraktion von Inhalten aus hunderten von Seiten ist zeitaufwändig. Diese Fähigkeit automatisiert das Massen-Crawlen von Websites mit Tiefenbegrenzungen und Pfadfilterung, um genau die benötigten Inhalte zu extrahieren.
스킬 ZIP 다운로드
Claude에서 업로드
설정 → 기능 → 스킬 → 스킬 업로드로 이동
토글을 켜고 사용 시작
테스트해 보기
"firecrawl-crawl" 사용 중입니다. Alle Seiten unter /docs/ von example.com crawlen
예상 결과:
Erfolgreich 47 Seiten von example.com/docs/ gecrawlt
Beispiel-Seiten extrahiert:
- /docs/getting-started (2.340 Wörter)
- /docs/api-reference (4.120 Wörter)
- /docs/tutorials/basics (1.890 Wörter)
Ergebnisse gespeichert in: .firecrawl/crawl.json
Verwendete Credits: 47
"firecrawl-crawl" 사용 중입니다. Produktseiten von einem E-Commerce-Shop extrahieren
예상 결과:
Crawl abgeschlossen: 156 Seiten von example-store.com extrahiert
Gefundene Kategorien:
- /products/electronics (42 Seiten)
- /products/clothing (38 Seiten)
- /products/home (76 Seiten)
Ausgabe geschrieben in: products-crawl.json
보안 감사
안전Security review of firecrawl-crawl skill completed. Static analysis flagged multiple patterns (external_commands, filesystem path traversal, weak_crypto, network_reconnaissance) that were all evaluated as false positives. The flagged content consists of documentation examples in markdown code blocks and relative markdown links to other skill files, not actual security risks. The skill is a legitimate web scraping tool that uses the firecrawl CLI to crawl and extract content from websites.
중간 위험 문제 (2)
위험 요인
⚙️ 외부 명령어
📁 파일 시스템 액세스
품질 점수
만들 수 있는 것
Dokumentations-Site-Migration
Alle Inhalte einer Dokumentations-Site vor der Migration oder Neugestaltung extrahieren. Verwenden Sie --include-paths /docs, um den Crawl nur auf Dokumentationsbereiche zu beschränken.
Wettbewerbsanalyse-Recherche
Massenhaft Produktseiten, Preisinformationen und Feature-Listen von Wettbewerber-Websites für Marktforschung und Analyse extrahieren.
Wissensdatenbank-Aufbau
Eine lokale Wissensdatenbank durch Crawlen und Extrahieren von Inhalten aus mehreren verwandten Websites, Wikis oder Ressourcensammlungen erstellen.
이 프롬프트를 사용해 보세요
Verwenden Sie firecrawl-crawl, um alle Seiten von [URL] zu extrahieren. Speichern Sie die Ergebnisse in crawl-results.json
Crawlen Sie [URL], extrahieren Sie aber nur Seiten unter dem /docs/ Pfad. Begrenzen Sie auf maximal 50 Seiten.
Crawlen Sie [URL] mit einer maximalen Tiefe von 3 Links. Verwenden Sie --include-paths /products /blog, um relevante Bereiche zu filtern.
Crawlen Sie [URL] und extrahieren Sie bis zu 200 Seiten aus dem /resources/ Bereich. Verwenden Sie --delay 500ms für respektvollen Umgang. Speichern Sie die Ausgabe in resources-crawl.json.
모범 사례
- Verwenden Sie immer --include-paths, um Crawls auf relevante Bereiche zu beschränken - crawlen Sie nicht ganze Sites, wenn Sie nur bestimmte Inhalte benötigen
- Verwenden Sie --wait, um sicherzustellen, dass der Crawl vor der Verarbeitung der Ergebnisse abgeschlossen ist - ohne diese Option gibt der Befehl eine Job-ID für asynchrone Abfrage zurück
- Überprüfen Sie die Credit-Nutzung mit 'firecrawl credit-usage' vor dem Start großer Crawls, um unerwartete Kosten zu vermeiden
피하기
- Crawlen Sie nicht ganze große Websites ohne Pfadfilterung - dies verschwendet Credits und generiert irrelevante Inhalte
- Überspringen Sie --wait nicht bei zeitkritischen Aufgaben - asynchrone Job-IDs erfordern manuelle Abfrage und fügen Komplexität hinzu
- Setzen Sie nicht extrem hohe Parallelität ohne Berücksichtigung von Ratenbegrenzungen - respektieren Sie Ziel-Website-Server