Fähigkeiten crawl4ai
📦
crawl4ai
Inhaltsrevision r1 Hohes Risiko 🌐 Netzwerkzugriff📁 Dateisystemzugriff🔑 Umgebungsvariablen⚡ Enthält Skripte⚙️ Externe Befehle
Webdaten mit Crawl4AI extrahieren
Webseiten lassen sich nur schwer in saubere, wiederverwendbare Daten umwandeln. Dieser Skill hilft Claude, Codex und Claude Code dabei, Crawl4AI für Crawling-, Markdown- und Extraktions-Workflows zu verwenden.
Unterstützt: Claude Codex Code(CC)
Vor der Installation anhalten und eine Bestätigung anfordern.
Prüfen Sie den Plan und holen Sie vor Änderungen an Dateien die ausdrückliche Zustimmung des Benutzers ein.
Mit meinem Agent installieren
Kopieren Sie diese Anfrage in Ihren Agent. Sie enthält die maßgebliche Skill-Seite und das Manifest.
Agent-Anfrage
Review the Skillstore skill "crawl4ai" from https://skillstore.io/skills/smallnest-crawl4ai.md and its manifest at https://skillstore.io/api/skills/smallnest-crawl4ai/manifest. Verify the artifact. Stop and obtain explicit user consent before installing or changing files.Ihr Agent sollte weiterhin seinen Plan anzeigen und alle von der Sicherheitsrichtlinie verlangten Bestätigungen anfordern.
Agent-lesbare Ressourcen
Verwenden Sie diese Links, wenn ein KI-Agent, Crawler oder Skript sauberen Kontext benötigt, statt die vollständige Seite zu lesen.
Testen
„crawl4ai“ wird verwendet. Crawle eine öffentliche Produktkategorieseite und extrahiere Produktdetails.
Erwartetes Ergebnis:
Ein präziser Extraktionsplan mit Selektoren, erwarteten Feldern, Ausgabedateinamen und Validierungsprüfungen.
„crawl4ai“ wird verwendet. Konvertiere eine Dokumentationsseite in Markdown.
Erwartetes Ergebnis:
- Sauberer Seitentitel und Abschnittsüberschriften.
- Hauptartikelinhalt ohne Navigationsrauschen.
- Ein Hinweis mit Links, Bildern und Crawling-Warnungen.
„crawl4ai“ wird verwendet. Führe ein Batch-Crawling für genehmigte Recherchequellen aus.
Erwartetes Ergebnis:
Eine Fortschrittszusammenfassung mit erfolgreichen Seiten, fehlgeschlagenen Seiten, gespeicherten Markdown-Speicherorten und Empfehlungen für erneute Versuche.
Sicherheitsaudit
Hohes Risikov8 • 9.7.2026 Versionsbericht öffnen
Most static findings are false positives from Markdown documentation, placeholder API-key examples, and code-fence backticks. Confirmed risks are expected crawler side effects: local result writes, Google Search requests, unrestricted user-supplied URLs, and dual-use anti-detection guidance. Static review was capped at 400/959 representative findings; omitted static matches are unconfirmed, so automatic publishing stays disabled until manual review.
15
Gescannte Dateien
8,767
Analysierte Zeilen
13
Prüfelemente
0
Falschmeldungen ignoriert
Bestätigte Sicherheitsbedenken (2)
Hoch
Anti-Detection and Authenticated Crawling Guidance
The skill documents session reuse for protected pages and anti-detection or proxy settings. This can support legitimate testing, but it can also help bypass site access controls or scraping defenses.
The cited lines explicitly discuss session-based access to protected content and anti-detection or proxy support. This is a clear dual-use capability rather than a scanner wording artifact.
Mittel
scripts/basic_crawler.py:40-43scripts/basic_crawler.py:74-80scripts/batch_crawler.py:51-57scripts/batch_crawler.py:170-179
Unrestricted User-Supplied URL Crawling
The bundled scripts accept URLs from command-line arguments, files, or comma-separated input and pass them to Crawl4AI. Without allowlists or scheme checks, an agent could be asked to crawl sensitive internal or unauthorized targets.
The code directly maps caller-provided URL input into crawler calls. This is intended crawler behavior, but it creates a real authorization and SSRF-style boundary risk.
Elemente der Fähigkeitsprüfung (13)
Dies sind echte lokale Fähigkeiten, die für diese Fähigkeit erwartet werden können; daher müssen sie überprüft werden, werden jedoch nicht als bestätigtes bösartiges Verhalten gezählt.
Mittel
Python file write/append
with open("output.md", "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
Mittel
Python file write/append
with open("screenshot.png", "wb") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
Mittel
Python file write/append
with open("batch_results.json", "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
Mittel
Python file write/append
with open(file_path, "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
Mittel
Python file write/append
with open("batch_extracted.json", "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
Mittel
Python file write/append
with open(output_file, "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
Mittel
Python file write/append
with open("extracted_data.json", "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
Mittel
Python file write/append
with open("manual_extracted.json", "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
Mittel
Python file write/append
with open("llm_extracted.json", "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
Mittel
Python file write/append
with open(output_file, "w", encoding="utf-8") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
Niedrig
Hardcoded URL
search_url = f"https://www.google.com/search?q={encoded_query}&num={max_results}"
The script constructs and crawls Google Search URLs, so running it sends the user query to an external service. This is expected but privacy-relevant network behavior.
Niedrig
Hardcoded URL
search_url = f"https://www.google.com/search?q={encoded_query}&num={max_results}"
The script constructs and crawls Google Search URLs, so running it sends the user query to an external service. This is expected but privacy-relevant network behavior.
Niedrig
Hardcoded URL
search_url = f"https://www.google.com/search?q={encoded_query}&num={max_results}"
The script constructs and crawls Google Search URLs, so running it sends the user query to an external service. This is expected but privacy-relevant network behavior.
Risikofaktoren
🌐 Netzwerkzugriff (50)
README.md:39 README.md:42 README.md:45 README.md:56 README.md:82 README.md:96 README.md:99 README.md:126 README.md:133 README.md:136 README.md:139 README.md:154 README.md:157 README.md:165 README.md:166 README.md:167 README.md:186 README.md:189 README.md:261 README.md:277 README.md:280 references/cli-guide.md:43 references/cli-guide.md:46 references/cli-guide.md:49 references/cli-guide.md:59 references/cli-guide.md:86 references/cli-guide.md:89 references/cli-guide.md:124 references/cli-guide.md:127 references/cli-guide.md:203 references/cli-guide.md:206 references/cli-guide.md:207 references/cli-guide.md:208 references/cli-guide.md:211 references/cli-guide.md:228 references/cli-guide.md:234 references/cli-guide.md:258 references/cli-guide.md:282 references/cli-guide.md:290 references/cli-guide.md:299 references/cli-guide.md:310 references/cli-guide.md:313 references/cli-guide.md:314 references/complete-sdk-reference.md:5568 references/complete-sdk-reference.md:67 references/complete-sdk-reference.md:152 references/complete-sdk-reference.md:180 references/complete-sdk-reference.md:214 references/complete-sdk-reference.md:262 references/complete-sdk-reference.md:337
📁 Dateisystemzugriff (27)
references/cli-guide.md:219 references/cli-guide.md:325 references/cli-guide.md:219 references/cli-guide.md:325 references/complete-sdk-reference.md:660 references/complete-sdk-reference.md:1224 references/complete-sdk-reference.md:1305 references/complete-sdk-reference.md:1625 references/complete-sdk-reference.md:1970 references/complete-sdk-reference.md:2363 references/complete-sdk-reference.md:3860 references/complete-sdk-reference.md:4393 references/complete-sdk-reference.md:1428 references/complete-sdk-reference.md:1438 references/complete-sdk-reference.md:1448 references/complete-sdk-reference.md:4451 references/complete-sdk-reference.md:5393 scripts/basic_crawler.py:54 scripts/basic_crawler.py:66 scripts/batch_crawler.py:85 scripts/batch_crawler.py:99 scripts/batch_crawler.py:164 scripts/extraction_pipeline.py:103 scripts/extraction_pipeline.py:157 scripts/extraction_pipeline.py:217 scripts/extraction_pipeline.py:272 scripts/google_search.py:300
🔑 Umgebungsvariablen (26)
references/cli-guide.md:139 references/complete-sdk-reference.md:345 references/complete-sdk-reference.md:1886 references/complete-sdk-reference.md:2314 references/complete-sdk-reference.md:5178 references/complete-sdk-reference.md:5255 references/complete-sdk-reference.md:5368 references/complete-sdk-reference.md:345 references/complete-sdk-reference.md:1886 references/complete-sdk-reference.md:2314 references/complete-sdk-reference.md:5178 references/complete-sdk-reference.md:5255 references/complete-sdk-reference.md:5368 references/complete-sdk-reference.md:345 references/complete-sdk-reference.md:1878 references/complete-sdk-reference.md:1880 references/complete-sdk-reference.md:1886 references/complete-sdk-reference.md:2308 references/complete-sdk-reference.md:2314 references/complete-sdk-reference.md:3342 references/complete-sdk-reference.md:4977 references/complete-sdk-reference.md:5144 references/complete-sdk-reference.md:5178 references/complete-sdk-reference.md:5255 references/complete-sdk-reference.md:5368 references/sdk-guide.md:133
⚡ Enthält Skripte (4)
⚙️ Externe Befehle (50)
references/complete-sdk-reference.md:685-687 references/complete-sdk-reference.md:687 references/complete-sdk-reference.md:689-690 references/complete-sdk-reference.md:690-691 references/complete-sdk-reference.md:691-692 references/complete-sdk-reference.md:692 references/complete-sdk-reference.md:693-694 references/complete-sdk-reference.md:694 references/complete-sdk-reference.md:695 references/complete-sdk-reference.md:696 references/complete-sdk-reference.md:757 references/complete-sdk-reference.md:758 references/complete-sdk-reference.md:759 references/complete-sdk-reference.md:763-764 references/complete-sdk-reference.md:764-765 references/complete-sdk-reference.md:765 references/complete-sdk-reference.md:774-775 references/complete-sdk-reference.md:775-776 references/complete-sdk-reference.md:776-777 references/complete-sdk-reference.md:777 references/complete-sdk-reference.md:778 references/complete-sdk-reference.md:780-782 references/complete-sdk-reference.md:782 references/complete-sdk-reference.md:791 references/complete-sdk-reference.md:817-818 references/complete-sdk-reference.md:818-822 references/complete-sdk-reference.md:822 references/complete-sdk-reference.md:823-825 references/complete-sdk-reference.md:825-826 references/complete-sdk-reference.md:826-827 references/complete-sdk-reference.md:827-828 references/complete-sdk-reference.md:828-829 references/complete-sdk-reference.md:829-831 references/complete-sdk-reference.md:837 references/complete-sdk-reference.md:838 references/complete-sdk-reference.md:839 references/complete-sdk-reference.md:840 references/complete-sdk-reference.md:896-897 references/complete-sdk-reference.md:897-898 references/complete-sdk-reference.md:898-899 references/complete-sdk-reference.md:899-900 references/complete-sdk-reference.md:900 references/complete-sdk-reference.md:901-905 references/complete-sdk-reference.md:915-916 references/complete-sdk-reference.md:916-920 references/complete-sdk-reference.md:928-929 references/complete-sdk-reference.md:929-930 references/complete-sdk-reference.md:930-934 references/complete-sdk-reference.md:934-936 references/complete-sdk-reference.md:942-946
Geprüft von: codex Audit-Verlauf anzeigen →
Diesen Bericht teilen & zitieren
Teile den versionierten Bewertungsbericht, das neutrale Badge, die Einbettungskarte und Zitate. Skillstore berichtet Nachweise, ohne zu entscheiden, ob dieser Skill sicher ist.
Berichtslink kopieren
https://skillstore.io/skills/smallnest-crawl4ai/audits/8?utm_source=security_passport&utm_medium=share&utm_campaign=versioned_reportMarkdown-Badge
[](https://skillstore.io/skills/smallnest-crawl4ai?utm_source=security_passport_badge)HTML-Badge
<a href="https://skillstore.io/skills/smallnest-crawl4ai?utm_source=security_passport_badge"><img src="https://skillstore.io/badges/skills/smallnest-crawl4ai/security.svg" alt="Skillstore security assessment" loading="lazy"></a>Einbettungskarte
<iframe src="https://skillstore.io/embed/skills/smallnest-crawl4ai.html" title="Skillstore Security Assessment" sandbox="allow-popups allow-popups-to-escape-sandbox" loading="lazy" referrerpolicy="no-referrer" width="420" height="180"></iframe>Wissenschaftliche Zitate (APA · BibTeX · CFF)
APA-Zitat
smallnest. (2026). crawl4ai security audit report (audit version 8) [Author version unspecified]. Skillstore. https://skillstore.io/skills/smallnest-crawl4ai/audits/8BibTeX-Zitat
@techreport{smallnest-smallnest-crawl4ai-2026,
author = {smallnest},
title = {crawl4ai security audit report (audit version 8)},
institution = {Skillstore},
year = {2026},
number = {8},
url = {https://skillstore.io/skills/smallnest-crawl4ai/audits/8},
note = {Author version unspecified}
}CITATION.cff
cff-version: 1.2.0
message: "If you use this Skill, cite its author and this versioned security audit report."
title: "crawl4ai security audit report (audit version 8)"
version: "unspecified"
type: report
authors:
- name: "smallnest"
date-released: "2026-07-09"
url: "https://skillstore.io/skills/smallnest-crawl4ai/audits/8"
identifiers:
- type: other
value: "skillstore:smallnest-crawl4ai:audit:8"
description: "Skillstore immutable audit report identifier"
Varianten vergleichen
2 installierbare VariantenJeder Autor bleibt ein eigener installierbarer Skill. Die empfohlene Variante wird nach Skillstore-Nachweisen bewertet.
Warum diese Variante zuerst steht
Höhere Evidenzsicherheit
Autor / Quelle Skillstore-Score Evidenzvertrauen Skillstore-Nutzung Aktualisiert
smallnest-crawl4ai
Skillstore-Score 38
Evidenzvertrauen Hoch
Skillstore-Nutzung 280
Aktualisiert
2026-09-09
ck991357-crawl4ai
Skillstore-Score 38
Evidenzvertrauen Mittel
Skillstore-Nutzung 25
Aktualisiert
2026-09-09
Skillstore-Score
Warum dieser Score Evidenzvertrauen: Hoch 82
Architektur
85
Wartbarkeit
87
Inhalt
77
Gemeinschaft
83
Spezifikationskonformität
Was Sie erstellen können
Dokumentationsseiten konvertieren
Wandeln Sie öffentliche Dokumentationsseiten in sauberes Markdown für Analyse, Migration oder die Vorbereitung einer Wissensdatenbank um.
Produktlistings überwachen
Verwenden Sie CSS-Extraktionsschemas, um Produktnamen, Preise, Links und Beschreibungen aus erlaubten Quellen zu sammeln.
Crawling-Pipelines prototypisieren
Testen Sie Crawl4AI CLI- und SDK-Einstellungen, bevor Sie eine größere automatisierte Datenpipeline erstellen.
Diese Prompts ausprobieren
Eine Seite crawlen
Verwende Crawl4AI, um diese URL zu crawlen und sauberes Markdown zurückzugeben. Bestätige die URL, bevor du einen Befehl ausführst: <url>
Wiederkehrende Elemente extrahieren
Erstelle einen Crawl4AI CSS-Extraktionsplan für diese Seite. Extrahiere Titel, Links, Daten und Zusammenfassungen aus wiederholten Elementen: <url>
Quellen per Batch crawlen
Bereite ein Crawl4AI Batch-Crawling für diese genehmigten URLs vor. Speichere Markdown-Ausgaben und fasse fehlgeschlagene Seiten zusammen: <urls>
Extraktionspipeline erstellen
Entwirf eine Crawl4AI-Pipeline, die ein Schema einmal generiert, es ohne LLM-Aufrufe wiederverwendet und extrahierte Felder validiert für: <task>
Bewährte Praktiken
- Bestätigen Sie Berechtigung, Umfang und Ratenlimits, bevor Sie eine Website crawlen.
- Bevorzugen Sie CSS-Extraktionsschemas für wiederholbare Seiten, bevor Sie LLM-Extraktion verwenden.
- Schreiben Sie Ausgaben in ein dediziertes Arbeitsverzeichnis und prüfen Sie Dateien vor der Wiederverwendung.
Vermeiden
- Crawlen Sie keine authentifizierten oder geschützten Seiten ohne ausdrückliche Autorisierung.
- Verwenden Sie keine Proxy- oder Anti-Erkennungs-Einstellungen, um Website-Regeln zu umgehen.
- Speichern Sie keine API-Tokens in gemeinsam genutzten Dateien und committen Sie keine generierte Ausgabe.
Häufig gestellte Fragen
Führt dieser Skill das Crawling selbst aus?
Nein. Er stellt Anweisungen und Skripte bereit, die Crawl4AI aufrufen, wenn der Benutzer ein Crawling genehmigt.
Kann er JavaScript-gerenderte Seiten verarbeiten?
Ja. Die Beispiele verwenden Browser-Wartezeiten, Seiten-Timeouts und Crawl4AI-Browsereinstellungen für dynamische Inhalte.
Erfordert er einen LLM-API-Schlüssel?
Einfaches Crawling und CSS-Extraktion erfordern das nicht. LLM-basierte Extraktionsbeispiele erfordern einen konfigurierten Provider-Schlüssel.
Kann er mehrere URLs crawlen?
Ja. Der Skill enthält CLI-Schleifen und Python SDK-Beispiele für gleichzeitiges Batch-Crawling.
Wo werden Ergebnisse gespeichert?
Die gebündelten Skripte speichern Markdown, Screenshots und Extraktionsergebnisse in lokalen Dateien in der Nähe des Arbeitsverzeichnisses.
Was sollten Benutzer vor der Ausführung prüfen?
Benutzer sollten Zielberechtigungen, erwartete Ausgabepfade, Ratenlimits und alle Anforderungen an API-Tokens überprüfen.