スキル crawl4ai
📦
crawl4ai
コンテンツリビジョン r1 高リスク 🌐 ネットワークアクセス📁 ファイルシステムへのアクセス🔑 環境変数⚡ スクリプトを含む⚙️ 外部コマンド
Crawl4AIでWebデータを抽出
Webページをクリーンで再利用可能なデータに変換するのは困難です。このスキルは、Claude、Codex、Claude CodeがCrawl4AIを使ってクロール、Markdown化、抽出ワークフローを行えるようにします。
対応: Claude Codex Code(CC)
インストール前に停止して確認を求めてください。
計画を確認し、ファイルを変更する前にユーザーの明示的な同意を得てください。
自分のエージェントでインストール
このリクエストをエージェントにコピーしてください。正規の Skill ページとマニフェストが含まれています。
エージェントリクエスト
Review the Skillstore skill "crawl4ai" from https://skillstore.io/skills/smallnest-crawl4ai.md and its manifest at https://skillstore.io/api/skills/smallnest-crawl4ai/manifest. Verify the artifact. Stop and obtain explicit user consent before installing or changing files.エージェントは引き続き計画を提示し、セキュリティポリシーで必要な確認を求める必要があります。
エージェントが読めるリソース
AI エージェント、クローラー、スクリプトがページ全体ではなく整理されたコンテキストを必要とする場合は、これらのリンクを使ってください。
テストする
「crawl4ai」を使用しています。 公開の商品カテゴリページをクロールし、商品詳細を抽出する。
期待される結果:
セレクター、期待されるフィールド、出力ファイル名、検証チェックを含む簡潔な抽出計画。
「crawl4ai」を使用しています。 ドキュメントページをMarkdownに変換する。
期待される結果:
- クリーンなページタイトルとセクション見出し。
- ナビゲーションのノイズを除いたメイン記事コンテンツ。
- リンク、画像、クロール警告を一覧にしたメモ。
「crawl4ai」を使用しています。 承認済みの調査ソースに対してバッチクロールを実行する。
期待される結果:
成功したページ、失敗したページ、保存されたMarkdownの場所、再試行の推奨事項を含む進捗要約。
セキュリティ監査
高リスクv8 • 2026/7/9 バージョン別レポートを開く
Most static findings are false positives from Markdown documentation, placeholder API-key examples, and code-fence backticks. Confirmed risks are expected crawler side effects: local result writes, Google Search requests, unrestricted user-supplied URLs, and dual-use anti-detection guidance. Static review was capped at 400/959 representative findings; omitted static matches are unconfirmed, so automatic publishing stays disabled until manual review.
15
スキャンされたファイル
8,767
解析済み行数
13
レビュー項目
0
誤検知を無視
確認済みのセキュリティ上の懸念 (2)
高
Anti-Detection and Authenticated Crawling Guidance
The skill documents session reuse for protected pages and anti-detection or proxy settings. This can support legitimate testing, but it can also help bypass site access controls or scraping defenses.
The cited lines explicitly discuss session-based access to protected content and anti-detection or proxy support. This is a clear dual-use capability rather than a scanner wording artifact.
中
scripts/basic_crawler.py:40-43scripts/basic_crawler.py:74-80scripts/batch_crawler.py:51-57scripts/batch_crawler.py:170-179
Unrestricted User-Supplied URL Crawling
The bundled scripts accept URLs from command-line arguments, files, or comma-separated input and pass them to Crawl4AI. Without allowlists or scheme checks, an agent could be asked to crawl sensitive internal or unauthorized targets.
The code directly maps caller-provided URL input into crawler calls. This is intended crawler behavior, but it creates a real authorization and SSRF-style boundary risk.
機能レビュー項目 (13)
これらは、このスキルに期待される可能性のある実際のローカル機能であるため、レビューが必要ですが、確認済みの悪意ある動作としてはカウントされません。
中
Python file write/append
with open("output.md", "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
中
Python file write/append
with open("screenshot.png", "wb") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
中
Python file write/append
with open("batch_results.json", "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
中
Python file write/append
with open(file_path, "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
中
Python file write/append
with open("batch_extracted.json", "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
中
Python file write/append
with open(output_file, "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
中
Python file write/append
with open("extracted_data.json", "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
中
Python file write/append
with open("manual_extracted.json", "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
中
Python file write/append
with open("llm_extracted.json", "w") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
中
Python file write/append
with open(output_file, "w", encoding="utf-8") as f:
This bundled script writes crawl or extraction results to local files. The behavior is expected, but it can overwrite files in the working directory or at a caller-provided output path.
低
Hardcoded URL
search_url = f"https://www.google.com/search?q={encoded_query}&num={max_results}"
The script constructs and crawls Google Search URLs, so running it sends the user query to an external service. This is expected but privacy-relevant network behavior.
低
Hardcoded URL
search_url = f"https://www.google.com/search?q={encoded_query}&num={max_results}"
The script constructs and crawls Google Search URLs, so running it sends the user query to an external service. This is expected but privacy-relevant network behavior.
低
Hardcoded URL
search_url = f"https://www.google.com/search?q={encoded_query}&num={max_results}"
The script constructs and crawls Google Search URLs, so running it sends the user query to an external service. This is expected but privacy-relevant network behavior.
リスク要因
🌐 ネットワークアクセス (50)
README.md:39 README.md:42 README.md:45 README.md:56 README.md:82 README.md:96 README.md:99 README.md:126 README.md:133 README.md:136 README.md:139 README.md:154 README.md:157 README.md:165 README.md:166 README.md:167 README.md:186 README.md:189 README.md:261 README.md:277 README.md:280 references/cli-guide.md:43 references/cli-guide.md:46 references/cli-guide.md:49 references/cli-guide.md:59 references/cli-guide.md:86 references/cli-guide.md:89 references/cli-guide.md:124 references/cli-guide.md:127 references/cli-guide.md:203 references/cli-guide.md:206 references/cli-guide.md:207 references/cli-guide.md:208 references/cli-guide.md:211 references/cli-guide.md:228 references/cli-guide.md:234 references/cli-guide.md:258 references/cli-guide.md:282 references/cli-guide.md:290 references/cli-guide.md:299 references/cli-guide.md:310 references/cli-guide.md:313 references/cli-guide.md:314 references/complete-sdk-reference.md:5568 references/complete-sdk-reference.md:67 references/complete-sdk-reference.md:152 references/complete-sdk-reference.md:180 references/complete-sdk-reference.md:214 references/complete-sdk-reference.md:262 references/complete-sdk-reference.md:337
📁 ファイルシステムへのアクセス (27)
references/cli-guide.md:219 references/cli-guide.md:325 references/cli-guide.md:219 references/cli-guide.md:325 references/complete-sdk-reference.md:660 references/complete-sdk-reference.md:1224 references/complete-sdk-reference.md:1305 references/complete-sdk-reference.md:1625 references/complete-sdk-reference.md:1970 references/complete-sdk-reference.md:2363 references/complete-sdk-reference.md:3860 references/complete-sdk-reference.md:4393 references/complete-sdk-reference.md:1428 references/complete-sdk-reference.md:1438 references/complete-sdk-reference.md:1448 references/complete-sdk-reference.md:4451 references/complete-sdk-reference.md:5393 scripts/basic_crawler.py:54 scripts/basic_crawler.py:66 scripts/batch_crawler.py:85 scripts/batch_crawler.py:99 scripts/batch_crawler.py:164 scripts/extraction_pipeline.py:103 scripts/extraction_pipeline.py:157 scripts/extraction_pipeline.py:217 scripts/extraction_pipeline.py:272 scripts/google_search.py:300
🔑 環境変数 (26)
references/cli-guide.md:139 references/complete-sdk-reference.md:345 references/complete-sdk-reference.md:1886 references/complete-sdk-reference.md:2314 references/complete-sdk-reference.md:5178 references/complete-sdk-reference.md:5255 references/complete-sdk-reference.md:5368 references/complete-sdk-reference.md:345 references/complete-sdk-reference.md:1886 references/complete-sdk-reference.md:2314 references/complete-sdk-reference.md:5178 references/complete-sdk-reference.md:5255 references/complete-sdk-reference.md:5368 references/complete-sdk-reference.md:345 references/complete-sdk-reference.md:1878 references/complete-sdk-reference.md:1880 references/complete-sdk-reference.md:1886 references/complete-sdk-reference.md:2308 references/complete-sdk-reference.md:2314 references/complete-sdk-reference.md:3342 references/complete-sdk-reference.md:4977 references/complete-sdk-reference.md:5144 references/complete-sdk-reference.md:5178 references/complete-sdk-reference.md:5255 references/complete-sdk-reference.md:5368 references/sdk-guide.md:133
⚡ スクリプトを含む (4)
⚙️ 外部コマンド (50)
references/complete-sdk-reference.md:685-687 references/complete-sdk-reference.md:687 references/complete-sdk-reference.md:689-690 references/complete-sdk-reference.md:690-691 references/complete-sdk-reference.md:691-692 references/complete-sdk-reference.md:692 references/complete-sdk-reference.md:693-694 references/complete-sdk-reference.md:694 references/complete-sdk-reference.md:695 references/complete-sdk-reference.md:696 references/complete-sdk-reference.md:757 references/complete-sdk-reference.md:758 references/complete-sdk-reference.md:759 references/complete-sdk-reference.md:763-764 references/complete-sdk-reference.md:764-765 references/complete-sdk-reference.md:765 references/complete-sdk-reference.md:774-775 references/complete-sdk-reference.md:775-776 references/complete-sdk-reference.md:776-777 references/complete-sdk-reference.md:777 references/complete-sdk-reference.md:778 references/complete-sdk-reference.md:780-782 references/complete-sdk-reference.md:782 references/complete-sdk-reference.md:791 references/complete-sdk-reference.md:817-818 references/complete-sdk-reference.md:818-822 references/complete-sdk-reference.md:822 references/complete-sdk-reference.md:823-825 references/complete-sdk-reference.md:825-826 references/complete-sdk-reference.md:826-827 references/complete-sdk-reference.md:827-828 references/complete-sdk-reference.md:828-829 references/complete-sdk-reference.md:829-831 references/complete-sdk-reference.md:837 references/complete-sdk-reference.md:838 references/complete-sdk-reference.md:839 references/complete-sdk-reference.md:840 references/complete-sdk-reference.md:896-897 references/complete-sdk-reference.md:897-898 references/complete-sdk-reference.md:898-899 references/complete-sdk-reference.md:899-900 references/complete-sdk-reference.md:900 references/complete-sdk-reference.md:901-905 references/complete-sdk-reference.md:915-916 references/complete-sdk-reference.md:916-920 references/complete-sdk-reference.md:928-929 references/complete-sdk-reference.md:929-930 references/complete-sdk-reference.md:930-934 references/complete-sdk-reference.md:934-936 references/complete-sdk-reference.md:942-946
監査者: codex 監査履歴を表示 →
このレポートを共有・引用
バージョン付き評価レポート、中立的なバッジ、埋め込みカード、引用を共有できます。Skillstore は証拠を報告しますが、この Skill が安全かどうかは判断しません。
レポートリンクをコピー
https://skillstore.io/skills/smallnest-crawl4ai/audits/8?utm_source=security_passport&utm_medium=share&utm_campaign=versioned_reportMarkdownバッジ
[](https://skillstore.io/skills/smallnest-crawl4ai?utm_source=security_passport_badge)HTMLバッジ
<a href="https://skillstore.io/skills/smallnest-crawl4ai?utm_source=security_passport_badge"><img src="https://skillstore.io/badges/skills/smallnest-crawl4ai/security.svg" alt="Skillstore security assessment" loading="lazy"></a>埋め込みカード
<iframe src="https://skillstore.io/embed/skills/smallnest-crawl4ai.html" title="Skillstore Security Assessment" sandbox="allow-popups allow-popups-to-escape-sandbox" loading="lazy" referrerpolicy="no-referrer" width="420" height="180"></iframe>学術引用 (APA · BibTeX · CFF)
APA形式の引用
smallnest. (2026). crawl4ai security audit report (audit version 8) [Author version unspecified]. Skillstore. https://skillstore.io/skills/smallnest-crawl4ai/audits/8BibTeX形式の引用
@techreport{smallnest-smallnest-crawl4ai-2026,
author = {smallnest},
title = {crawl4ai security audit report (audit version 8)},
institution = {Skillstore},
year = {2026},
number = {8},
url = {https://skillstore.io/skills/smallnest-crawl4ai/audits/8},
note = {Author version unspecified}
}CITATION.cff
cff-version: 1.2.0
message: "If you use this Skill, cite its author and this versioned security audit report."
title: "crawl4ai security audit report (audit version 8)"
version: "unspecified"
type: report
authors:
- name: "smallnest"
date-released: "2026-07-09"
url: "https://skillstore.io/skills/smallnest-crawl4ai/audits/8"
identifiers:
- type: other
value: "skillstore:smallnest-crawl4ai:audit:8"
description: "Skillstore immutable audit report identifier"
バリアントを比較
インストール可能なバリアント 2 件各作者のスキルは個別のインストール項目として維持されます。推奨バリアントは Skillstore の証拠で順位付けされます。
このバリアントが首位の理由
証拠の信頼度が高い
Skillstore スコア
このスコアの理由 証拠の信頼度: 高 82
アーキテクチャ
85
保守性
87
コンテンツ
77
コミュニティ
83
仕様準拠
作成できるもの
ドキュメントサイトを変換
公開ドキュメントページを、分析、移行、ナレッジベース準備のためにクリーンなMarkdownへ変換します。
商品リストを監視
CSS抽出スキーマを使用して、許可されたソースから商品名、価格、リンク、説明を収集します。
クロールパイプラインをプロトタイプ
より大規模な自動データパイプラインを構築する前に、Crawl4AI CLIとSDKの設定をテストします。
これらのプロンプトを試す
1ページをクロール
Crawl4AIを使用してこのURLをクロールし、クリーンなMarkdownを返してください。コマンドを実行する前にURLを確認してください: <url>
繰り返し項目を抽出
このページ向けのCrawl4AI CSS抽出計画を作成してください。繰り返し項目からタイトル、リンク、日付、要約を抽出してください: <url>
ソースをバッチクロール
これらの承認済みURL向けにCrawl4AIのバッチクロールを準備してください。Markdown出力を保存し、失敗したページを要約してください: <urls>
抽出パイプラインを構築
スキーマを一度生成し、LLM呼び出しなしで再利用し、抽出フィールドを検証するCrawl4AIパイプラインを設計してください: <task>
ベストプラクティス
- サイトをクロールする前に、許可、範囲、レート制限を確認してください。
- LLM抽出を使用する前に、反復可能なページにはCSS抽出スキーマを優先してください。
- 出力は専用の作業ディレクトリに書き込み、再利用する前にファイルを確認してください。
回避
- 明示的な承認なしに、認証済みページや保護されたページをクロールしないでください。
- サイトのルールを回避するためにプロキシや検出回避設定を使用しないでください。
- APIトークンを共有ファイルに保存したり、生成された出力をコミットしたりしないでください。
よくある質問
このスキルは単独でクロールを実行しますか？
いいえ。ユーザーがクロールを承認したときにCrawl4AIを呼び出す手順とスクリプトを提供します。
JavaScriptでレンダリングされたページを処理できますか？
はい。例では、動的コンテンツ向けにブラウザー待機、ページタイムアウト、Crawl4AIのブラウザー設定を使用します。
LLM APIキーは必要ですか？
基本的なクロールとCSS抽出には不要です。LLMベースの抽出例には、設定済みのプロバイダーキーが必要です。
複数のURLをクロールできますか？
はい。このスキルには、並行バッチクロール向けのCLIループとPython SDK例が含まれています。
結果はどこに保存されますか？
同梱スクリプトは、Markdown、スクリーンショット、抽出結果を作業ディレクトリ付近のローカルファイルに保存します。
実行前に何を確認すべきですか？
ユーザーは、対象の許可、想定される出力パス、レート制限、APIトークン要件を確認する必要があります。