Source profileQuality 60/100

affaan-m/ECC/docs/ja-JP/skills/data-scraper-agent/SKILL.md

data-scraper-agent

Review data-scraper-agent's use cases, installation, workflow, and original source instructions.

Source repository stars
234,327
Declared platforms
0
Static risk flags
0
Last source update
2026-07-27
Source checked
2026-07-28

Decision brief

What it does—and where it fits

任意のパブリックデータソース用の本番環境対応、AI搭載データ収集エージェントを構築。 スケジュールで実行され、無料LLMで結果を豊かにし、データベースに保存し、時間とともに改善されます。

Best for

    Not for

    • Tasks that require unconfirmed production actions or broad system permissions.
    • Environments where the pinned source and install steps cannot be inspected.

    Compatibility matrix

    Platform support, with evidence labels

    PlatformStatusEvidenceWhat to check
    CodexNot declaredNo explicit evidencePortability before use
    Claude CodeNot declaredNo explicit evidencePortability before use
    CursorNot declaredNo explicit evidencePortability before use
    Gemini CLINot declaredNo explicit evidencePortability before use
    Open the compatibility checker

    Installation

    Inspect first. Install second.

    The source command is displayed only when detected. A safe inspection prompt is always available so your agent can explain every action before execution.

    Source-detected install commandSource
    npx skills add https://github.com/affaan-m/ECC --skill "docs/ja-JP/skills/data-scraper-agent"
    Safe inspection promptEditorial

    Inspect the Agent Skill "data-scraper-agent" from https://github.com/affaan-m/ECC/blob/4e973d3eaf92d97f8d2e2d8abb39d8bdc8711b38/docs/ja-JP/skills/data-scraper-agent/SKILL.md at commit 4e973d3eaf92d97f8d2e2d8abb39d8bdc8711b38. List every install step, command, network request, credential, file read/write, external action, and rollback step. Explain whether it fits my task. Do not install or execute anything until I approve.

    Workflow

    What the source asks the agent to do

    1. 01

      アクティベーション時期

      ユーザーが任意のパブリックWebサイトまたはAPIをスクレイプまたは監視したい場合

      ユーザーが任意のパブリックWebサイトまたはAPIをスクレイプまたは監視したい場合ユーザーが「チェックするボットを構築」「Xを監視」「データを収集」と言うユーザーがジョブ、価格、ニュース、リポ、スポーツスコア、イベント、リストを追跡したい場合
    2. 02

      コアコンセプト

      すべてのデータスクレイパーエージェントには3つのレイヤーがあります:

      すべてのデータスクレイパーエージェントには3つのレイヤーがあります:
    3. 03

      3つのレイヤー

      すべてのデータスクレイパーエージェントには3つのレイヤーがあります:

      すべてのデータスクレイパーエージェントには3つのレイヤーがあります:

    Permission review

    Static risk signals and limitations

    No configured static risk pattern was detected

    This is not proof of safety. Runtime behavior, indirect dependencies, and hidden external systems are outside the static scan.

    Evidence record

    Why each signal appears

    EvidenceSourceComputedTestedEditorial
    SignalValueEvidence typeMeaning
    Quality score60/100ComputedDocumentation, specificity, maintenance, and trust rules
    Repository stars234,327SourceRepository attention, not individual Skill quality
    Compatibility0 platformsSourceDeclared in the catalog source record
    Usage guidecatalog recordEditorialGenerated or reviewed according to the visible evidence level

    Pinned source

    Provenance and original SKILL.md

    Repository
    affaan-m/ECC
    Skill path
    docs/ja-JP/skills/data-scraper-agent/SKILL.md
    Commit
    4e973d3eaf92d97f8d2e2d8abb39d8bdc8711b38
    License
    MIT
    Collected
    2026-07-28
    Default branch
    main
    View the original SKILL.md

    データスクレイパーエージェント

    任意のパブリックデータソース用の本番環境対応、AI搭載データ収集エージェントを構築。 スケジュールで実行され、無料LLMで結果を豊かにし、データベースに保存し、時間とともに改善されます。

    スタック:Python · Gemini Flash(無料) · GitHub Actions(無料) · Notion / Sheets / Supabase

    アクティベーション時期

    • ユーザーが任意のパブリックWebサイトまたはAPIをスクレイプまたは監視したい場合
    • ユーザーが「チェックするボットを構築」「Xを監視」「データを収集」と言う
    • ユーザーがジョブ、価格、ニュース、リポ、スポーツスコア、イベント、リストを追跡したい場合
    • ユーザーがホスティング用に支払わずにデータ収集を自動化する方法を尋ねる
    • ユーザーが決定に基づいて時間とともにより スマートになるエージェントを望む

    コアコンセプト

    3つのレイヤー

    すべてのデータスクレイパーエージェントには3つのレイヤーがあります:

    COLLECT → ENRICH → STORE
      │           │        │
    Scraper    AI (LLM)  Database
    runs on    scores/   Notion /
    schedule   summarises Sheets /
               & classifies Supabase
    

    無料スタック

    LayerToolWhy
    COLLECTPlaywright/BeautifulSoup無料のオープンソーススクレイピング
    ENRICHGemini Flash無料で高速LLM
    STORESupabase / Sheets無料データベースとスプレッドシート
    SCHEDULEGitHub Actions無料クロンジョブ

    ワークフロー

    1. ソースを定義 - どこからスクレイプするか、何を抽出するか
    2. スクレイパーを構築 - BeautifulSoup または Playwright ベースのコレクタ
    3. LLMを構成 - Gemini Flash でテキストをスコア付け/要約/分類
    4. ストレージを設定 - Notion、Sheets、Supabase のいずれか
    5. GitHub Actions を設定 - 毎日/毎週実行するスケジュール
    6. フィードバックループを追加 - ユーザーの判断から学習

    • ジョブボード監視:新しい公開

    Alternatives

    Compare before choosing