# Proooxy — AIエージェントとLLMのためのRAG対応Webデータ > AIエージェント・検索パイプライン・LLMのための、構造化されたRAG対応Webデータ。Richard FengはEC、SEC/EDGAR開示書類、連邦支出、判例、臨床試験、求人・企業データ、BtoB ストアリード、競合他社の Google 広告、ソーシャル・動画データを対象に、プロダクション品質のApifyアクターを開発。アンチボット回避、スキーマ一貫のクリーンなJSON、公開データはAPIキー不要。 Richard Fengは、オープンWebをAIエージェント・検索パイプライン・LLM向けのクリーンでRAG対応の構造化データへと変える、独立系のWebスクレイピングエンジニアです。EC・小売、公共・金融データ(SEC EDGAR開示書類・XBRL、USAspending.gov連邦調達案件、CourtListener判例、ClinicalTrials.gov臨床試験)、企業・求人・リードデータ(Indeedの求人・企業情報、Shopifyストアのリード、競合他社の Google 広告、バーチャル私書箱の所在地)、ソーシャル・メディア(Bluesky、YouTube・TikTokの字幕・文字起こし)、開発者・SEOユーティリティの5分野にわたり、プロダクション品質のApifyアクターを構築しています。すべてのアクターは、グラウンディングと検索のために設計されたスキーマ一貫のJSONを出力します——公開データを扱うアクターの大半はAPIキー不要です——必要に応じたアンチボット回避(Cloudflare、Akamai)とレジデンシャルプロキシ対応、イベント課金制の料金体系を備えています。 **こんな用途に最適:** 最新のWebデータによるAIエージェント・RAGシステムのグラウンディング、LLM学習・評価用データセットの構築、市場・競合インテリジェンス、オルタナティブデータパイプライン。 ## クイックファクト - **サイト:** https://proooxy.com/ja/ - **著者:** Richard Feng (p8p9cmk96@mozmail.com) - **GitHub:** https://github.com/autofacts - **Apify Store:** https://apify.com/autofacts - **ツール数:** 23 - **スタック:** Python(Crawlee、curl_cffi、Parsel)およびTypeScript(Apify SDK、Crawlee、Cheerio) - **ホスティング:** Apifyクラウド — イベント課金制、無料プランあり ## ツール ### [Google Ads Scraper — 検索・YouTube・ショッピング広告](https://proooxy.com/ja/tools/google-ads-scraper/) 競合他社がGoogleに出稿するすべての広告——検索、YouTube、ショッピング、マップ、Play——をドメイン・広告主・ブランド名から検索。各広告の掲載日数、掲載された国、EUについてはインプレッション数とオーディエンスターゲティングまで取得できます。 - マーケット: 全世界 - スタック: TypeScript - Apify: https://apify.com/autofacts/google-ads-scraper ### [ASOS スクレイパー — 価格・サイズ別在庫・レビュー・カテゴリ](https://proooxy.com/ja/tools/asos-scraper/) ASOS の12ストアから商品とカテゴリを取得:希望小売価格と過去30日最安値付きの価格、サイズごとの在庫、EANコード、カラー・サイズのバリエーション、画像とランウェイ動画、評価、レビュー、お気に入り数。 - マーケット: イギリス, アメリカ, フランス, ドイツ, スペイン, イタリア, オランダ, ポーランド, スウェーデン, デンマーク, オーストラリア, ロシア - スタック: TypeScript, Crawlee - Apify: https://apify.com/autofacts/asos ### [TikTok 字幕・文字起こしスクレイパー — JSON, SRT, VTT, LLM](https://proooxy.com/ja/tools/tiktok-transcript-scraper/) 動画URL・短縮リンク・@プロフィール全体から TikTok の字幕と文字起こしを取得し、JSON / SRT / VTT / プレーンテキスト / LLM 向けテキストで出力します。ネイティブ字幕を直接取得するため、Whisper も API キーも不要、1本あたり約2秒。 - マーケット: グローバル - スタック: TypeScript - Apify: https://apify.com/autofacts/tiktok-subtitle-transcript-scraper ### [WooCommerce スクレイパー — 商品・価格・在庫・レビュー](https://proooxy.com/ja/tools/woocommerce-scraper/) 任意のWooCommerceストアから商品、バリエーション、カテゴリ、カスタマーレビューを取得します。ドメインを渡すだけでカタログを見つけ、ストアがJSON APIを無効にしていても取得できます。 - マーケット: グローバル - スタック: TypeScript, Cheerio - Apify: https://apify.com/autofacts/woocommerce-scraper ### [Anytime Mailbox スクレイパー — バーチャル私書箱と CMRA レジストリ](https://proooxy.com/ja/tools/anytime-mailbox-scraper/) 世界中の Anytime Mailbox バーチャル私書箱拠点をすべてクロールし、住所・メールセンター運営者・開始価格を抽出。さらに全住所を Smarty で検証し、配達可能性・CMRA 判定・郡・ジオコードを付与します。 - マーケット: アメリカ合衆国, 全世界 - スタック: TypeScript, Crawlee - Apify: https://apify.com/autofacts/anytime-mailbox-scraper-virtual-mailbox-locations-cmra ### [Indeed スクレイパー — 求人・企業・口コミ・給与](https://proooxy.com/ja/tools/indeed-scraper/) Indeed の求人を、完全な職務内容と解析済みの給与つきで取得。さらに同じ実行で、その背後にある企業(企業プロフィール、従業員口コミ、給与テーブル、Q&A)を Indeed 自身の雇用主 ID で結合して取得します。62 の国別ドメイン対応、ログイン不要。 - マーケット: 全世界 - スタック: TypeScript, Crawlee - Apify: https://apify.com/autofacts/indeed-jobs-scraper-companies-reviews-salaries ### [Shopify ストアリード — カタログ規模・アプリ・連絡先](https://proooxy.com/ja/tools/shopify-store-leads/) 見込み度を判断できる数値つきの Shopify ストアリード——商品点数、価格帯、テーマ、導入アプリ、商品公開ペース、ビジネス連絡先。条件で新規ストアを発見することも、手持ちのドメインをエンリッチすることもできます。 - マーケット: 全世界 - スタック: TypeScript, Cheerio - Apify: https://apify.com/autofacts/shopify-store-leads ### [Talabat Mart スクレイパー — ドバイの食品価格とSKU](https://proooxy.com/ja/tools/talabat-mart-scraper/) ドバイ各地の Talabat Mart ダークストアから、クイックコマース食品の SKU・価格・バーコード・実在庫数を抽出します。153 の配送ゾーン、全商品に EAN/UPC、正規化された単一の商品スキーマ。 - マーケット: アラブ首長国連邦 - スタック: TypeScript - Apify: https://apify.com/autofacts/talabat-mart-grocery-scraper ### [Macy's Scraper — 商品・価格・SKU・ニュースを取得](https://proooxy.com/ja/tools/macys-scraper/) Macy'sの商品データ——価格、バリアント、SKU/UPCバーコード、画像、評価・レビュー——に加え、Macy's Inc.のニュースを、検索・カテゴリ・トレンド・商品URLから抽出します。ブラウザ不要。 - マーケット: アメリカ - スタック: TypeScript, Crawlee, Cheerio - Apify: https://apify.com/autofacts/macy-s-scraper ### [Bluesky Scraper — 投稿・プロフィール・フィード・エンゲージメント](https://proooxy.com/ja/tools/bluesky-scraper/) AT Protocol経由でBlueskyの投稿・プロフィール・フォロワー・フィード・スレッド・いいねしたユーザー・リポストしたユーザーを抽出——さらにアプリパスワードによる認証で検索とハッシュタグの結果にも対応。クリーンで正規化されたJSON。 - マーケット: グローバル - スタック: TypeScript, AT Protocol - Apify: https://apify.com/autofacts/bluesky-scraper ### [ClinicalTrials.gov Scraper — 試験・適格基準・結果データを取得](https://proooxy.com/ja/tools/clinical-trials-scraper/) 公式ClinicalTrials.gov v2 APIを、疾患・介入・スポンサー・所在地・ステータス・NCT IDで検索。適格基準、結果メタデータ、増分更新を含む正規化された試験レコードをエクスポートします——APIキー不要。 - マーケット: グローバル - スタック: TypeScript, REST API - Apify: https://apify.com/autofacts/clinical-trials-scraper ### [CourtListener Scraper — 判決文・ドケット・全文データを取得](https://proooxy.com/ja/tools/courtlistener-scraper/) CourtListenerに対して米国の判決文、RECAPドケット、口頭弁論、裁判官、引用情報を検索——判決文の全文とRAG対応チャンク付き。裁判所、日付、キーワードでフィルタ可能です。 - マーケット: アメリカ - スタック: TypeScript, Cheerio - Apify: https://apify.com/autofacts/courtlistener-scraper ### [SEC EDGAR Scraper — 開示書類・全文・XBRL財務データを取得](https://proooxy.com/ja/tools/sec-edgar-scraper/) SEC EDGARの開示書類メタデータ、10-K/10-Qの全文セクション、EDGAR全文検索結果、XBRL財務ファクトを、クリーンでRAG対応のJSONとして抽出します。APIキー不要。 - マーケット: アメリカ - スタック: TypeScript, Cheerio - Apify: https://apify.com/autofacts/sec-edgar-scraper ### [USAspending.gov Scraper — 連邦調達案件・受給者・集計データを取得](https://proooxy.com/ja/tools/usaspending-scraper/) 公式USAspending.gov API v2に対して、連邦政府の契約・助成金・融資を検索します。省庁、受給者、NAICS/PSC、日付でフィルタし、受給者プロフィール、カテゴリ別集計、州/郡/選挙区別の地理集計を取得できます。APIキー不要。 - マーケット: アメリカ - スタック: TypeScript, REST API - Apify: https://apify.com/autofacts/usaspending-scraper ### [YouTube Subtitle & Transcript Scraper — JSON・SRT・VTT・LLM対応](https://proooxy.com/ja/tools/youtube-transcript-scraper/) 動画、Shorts、再生リスト、チャンネルからYouTubeの字幕・文字起こしを、JSON、SRT、VTT、プレーンテキスト、またはクリーンなLLM対応テキストとして抽出します。100以上の言語、豊富なメタデータに対応、APIキー不要——抽出に失敗した場合は課金されません。 - マーケット: グローバル - スタック: TypeScript - Apify: https://apify.com/autofacts/youtube-subtitle-transcript-scraper ### [Sephora Scraper(グローバル)](https://proooxy.com/ja/tools/sephora-scraper/) 米国、カナダ、9つのEU市場、6つの中東市場、イギリス、インド、10のアジア太平洋市場のSephoraストアから、バリアント・価格・画像・成分・レビューを含む完全な商品データを、単一の正規化スキーマで抽出するApifyアクターです。 - マーケット: アメリカ, カナダ, フランス, イタリア, ドイツ, スペイン, ポーランド, チェコ, ギリシャ, ルーマニア, ポルトガル, アラブ首長国連邦, サウジアラビア, バーレーン, オマーン, クウェート, カタール, イギリス, インド, ニュージーランド, オーストラリア, シンガポール, マレーシア, タイ, インドネシア, フィリピン, 香港, 台湾, ブルネイ - スタック: Python, Crawlee - Apify: https://apify.com/autofacts/sephora ### [Boohoo Scraper — 7地域の商品データを取得](https://proooxy.com/ja/tools/boohoo-scraper/) 自動ページネーション、ファセットフィルタ、多通貨対応で、7地域のBoohoo ECサイトから商品データを抽出します。 - マーケット: オランダ, スウェーデン, イギリス, アイルランド, フランス, オーストラリア, アメリカ - スタック: TypeScript, Cheerio - Apify: https://apify.com/autofacts/boohoo-scraper ### [Farfetch Scraper — ラグジュアリーファッション商品データを取得](https://proooxy.com/ja/tools/farfetch-scraper/) Farfetchからラグジュアリーファッションの商品データを抽出——多通貨価格、サイズ/フィットバリエーション、商品レコメンデーションを含みます。 - マーケット: グローバル - スタック: TypeScript, Cheerio, Crawlee - Apify: https://apify.com/autofacts/farfetch ### [Lululemon Scraper — 商品・バリアント・価格データを取得](https://proooxy.com/ja/tools/lululemon-scraper/) Lululemonをクロールし、バリアントデータ、カラーオプション、メディアギャラリー、価格情報を含む商品詳細を抽出します。 - マーケット: アメリカ - スタック: TypeScript, Crawlee - Apify: https://apify.com/autofacts/lululemon-scraper ### [Schema Markup Scraper — 構造化データ抽出とSEO監査](https://proooxy.com/ja/tools/schema-markup-scraper/) あらゆるURLからJSON-LD、Microdata、RDFa、Open Graph、Twitter Cardsを抽出し、総合的なSEO監査スコアリングを行います。 - マーケット: グローバル - スタック: TypeScript, Crawlee - Apify: https://apify.com/autofacts/metadata-scraper ### [Shopify Scraper — あらゆるストアの商品データを取得](https://proooxy.com/ja/tools/shopify-scraper/) Shopifyを利用するあらゆるストアから、コレクション・検索・商品レコメンデーションを含む高精度な商品データを抽出するプロフェッショナル品質のツールです。 - マーケット: グローバル - スタック: TypeScript, Cheerio - Apify: https://apify.com/autofacts/shopify ### [Ulta Beauty Scraper — 商品・価格・SKUデータを取得](https://proooxy.com/ja/tools/ulta-scraper/) Ulta Beautyから、カテゴリページ・ブランドページ・セールセクションを含む商品詳細、価格、画像、SKU情報を抽出します。 - マーケット: アメリカ - スタック: TypeScript, Crawlee - Apify: https://apify.com/autofacts/ulta-scraper ### [Universal Web Printer — URL・HTMLをPDF/画像に変換](https://proooxy.com/ja/tools/web-printer/) スマートスクロールスティッチ、要素抽出、PDF暗号化、透かし機能を備え、あらゆるURLやHTMLをPDF、PNG、JPEG、WebPに変換します。 - マーケット: グローバル - スタック: TypeScript, Playwright, PDF-lib, Sharp - Apify: https://apify.com/autofacts/universal-web-printer ## ブログ - [2026年版 Webスクレイピングのベストプラクティス:実践者のガイド](https://proooxy.com/ja/blog/web-scraping-best-practices-2026/) — 実際にプロダクションスクレイパーを運用する中で得られた、実戦で鍛えられたWebスクレイピング戦略——アーキテクチャパターン、エラーハンドリング、プロキシ管理、出力の正規化について解説します。 - [アンチボット対策を理解する:2026年に通用する手法](https://proooxy.com/ja/blog/bypassing-anti-bot-protection-guide/) — Cloudflare、Akamai、Datadomeなど最新のアンチボットシステムを技術的に深掘りし、実運用のスクレイピングで使われている合法的な回避手法を解説します。 ## サイトマップ - [Richard Fengについて](https://proooxy.com/ja/about/) — 経歴、専門分野、提供サービス - [お問い合わせ](https://proooxy.com/ja/contact/) — カスタムスクレイパー/DaaS案件のご相談 - [Apify Store](https://apify.com/autofacts) — どのツールも無料でお試しいただけます - [GitHub](https://github.com/autofacts) — 一部プロジェクトのソースコード - [プレーンテキスト形式の全文コンテンツ](https://proooxy.com/ja/llms-full.txt) — AIのコンテキストウィンドウ向けに全ページを連結したもの