Excavator

説明

Diggernaut は、Web スクレイピング、データ抽出、およびその他の ETL (抽出、変換、読み込み) タスク用のクラウド ベースのサービスです。あなたが商品の再販業者であり、サプライヤーがデータを適切な形式 (Excel や CSV など) にすることを許可していない場合は、ウェブサイトから手動でデータを取得する必要があります。あなたがする必要があるのは、あなたに代わって Web スクレイピングを行い、Web サイトからデータを抽出し、それを正規化し、データをクラウドに保存できる小さなロボットであるディガーを作成することだけです。完了したら、CSV、XLS、JSON 形式でダウンロードするか、Rest API を使用して取得することもできます。

プログラミングのスキルがない場合は、Excavator ツールを使用してスクレイパーの構成を構築できます。抽出するデータを選択し、出力データ構造にどのように含めるかを設定する、シンプルなポイント & クリック アプリケーションです。サンドボックス Web サイトで使用方法を説明するビデオ レッスンがあります。

プログラマーまたは Web 開発者であれば、メタ言語を使用してディガーの構成を構築できます。このようにして、非常に複雑なデータ抽出タスクを解決できます。慣れるのに役立つ包括的なメタ言語ドキュメントがあります。また、ブログにはさまざまなメタ言語関数を使用してさまざまな実際のケースを解決する方法を示す多くの投稿があります。