ScrapingBeeとDataSpiderを連携するには？コーディングなしのデータ連携方法を解説！

DataSpider Servista は、異なるシステムのデータやアプリケーションをノンプログラミングで「つなぐ」データインテグレーションプラットフォームです。

CData JDBC ドライバはDataSpider Servista において、JDBC データソースとして利用することが可能です。通常のJDBC の検索・更新などのアイコンを使って、標準SQL でSaaS/Web DB のデータを扱うことを可能にします。 この記事では、DataSpider で CData JDBC Driverを利用してScrapingBee のデータに外部データとしてSQL でアクセスする方法を紹介します。

CData JDBC Driver for API をDataSpider にコネクタとして登録

1. JDBC Driver をDataSpider と同じサーバーにインストール
2. DataSpider の外部JDBCドライバのパスにCData JDBC ドライバのcdata.jdbc.api.jar とcdata.jdbc.api.lic を配置
   DataSpider 側：DataSpiderServista\server\plugin\data_processing\modules\jdbc_adapter
   

3. グローバルリソースのプロパティで、ドライバクラス名およびURL を入力。
   
   • 接続名：任意
   • 種別：デフォルト
   • 接続タイプ：接続タイプ：JDBC（JDBC接続設定）
   • ドライバクラス名：cdata.jdbc.api.APIDriver
   • URL：jdbc:api:Profile=C:\profiles\ScrapingBee.apip;AuthScheme=APIKey;ProfileSettings="APIKey=your_api_key";

4. API キー認証の設定

   ScrapingBee は API キー認証を使用します。API キーを取得するには、以下のステップで進めます：

   1. https://app.scrapingbee.com で ScrapingBee アカウントにサインインします
   2. Dashboard に移動して、上部のセクションで API キーを確認します。
   3. 接続文字列で使用する API キーをコピーします。

   API キーを取得したら、以下の接続プロパティを設定します：

   • AuthScheme：APIKey に設定します。
   ProfileSettings 接続プロパティには以下を設定します：
   • APIKey：ScrapingBee の API キーに設定します。

   接続文字列の例

   Profile=C:\profiles\ScrapingBee.apip;AuthScheme=APIKey;ProfileSettings="APIKey=your_api_key";
   

   ScrapingBee への接続

   認証を設定すると、ScrapingBee に接続して、利用可能なテーブルからデータをクエリできます。すべてのテーブルでは、データを取得するために少なくとも 1 つの入力パラメータ（検索クエリや商品 ID など）が必要です。

DataSpider でScrapingBee のデータを連携利用する

あとは通常のRDB コンポーネントのように、ScrapingBee のデータを扱うことが可能です。ツールパレットのJDBC からSQL 実行やストアドプロシージャ実行コンポーネントが使用できます。

例えばScrapingBee のデータの取得であれば、検索系SQL実行処理を使って、SELECT 文でScrapingBee のデータを抽出することができます。

このようにCData JDBC ドライバを使って、簡単にDataSpider でScrapingBee のデータ データをノーコードで連携利用することができます。

CData JDBC Driver for API 30日の無償評価版 をダウンロードして、お試しください。