SSIS を使ってScrapingBee のデータをSQL Server にインポート

SQL Server に基幹業務データのバックアップを保管しておくことは、ビジネス上のセーフティネットとなります。また、ユーザーはSQL Server のバックアップデータからレポーティングや分析を簡単に行うことができます。

ここでは、SQL サーバー SSIS ワークフロー内でCData SSIS Tasks for API を使用して、ScrapingBee のデータをMicrosoft SQL Server データベースに転送する方法を説明します。

Components の追加

開始するには、新しいScrapingBee ソースとSQL Server ADO.NET 転送先を新しいデータフロータスクに追加します。

新しいコネクションマネジャーを作成

以下のステップに従って、接続マネジャーでScrapingBee 接続プロパティを保存します。

1. Connection Manager ウィンドウで、右クリックで［New Connection］ を選択します。Add SSIS Connection Manager ダイアログが表示されます。
2. ［Connection Manager type］メニューでAPI を選択します。CData ScrapingBee Connection Manager が表示されます。
3. 接続プロパティを構成します。

   API キー認証の設定

   ScrapingBee は API キー認証を使用します。API キーを取得するには、以下のステップで進めます：

   1. https://app.scrapingbee.com で ScrapingBee アカウントにサインインします
   2. Dashboard に移動して、上部のセクションで API キーを確認します。
   3. 接続文字列で使用する API キーをコピーします。

   API キーを取得したら、以下の接続プロパティを設定します：

   • AuthScheme：APIKey に設定します。
   ProfileSettings 接続プロパティには以下を設定します：
   • APIKey：ScrapingBee の API キーに設定します。

   接続文字列の例

   Profile=C:\profiles\ScrapingBee.apip;AuthScheme=APIKey;ProfileSettings="APIKey=your_api_key";
   

   ScrapingBee への接続

   認証を設定すると、ScrapingBee に接続して、利用可能なテーブルからデータをクエリできます。すべてのテーブルでは、データを取得するために少なくとも 1 つの入力パラメータ（検索クエリや商品 ID など）が必要です。

ScrapingBee Source の構成

以下のステップに従って、ScrapingBee の抽出に使用するクエリを指定します。

1. ScrapingBee ソースをダブルクリックしてソースコンポーネントエディタを開きます。
2. ［Connection Manager］メニューで、以前作成した接続マネジャーを選択します。
3. データの書き出しに使用するクエリを指定します。例：

   SELECT ,  FROM GoogleSearchResults WHERE SearchQuery = 'cdata drivers'
   

   
4. ScrapingBee Source コントロールを閉じて、ADO.NET Destination に接続します。

SQL Server Destination を構成する

以下のステップに従って、ScrapingBee をロードするSQL サーバーテーブルを指定します。

1. ADO.NET Destination を選択して、新しい接続を追加します。接続するサーバーおよびデータベースの情報を入力。
2. Data access モードメニューで、［table or view］を選択します。
3. ［Table Or View］メニューで、設定するテーブルまたはビューを選択します。
4. ［Mappings］画面で必要なプロパティを設定します。

プロジェクトの実行

プロジェクトを実行できるようになりました。SSIS Task の実行が完了すると、データベースにScrapingBee のデータが入力されます。