CData API Server を介してPower BI でリアルタイムScrapingBee のデータの可視化を作成

加藤龍彦
加藤龍彦
デジタルマーケティング
CData API Server を使用してScrapingBee のデータの仮想データベースを作成し、Power BI でカスタムレポートを作成します。



Power BI を使えば、データを美しいビジュアルに可視化したり、重要な情報を整理してダッシュボード化できます。CData API Server と組み合わせることで、可視化やダッシュボードなどのためにScrapingBee のデータを使用できます。この記事では、CData API Server を使用してScrapingBee の仮想データベースを作成し、ScrapingBee のデータを使ったレポートをPower BI で作成する方法を説明します。

API Server の設定

以下のリンクからAPI Server の無償トライアルをスタートしたら、セキュアなScrapingBee OData サービスを作成していきましょう。

ScrapingBee への接続

Power BI からScrapingBee のデータを操作するには、まずScrapingBee への接続を作成・設定します。

  1. API Server にログインして、「Connections」をクリックします。 データベースを追加
  2. 「接続を追加」をクリックして、データソースがAPI Server に事前にインストールされている場合は、一覧から「ScrapingBee」を選択します。
  3. インストールできたら、接続設定を行っていきましょう!
  4. API キー認証の設定

    ScrapingBee は API キー認証を使用します。API キーを取得するには、以下のステップで進めます:

    1. https://app.scrapingbee.com で ScrapingBee アカウントにサインインします
    2. Dashboard に移動して、上部のセクションで API キーを確認します。
    3. 接続文字列で使用する API キーをコピーします。

    API キーを取得したら、以下の接続プロパティを設定します:

    • AuthScheme:APIKey に設定します。
    ProfileSettings 接続プロパティには以下を設定します:
    • APIKey:ScrapingBee の API キーに設定します。

    接続文字列の例

    Profile=C:\profiles\ScrapingBee.apip;AuthScheme=APIKey;ProfileSettings="APIKey=your_api_key";
    

    ScrapingBee への接続

    認証を設定すると、ScrapingBee に接続して、利用可能なテーブルからデータをクエリできます。すべてのテーブルでは、データを取得するために少なくとも 1 つの入力パラメータ(検索クエリや商品 ID など)が必要です。

  5. 接続情報の入力が完了したら、「保存およびテスト」をクリックします。

API キー認証の設定

ScrapingBee は API キー認証を使用します。API キーを取得するには、以下のステップで進めます:

  1. https://app.scrapingbee.com で ScrapingBee アカウントにサインインします
  2. Dashboard に移動して、上部のセクションで API キーを確認します。
  3. 接続文字列で使用する API キーをコピーします。

API キーを取得したら、以下の接続プロパティを設定します:

  • AuthScheme:APIKey に設定します。
ProfileSettings 接続プロパティには以下を設定します:
  • APIKey:ScrapingBee の API キーに設定します。

接続文字列の例

Profile=C:\profiles\ScrapingBee.apip;AuthScheme=APIKey;ProfileSettings="APIKey=your_api_key";

ScrapingBee への接続

認証を設定すると、ScrapingBee に接続して、利用可能なテーブルからデータをクエリできます。すべてのテーブルでは、データを取得するために少なくとも 1 つの入力パラメータ(検索クエリや商品 ID など)が必要です。

API Server のユーザー設定

次に、API Server 経由でScrapingBee にアクセスするユーザーを作成します。「Users」ページでユーザーを追加・設定できます。やってみましょう。

  1. 「Users」ページで ユーザーを追加をクリックすると、「ユーザーを追加」ポップアップが開きます。
  2. 次に、「ロール」、「ユーザー名」、「権限」プロパティを設定し、「ユーザーを追加」をクリックします。
  3. その後、ユーザーの認証トークンが生成されます。各ユーザーの認証トークンとその他の情報は「Users」ページで確認できます。

ScrapingBee 用のAPI エンドポイントの作成

ユーザーを作成したら、ScrapingBee のデータ用のAPI エンドポイントを作成していきます。

  1. まず、「API」ページに移動し、 「 テーブルを追加」をクリックします。
  2. アクセスしたい接続を選択し、次へをクリックします。
  3. 接続を選択した状態で、各テーブルを選択して確認をクリックすることでエンドポイントを作成します。

OData のエンドポイントを取得

以上でScrapingBee への接続を設定してユーザーを作成し、API Server でScrapingBee データのAPI を追加しました。これで、OData 形式のScrapingBee データをREST API で利用できます。API Server の「API」ページから、API のエンドポイントを表示およびコピーできます。

Power BI からScrapingBee のデータを取得

以下のステップを実行して、Power BI から作成したOData エンドポイントに接続します。

  1. 「Power BI Desktop」を開いて「データを取得」画面を表示します。検索ボックスに「odata」と入力すると「OData フィード」が表示されるので、これを選択して「接続」をクリックします。 ODataコネクタ
  2. 「OData フィード」の接続画面で、先ほど作成したテーブルのエンドポイントに認証トークンを付加したURLを指定します。以下の形式です。

        https:///api.rsc//@/
      

    接続できるテーブルは、API Server のhttps://<ホスティング先>/api.rstで確認できます。

    ODataコネクタ

ScrapingBee のデータの可視化を作成

Power BI にデータを接続したら、「フィールド」ペインのフィールドをキャンバスにドラッグすることで、レポートビューにデータを可視化できます。図表の種類と、ビジュアライズするディメンションおよびメジャーを選択します。

ScrapingBee のデータをPower BI で可視化

「更新」をクリックしてデータの変更をレポートに同期します。

データアプリケーションからScrapingBee のデータへのSQL アクセス

以上で、CData API Server を使用してPower BI からScrapingBee のデータに接続できるようになりました。これで、ScrapingBee のデータを複製することなく多くのデータをインポートしたり、新しい可視化やレポートを作成することができます。

オンプレミスのBI やレポート、ETL、その他のデータアプリケーションから、240を超えるSaaS、ビッグデータ、NoSQL データソース(ScrapingBee を含む)への直接のSQL データにアクセスするには、CData API Server のページにアクセスして無料トライアルをダウンロードしてください。

はじめる準備はできましたか?

詳細はこちら、または無料トライアルにお申し込みください:

CData API Server