DataGrip で Scrapfly のデータ をクエリ

Jerod Johnson
Jerod Johnson
Director, Technology Evangelism
DataGrip で Scrapfly のデータソースを作成し、SQL を使用してScrapflyのリアルタイムデータをクエリ。

DataGrip は、SQL 開発者がデータベースへのクエリ、作成、管理を行えるデータベース IDE です。CData API Driver for JDBC と組み合わせることで、DataGrip からリアルタイムScrapfly のデータを操作できます。この記事では、DataGrip で Scrapfly のデータ への接続を確立方法を説明します。

Scrapfly 用の新しいドライバー定義を作成

以下のステップでは、DataGrip で Scrapfly 用の新しいデータソースを作成する方法を説明します。

  1. DataGrip で、File -> New -> Project をクリックしてプロジェクト名を入力します。
  2. Database Explorer で、プラスアイコン()をクリックして Driver を選択します。
  3. Driver タブで以下を設定します。
    • Name をわかりやすい名前に設定します(例:"CData Scrapfly Driver")。
    • Driver Files を適切な JAR ファイルに設定します。ファイルを追加するには、プラス()をクリックし、「Add Files」を選択して、ドライバーのインストールディレクトリ内の「lib」フォルダに移動し、JAR ファイル(例:cdata.jdbc.api.jar)を選択します。
    • Class を cdata.jdbc.api.API.jar に設定します。
    また、詳細タブでは、ドライバーのプロパティや、VM Options、VM environment、VM home path、DBMS などの設定を変更できます。
    • ほとんどの場合、Expert optionsDBMS type を「Unknown」に変更して、ネイティブの SQL Server クエリ(Transact-SQL)を回避してください。これを行わないと、無効な関数エラーが発生する可能性があります。
  4. 「Apply」をクリックし、「OK」をクリックして接続を保存します。

Scrapfly への接続を設定

  1. 接続を保存したら、プラス()をクリックし、「Data Source」→「CData Scrapfly Driver」を選択して、新しい Scrapfly データソースを作成します。
  2. 新しいウィンドウで、JDBC URL を使用して Scrapfly への接続を設定します。

    組み込みの接続文字列デザイナー

    JDBC URL の構築には、Scrapfly JDBC Driver に組み込まれている接続文字列デザイナーを使用してください。JAR ファイルをダブルクリックするか、コマンドラインから JAR ファイルを実行します。

          java -jar cdata.jdbc.api.jar
        

    接続プロパティを入力し、接続文字列をクリップボードにコピーします。

    Scrapfly API は API キー認証を使用します。API キーは、すべてのリクエストで key クエリパラメータとして渡されます。

    API キー認証の設定

    接続を作成するには、Scrapfly の API キーが必要です。API キーを取得するには、以下のステップで進めます:

    1. scrapfly.io で Scrapfly アカウントにログインします。
    2. Dashboard に移動して API Keys を選択します。
    3. API キーをコピーします(本番環境用は scp-live-、テスト環境用は scp-test- で始まります)。

    API キーを取得したら、以下の接続プロパティを設定します:

    • AuthScheme:APIKey に設定します。
    • APIKey:Scrapfly の API キーに設定します。

    接続文字列の例:

    Profile=C:\profiles\Scrapfly.apip;AuthScheme=APIKey;ProfileSettings='APIKey=your_api_key';
    
  3. URL を接続文字列に設定します。例:
    jdbc:api:Profile=C:\profiles\Scrapfly.apip;AuthScheme=APIKey;ProfileSettings='APIKey=your_api_key';
  4. 「Apply」と「OK」をクリックして接続文字列を保存します。

これで、Data Explorer にデータソースが表示されます。

Scrapfly に対して SQL クエリを実行

JDBC Driver を介してアクセス可能な Scrapfly のエンティティ(テーブルとして利用可能)を参照するには、データソースを展開します。

クエリを実行するには、任意のテーブルを右クリックして「New」→「Query Console」を選択します。

Console で、実行したい SQL クエリを記述します。例:

SELECT ,  FROM Account WHERE  = ''

CData API Driver for JDBC の30日間の無料トライアルをダウンロードして、DataGrip でリアルタイムScrapfly のデータを操作してみてください。ご不明な点があれば、サポートチームにお問い合わせください。

はじめる準備はできましたか?

API Driver で Scrapfly のライブデータに接続

Scrapfly に接続