Google Data Fusion で SurveyMonkey に連携した ETL プロセスを作成

Jerod Johnson
Jerod Johnson
Director, Technology Evangelism
CData JDBC Driver を Google Data Fusion にロードし、SurveyMonkey のデータ にリアルタイムでアクセスできる ETL プロセスを作成します。

Google Data Fusion を使用すると、セルフサービス型のデータ連携を行い、異なるデータソースを統合できます。CData JDBC Driver for SurveyMonkey をアップロードすることで、Google Data Fusion のパイプライン内から SurveyMonkey のデータ にリアルタイムでアクセスできるようになります。CData JDBC Driver を使用すると、SurveyMonkey のデータ を Google Data Fusion でネイティブにサポートされている任意のデータソースにパイプできますが、この記事では、SurveyMonkey から Google BigQuery へデータをパイプする方法を説明します。

CData JDBC Driver for SurveyMonkey を Google Data Fusion にアップロード

CData JDBC Driver for SurveyMonkey を Google Data Fusion インスタンスにアップロードして、SurveyMonkey のデータ にリアルタイムでアクセスしましょう。Google Data Fusion では JDBC ドライバーの命名規則に制限があるため、JAR ファイルを driver-version.jar という形式に合わせてコピーまたはリネームしてください。例:cdatasurveymonkey-2020.jar

  1. Google Data Fusion インスタンスを開きます
  2. をクリックしてエンティティを追加し、ドライバーをアップロードします
  3. "Upload driver" タブで、リネームした JAR ファイルをドラッグまたは参照します。
  4. "Driver configuration" タブで以下を設定します:
    • Name: ドライバーの名前(cdata.jdbc.surveymonkey)を作成し、メモしておきます
    • Class name: JDBC クラス名を設定します:(cdata.jdbc.surveymonkey.SurveyMonkeyDriver)
  5. "Finish" をクリックします

Google Data Fusion で SurveyMonkey のデータ に接続

JDBC Driver をアップロードしたら、Google Data Fusion のパイプラインで SurveyMonkey のデータ にリアルタイムでアクセスできます。

  1. Pipeline Studio に移動して、新しいパイプラインを作成します
  2. "Source" オプションから "Database" をクリックして、JDBC Driver 用のソースを追加します
  3. Database ソースの "Properties" をクリックしてプロパティを編集します

    NOTE:Google Data Fusion で JDBC Driver を使用するには、ライセンス(製品版またはトライアル)とランタイムキー(RTK)が必要です。ライセンス(またはトライアル)の取得については、CData までお問い合わせください。

    • Label を設定します
    • Reference Name を将来の参照用の値に設定します(例:cdata-surveymonkey)
    • Plugin Type を "jdbc" に設定します
    • Connection String を SurveyMonkey の JDBC URL に設定します。例:

      jdbc:surveymonkey:RTK=5246...;OAuthClientId=MyOAuthClientId;OAuthClientSecret=MyOAuthClientSecret;CallbackURL=http://localhost:portNumber;

      SurveyMonkey はOAuth 2 認証標準を利用しています。SurveyMonkey がアンケートの回答を読むためにこれを必要とすることを考えると、アンケートを読むアカウントには有料プランのサブスクリプションが必要です。

      SurveyMonkey への接続に使用できる認証方法は2つあります。

      • プライベートoauth アプリケーションを登録するときに、パーソナルアクセストークンを使用します。
      • パブリックoauth アプリケーションを登録するときに、OAuth を使用します。

      パーソナルアクセストークンの使用

      個人用トークンを使用して、自分のデータをテストし、アクセスします。個人用トークンを取得するには、ヘルプの「Creating a Custom OAuth App」の手順に従って、次の接続プロパティを設定します。

      • OAuthAccessToken:アプリケーション設定で生成されたAccessToken に設定。
      • InitiateOAuth:OFF に設定。

      OAuth の使用

      CData 製品はすでにSurveyMonkey にOAuth アプリケーションとして登録されています。そのため、デフォルトでは、自動的に埋め込みクレデンシャルを使用して接続します。

      独自のカスタムOAuth アプリを使用したい場合は、ヘルプのCustom Credentials を参照してください。

      ビルトイン接続文字列デザイナー

      JDBC URL の作成には、SurveyMonkey JDBC Driver に組み込まれている接続文字列デザイナーを使用できます。JAR ファイルをダブルクリックするか、コマンドラインから JAR ファイルを実行してください。

            java -jar cdata.jdbc.surveymonkey.jar
            

      接続プロパティを入力し、接続文字列をクリップボードにコピーします。

    • Import Query を SurveyMonkey から取得したいデータを抽出する SQL クエリに設定します。例:
      SELECT * FROM MySurvey_Responses
  4. "Sink" タブから、同期先シンクを追加します(この例では Google BigQuery を使用します)
  5. BigQuery シンクの "Properties" をクリックしてプロパティを編集します
    • Label を設定します
    • Reference Name を surveymonkey-bigquery のような値に設定します
    • Project ID を特定の Google BigQuery プロジェクト ID に設定します(またはデフォルトの "auto-detect" のままにします)
    • Dataset を特定の Google BigQuery データセットに設定します
    • Table を SurveyMonkey のデータ を挿入するテーブル名に設定します

Source と Sink を設定すると、SurveyMonkey のデータ を Google BigQuery にパイプする準備が整います。パイプラインを保存してデプロイしてください。パイプラインを実行すると、Google Data Fusion が SurveyMonkey からリアルタイムデータをリクエストし、Google BigQuery にインポートします。

これはシンプルなパイプラインの例ですが、変換、分析、条件などを使用してより複雑な SurveyMonkey パイプラインを作成できます。CData JDBC Driver for SurveyMonkey の 30日間の無償トライアルをダウンロードして、今すぐ Google Data Fusion で SurveyMonkey のデータ をリアルタイムで活用しましょう。

はじめる準備はできましたか?

SurveyMonkey Driver の無料トライアルをダウンロードしてお試しください:

 ダウンロード

詳細:

SurveyMonkey Icon SurveyMonkey JDBC Driver お問い合わせ

Rollups、Surveys、Questions などのSurveyMonkey データを組み込んだパワフルなJava アプリケーションを短時間・低コストで作成して配布できます。