Exploratory でApache Airflow のデータを連携する方法

桑島義行
桑島義行
テクニカルディレクター
ODBC 接続でExploratory からApache Airflow のデータにSQL でクエリ



CData ODBC Driver for API は、ODBC 経由でリアルタイムApache Airflow データに標準SQL での利用を可能にします。 ここでは、汎用ODBC データプロバイダーとしてApache Airflow に接続し、データアナリティクスツールのExploratory (https://exploratory.io/) からApache Airflow のデータを連携利用する手順を説明します。
Exploratory は、多くのRDB やRedshift、BigQuery などのクラウドデータストアに対応していますが、SaaS データを分析したい場合にはCData ODBC ドライバを使うことで、API コーディング不要でデータを活用できます。今回はApache Airflow を例に説明します。

CData ODBC ドライバとは？

CData ODBC ドライバは、以下のような特徴を持ったリアルタイムデータ連携ソリューションです。

  1. Apache Airflow をはじめとする、CRM、MA、会計ツールなど多様なカテゴリの270種類以上のSaaS / オンプレミスデータソースに対応
  2. 多様なアプリケーション、ツールにApache Airflow のデータを連携
  3. ノーコードでの手軽な接続設定
  4. 標準 SQL での柔軟なデータ読み込み・書き込み

CData ODBC ドライバでは、1.データソースとしてApache Airflow の接続を設定、2.Exploratory 側でODBC Driver との接続を設定、という2つのステップだけでデータソースに接続できます。以下に具体的な設定手順を説明します。

CData ODBC ドライバのインストールとApache Airflow への接続設定

まずは、本記事右側のサイドバーからAPI ODBC Driver の無償トライアルをダウンロード・インストールしてください。30日間無償で、製品版の全機能が使用できます。

次にマシンにApache Airflow のデータ に接続するODBC DSN を設定します。Exploratory からはそのODBC DSN を参照する形になります。ODBC DSN 設定の詳細については、ドキュメントを参照してください。

まず、Profile 接続プロパティをディスク上の ApacheAirflow プロファイルの場所に設定します（例：C:\profiles\ApacheAirflow.apip）。次に、ProfileSettings 接続プロパティを ApacheAirflow の接続文字列に設定します（以下を参照）。

ApacheAirflow API プロファイル設定

Apache Airflow 3 では、API 認証に JWT Bearer トークンを使用します。トークンは、Airflow Web UI の「Settings」から生成するか、Airflow CLI の airflow users create と /api/v2/auth/token エンドポイントを使って生成できます。なお、このプロファイルは /api/v2 REST API を使用する Apache Airflow 3.x を対象としています。Airflow 2.x で使われていた従来の /api/v1 エンドポイントには対応していません。

以下の接続プロパティを設定すると、接続できるようになります。

  • AuthScheme：APIKey に設定します。
  • APIKey：Apache Airflow の JWT Bearer トークンに設定します。
  • Server：Airflow インスタンスのベース URL に設定します（例：http://localhost:8080）。

Exploratory 上でApache Airflow のデータをセット

  • Exploratory で［コネクション］をクリックして新しいコネクションを作成します。
  • ［追加］→［ODBC］の順にクリック。
  • コネクション追加画面で先ほど設定したApache Airflow ODBC のDSN を設定します。
    名前：任意
    タイプ：ODBC
    DSN：上の設定したDSN 名（CData Apache Airflow Sys）
    • Adding new connection
  • コネクションテストを下の地、［追加］を押して接続を確定させます。

Exploratory でApache Airflow のデータをクエリし、データフレームとして保存

さあ、Exploratory からApache Airflow のデータを扱ってみましょう。

  • Exploratory でプロジェクトを［新規作成］します。
  • ［データフレーム］の［+］印をクリックし、［データベースデータ］を選択します。
    • Create new Dataframe
  • データベースは［ODBC］をクリック。
    • Select ODBC
  • ［コネクション］で先ほど設定したApache Airflow のコネクションを選択します。
  • RDB ソースの感覚でSELECT クエリでApache Airflow のデータをクエリします。標準SQL でフィルタリング、ソート、JOIN も可能です。
    • Query data using standard SQL
  • データセットをデータフレームとして保存します。

Exploratory でのApache Airflow のデータの分析

データフレームになったデータは通常のRDB データソースと同じようにExploratory で利用可能です。

Query data using standard SQL

おわりに

このようにCData ODBC ドライバと併用することで、270を超えるSaaS、NoSQL データをコーディングなしで扱うことができます。30日の無償評価版が利用できますので、ぜひ自社で使っているクラウドサービスやNoSQL と合わせて活用してみてください。

CData ODBC ドライバは日本のユーザー向けに、UI の日本語化、ドキュメントの日本語化、日本語でのテクニカルサポートを提供しています。

はじめる準備はできましたか？

API Driver で Apache Airflow のライブデータに接続

Apache Airflow に接続

この記事の内容

関連記事