Redash でリアルタイムの Spark のデータをクエリ、可視化、共有
Redash は、データのクエリ、可視化、共有を可能にするコラボレーションツールです。CData Connect AI と組み合わせることで、Redash からリアルタイムのSpark のデータにアクセスできるようになります。この記事では、Connect AI を使用して Spark に接続し、Redash でリアルタイムのSpark のデータを操作する方法を説明します。
CData Connect AI は Spark 専用のSQL Server インターフェースを提供し、ネイティブでサポートされているデータベースにデータをレプリケートすることなく Spark のデータをクエリできます。最適化されたデータ処理を標準で使用し、CData Connect AI はサポートされているすべてのSQL 操作（フィルター、JOIN など）を Spark に直接プッシュし、サーバーサイド処理を活用して必要なSpark のデータを迅速に返します。
Redash 用に Spark への接続を設定
Redash から Spark への接続は、CData Connect AI によって実現されます。Redash でSpark のデータを操作するには、まず Spark 接続を作成し設定します。
- Connect AI にログインして「Sources」をクリックし、 Add Connection をクリックします
- Add Connection パネルから「Spark」を選択します
-
Spark への接続に必要な認証プロパティを入力します。
SparkSQL への接続
SparkSQL への接続を確立するには以下を指定します。
- Server：SparkSQL をホストするサーバーのホスト名またはIP アドレスに設定。
- Port：SparkSQL インスタンスへの接続用のポートに設定。
- TransportMode：SparkSQL サーバーとの通信に使用するトランスポートモード。有効な入力値は、BINARY およびHTTP です。デフォルトではBINARY が選択されます。
- AuthScheme：使用される認証スキーム。有効な入力値はPLAIN、LDAP、NOSASL、およびKERBEROS です。デフォルトではPLAIN が選択されます。
Databricks への接続
Databricks クラスターに接続するには、以下の説明に従ってプロパティを設定します。Note：必要な値は、「クラスター」に移動して目的のクラスターを選択し、 「Advanced Options」の下にある「JDBC/ODBC」タブを選択することで、Databricks インスタンスで見つけることができます。
- Server：Databricks クラスターのサーバーのホスト名に設定。
- Port：443
- TransportMode：HTTP
- HTTPPath：Databricks クラスターのHTTP パスに設定。
- UseSSL：True
- AuthScheme：PLAIN
- User：'token' に設定。
- Password：パーソナルアクセストークンに設定（値は、Databricks インスタンスの「ユーザー設定」ページに移動して「アクセストークン」タブを選択することで取得できます）。
- Save & Test をクリックします
-
Add Spark Connection ページの「Permissions」タブに移動し、ユーザーベースの権限を更新します。
Personal Access Token の追加
REST API、OData API、またはVirtual SQL Server 経由でConnect AI に接続する場合、Personal Access Token（PAT）を使用してConnect AI への接続を認証します。アクセス管理の粒度を維持するために、サービスごとに個別のPAT を作成することをお勧めします。
- Connect AI アプリの右上にある歯車アイコン（）をクリックして設定ページを開きます。
- Settings ページで「Access Tokens」セクションに移動し、 Create PAT をクリックします。
-
PAT に名前を付けて「Create」をクリックします。
- Personal Access Token は作成時にのみ表示されるため、必ずコピーして安全な場所に保存してください。
接続の設定とPAT の生成が完了したら、Redash からSpark のデータに接続する準備が整いました。
Connect AI を使用してRedash から Spark に接続
Virtual SQL Server を使用してRedash からCData Connect AI への接続を確立するには、以下の手順に従います：
- Redash にログインします。
- 右上の設定ウィジェットをクリックします。
- New Data Source をクリックします。
- Data Source Type としてMicrosoft SQL Server を選択します。
-
設定タブで以下のプロパティを設定します：
- Database Name：接続したいCData Connect AI データソースの接続名を入力します（例：Salesforce1）。
- Server：Virtual SQL Server のホスト名（tds.cdata.com）を入力します
- User：CData Connect AI のユーザー名を入力します。これはCData Connect AI インターフェースの右上隅に表示されています。例：[email protected]
- Password：Settings ページで生成したPAT を入力します。
- Port：14333 を入力します
- Create をクリックします。
- Test Connection をクリックして、接続が正しく設定されていることを確認します。
これで、Redash でリアルタイムのSpark のデータを操作できるようになりました。
CData Connect AI の入手
Redash から300以上のSaaS、Big Data、NoSQL ソースへのリアルタイムデータアクセスを実現するために、CData Connect AI を今すぐお試しください！