Redash でリアルタイムの Kafka のデータをクエリ、可視化、共有
Redash は、データのクエリ、可視化、共有を可能にするコラボレーションツールです。CData Connect AI と組み合わせることで、Redash からリアルタイムのKafka のデータにアクセスできるようになります。この記事では、Connect AI を使用して Kafka に接続し、Redash でリアルタイムのKafka のデータを操作する方法を説明します。
CData Connect AI は Kafka 専用のSQL Server インターフェースを提供し、ネイティブでサポートされているデータベースにデータをレプリケートすることなく Kafka のデータをクエリできます。最適化されたデータ処理を標準で使用し、CData Connect AI はサポートされているすべてのSQL 操作（フィルター、JOIN など）を Kafka に直接プッシュし、サーバーサイド処理を活用して必要なKafka のデータを迅速に返します。
Redash 用に Kafka への接続を設定
Redash から Kafka への接続は、CData Connect AI によって実現されます。Redash でKafka のデータを操作するには、まず Kafka 接続を作成し設定します。
- Connect AI にログインして「Sources」をクリックし、 Add Connection をクリックします
- Add Connection パネルから「Kafka」を選択します
-
Kafka への接続に必要な認証プロパティを入力します。
Apache Kafka 接続プロパティの取得・設定方法
それでは、Apache Kafka に接続していきましょう。.NET ベースのエディションは、Confluent.Kafka およびlibrdkafka ライブラリに依存して機能します。 これらのアセンブリはインストーラーにバンドルされており、CData 製品と一緒に自動的にインストールされます。 別のインストール方法をご利用の場合は、NuGet から依存関係のあるConfluent.Kafka 2.6.0をインストールしてください。
Apache Kafka サーバーのアドレスを指定するには、BootstrapServers パラメータを使用します。
デフォルトでは、CData 製品はデータソースとPLAINTEXT で通信しており、そのため、データはすべて暗号化されずに送信されます。 通信を暗号化したい場合は、以下の設定を行ってください：
- UseSSL をtrue に設定し、CData 製品がSSL 暗号化を使用するように構成します
- SSLServerCert およびSSLServerCertType を設定して、サーバー証明書をロードします
Apache Kafka への認証
続いて、認証方法を設定しましょう。Apache Kafka データソースでは、以下の認証方法をサポートしています：
- Anonymous
- Plain
- SCRAM ログインモジュール
- SSL クライアント証明書
- Kerberos
Anonymous 認証
Apache Kafka の特定のオンプレミスデプロイメントでは、認証接続プロパティを設定することなくApache Kafka に接続できます。 このような接続はanonymous（匿名）と呼ばれます。
匿名認証を行うには、以下のプロパティを設定してください。
- AuthScheme：None
その他の認証方法については、ヘルプドキュメントをご確認ください。
- Save & Test をクリックします
-
Add Kafka Connection ページの「Permissions」タブに移動し、ユーザーベースの権限を更新します。
Personal Access Token の追加
REST API、OData API、またはVirtual SQL Server 経由でConnect AI に接続する場合、Personal Access Token（PAT）を使用してConnect AI への接続を認証します。アクセス管理の粒度を維持するために、サービスごとに個別のPAT を作成することをお勧めします。
- Connect AI アプリの右上にある歯車アイコン（）をクリックして設定ページを開きます。
- Settings ページで「Access Tokens」セクションに移動し、 Create PAT をクリックします。
-
PAT に名前を付けて「Create」をクリックします。
- Personal Access Token は作成時にのみ表示されるため、必ずコピーして安全な場所に保存してください。
接続の設定とPAT の生成が完了したら、Redash からKafka のデータに接続する準備が整いました。
Connect AI を使用してRedash から Kafka に接続
Virtual SQL Server を使用してRedash からCData Connect AI への接続を確立するには、以下の手順に従います：
- Redash にログインします。
- 右上の設定ウィジェットをクリックします。
- New Data Source をクリックします。
- Data Source Type としてMicrosoft SQL Server を選択します。
-
設定タブで以下のプロパティを設定します：
- Database Name：接続したいCData Connect AI データソースの接続名を入力します（例：Salesforce1）。
- Server：Virtual SQL Server のホスト名（tds.cdata.com）を入力します
- User：CData Connect AI のユーザー名を入力します。これはCData Connect AI インターフェースの右上隅に表示されています。例：[email protected]
- Password：Settings ページで生成したPAT を入力します。
- Port：14333 を入力します
- Create をクリックします。
- Test Connection をクリックして、接続が正しく設定されていることを確認します。
これで、Redash でリアルタイムのKafka のデータを操作できるようになりました。
CData Connect AI の入手
Redash から直接、数百種類のSaaS、ビッグデータ、NoSQL ソースへのリアルタイムデータアクセスを実現するには、今すぐCData Connect AI をお試しください！