CData Connect AI を使用して Google Cloud Data Fusion でリアルタイムの AlloyDB のデータ パイプラインを構築
Google Cloud Data Fusion は、ビジュアルインターフェースを使用してさまざまなソースと同期先間でデータを接続、変換、移動できるため、データパイプラインの構築と管理を簡素化します。CData Connect AI と組み合わせることで、ELT/ETL データパイプラインの構築と管理にAlloyDB のデータへのアクセスが可能になります。この記事では、CData Connect AI を使用して AlloyDB へのライブ接続を作成する方法と、Cloud Data Fusion プラットフォームからリアルタイムのAlloyDB のデータに接続・アクセスする方法を説明します。
Cloud Data Fusion 用の AlloyDB 接続を設定
Cloud Data Fusion から AlloyDB への接続は、CData Connect AI によって実現されます。Cloud Data Fusion からAlloyDB のデータを扱うには、まず AlloyDB 接続を作成・設定します。
- Connect AI にログインし、Sources をクリック、次に Add Connection をクリック
- Add Connection パネルから「AlloyDB」を選択
-
AlloyDB に接続するために必要な認証プロパティを入力します。
AlloyDB 接続プロパティの取得・設定方法
AlloyDB に接続するには、次の接続プロパティが必要です。
- Server：AlloyDB データベースをホスティングしているサーバーのホスト名またはIP アドレス。
- Port（オプション）：AlloyDB データベースをホスティングしているサーバーのポート。このプロパティはデフォルトで5432に設定されます。
- User：AlloyDB サーバーに認証する際に使われるユーザー。
- Password：AlloyDB サーバーに認証する際に使われるパスワード。
- Database（オプション）：AlloyDB サーバーに接続する場合のデータベース。設定されていない場合は、ユーザーのデフォルトデータベースが使用されます。
AlloyDB への認証
標準認証
標準認証（事前に提供されたユーザーとパスワードの組み合わせを使用）は、デフォルトの認証形式です。標準認証で接続する場合は、これ以上のアクションは必要ありません。
pg_hba.conf 認証スキーム
CData 製品がサポートしている他の認証方法では、AlloyDB サーバー上のpg_hba.conf ファイルで有効化する必要があります。
AlloyDB サーバーでの認証の設定については、こちらを参照してください。
MD5
pg_hba.conf ファイルのauth-method をmd5 に設定すると、MD5 パスワード検証を使用して認証できます。
SASL
CData 製品は、SASL（特にSCRAM-SHA-256）でパスワードを検証することで認証できます。
この認証方法を使用するには、pg_hba.conf ファイルのauth-method をscram-sha-256 に設定します。
Kerberos
Kerberos 認証は、CData 製品が接続を試行している際にAlloyDB サーバーで開始されます。この認証方法を有効化するには、AlloyDB サーバーでKerberos を設定します。AlloyDB サーバーでのKerberos 認証の設定を完了したら、CData 製品からKerberos 認証を行う方法については、ヘルプドキュメントの「Kerberos の使用」セクションを参照してください。
- Save & Test をクリック
-
Add AlloyDB Connection ページで Permissions タブに移動し、ユーザーベースの権限を更新します。
Personal Access Token を追加
REST API、OData API、または仮想 SQL Server 経由で Connect AI に接続する場合、Personal Access Token（PAT）が Connect AI への接続認証に使用されます。アクセスの粒度を維持するため、サービスごとに個別の PAT を作成することをお勧めします。
- Connect AI アプリの右上にある歯車アイコン（）をクリックして Settings ページを開きます。
- Settings ページで Access Tokens セクションに移動し、 Create PAT をクリック。
-
PAT に名前を付けて Create をクリック。
- Personal Access Token は作成時にのみ表示されるので、必ずコピーして安全な場所に保存してください。
接続の設定と PAT の生成が完了したら、Cloud Data Fusion からAlloyDB のデータに接続する準備が整いました。
Cloud Data Fusion から AlloyDB に接続
以下の手順に従って、CData Connect AI JDBC ドライバーを介して Cloud Data Fusion から AlloyDB への接続を確立します：
- CData Connect AI JDBC ドライバーをダウンロード・インストール：
- CData Connect AI の Integrations ページを開きます。
- JDBC を検索・選択します。
- セットアップファイルをダウンロードして実行します。
- インストールが完了したら、インストールディレクトリ（例：C:\Program Files\CData\JDBC Driver for CData Connect\lib）から JAR ファイル（cdata.jdbc.connect.jar）をコピーします。
- Cloud Data Fusion にログイン。
- 右上の緑色の「+」ボタンをクリックしてエンティティを追加。
- Driver の下で Upload をクリック。
- CData Connect AI JDBC ドライバー（JAR ファイル）をアップロード。
- ドライバー設定を入力：
- Name：ドライバー名を入力
- Class name：「cdata.jdbc.connect.ConnectDriver」 と入力
- Version：ドライバーのバージョンを入力
- Description（オプション）：ドライバーの説明を入力
- Finish をクリック。
- ソース設定を入力：
- Label：接続を識別するための名前
- JDBC driver name：ステップ 6 で設定したドライバーを識別する JDBC ドライバー名を入力
- Connection string：JDBC 接続文字列を入力（例：
jdbc:connect:AuthScheme=Basic;user=username;password=PAT;
- User：CData Connect AI のユーザー名（CData Connect AI インターフェースの右上に表示）を入力（例：「[email protected]」）
- Password：Settings ページで生成した PAT を入力
- 右上の Validate をクリック。
- 接続が成功したら、UI を通じてパイプラインを編集・管理できます。
- 作成したパイプラインを実行。
トラブルシューティング
Cloud Data Fusion では、ソースデータの 「int」 型が自動的に 「long」 にキャストされる既知の問題があることにご注意ください。
クラウドアプリケーションから AlloyDB のデータ へのリアルタイムアクセス
これで、Google Cloud Data Fusion からリアルタイムのAlloyDB のデータへの直接接続が確立されました。AlloyDB のデータ をレプリケーションすることなく、さまざまなソースと同期先間でデータをスムーズに移動できる接続を追加作成し、データ統合プロセスを効率化できます。
クラウドアプリケーションから AlloyDB を含む 300 以上の SaaS、ビッグデータ、NoSQL ソースへのリアルタイムデータアクセスについては、CData Connect AI をご覧ください。