Denodo Platform で Hugging Face のデータ に接続

Denodo Platform は、エンタープライズデータベースのデータを統合的に扱うことができるデータ仮想化製品です。CData API Driver for JDBC と組み合わせることで、Denodo ユーザーは他のエンタープライズデータソースと並んでライブ Hugging Face のデータ を扱うことができます。本記事では、Denodo Virtual DataPort Administrator で Hugging Face 用の仮想データソースを作成する方法を解説します。

CData JDBC Driver は、最適化されたデータ処理機能を内蔵しており、ライブ Hugging Face のデータ とのやり取りにおいて比類のないパフォーマンスを提供します。Hugging Face に対して複雑な SQL クエリを発行すると、ドライバーはフィルターや集計などのサポートされている SQL 操作を直接 Hugging Face にプッシュし、内蔵の SQL エンジンを使用してサポートされていない操作（主に SQL 関数や JOIN 操作）をクライアントサイドで処理します。また、動的メタデータクエリ機能を内蔵しているため、ネイティブデータ型を使用して Hugging Face のデータ を操作・分析できます。

Hugging Face 仮想ポートの作成

Denodo からライブ Hugging Face のデータ に接続するには、JDBC Driver の JAR ファイルを Denodo の外部ライブラリディレクトリにコピーし、Virtual DataPort Administrator ツールで新しい JDBC データソースを作成します。

1. CData API Driver for JDBC インストーラーをダウンロードし、パッケージを解凍して JAR ファイルを実行してドライバーをインストールします。
2. インストール先（通常は C:\Program Files\CData\CData API Driver for JDBC\lib\）から JAR ファイル（およびライセンスファイルが存在する場合はそれも）を Denodo 外部ライブラリディレクトリ（C:\Denodo\Denodo Platform\lib-external\jdbc-drivers\cdata-api-19）にコピーします。
3. Denodo Virtual DataPort Administrator ツールを開き、Server Explorer タブに移動します。
4. "admin" を右クリックし、New -> Data source -> JDBC を選択します。
5. JDBC 接続を設定します:
   • Name: 任意の名前（例: api）
   • Database adapter: Generic
   • Driver class path: C:\Denodo\Denodo Platform\lib-external\jdbc-drivers\cdata-api-19
   • Driver class: cdata.jdbc.api.APIDriver

   • Database URI: 必要な接続プロパティを使用して JDBC URL を設定します。例:

     jdbc:api:Profile=C:\profiles\HuggingFace.apip;ProfileSettings='APIKey=hf_xxxxxxxxxxxxxxxxxxxx';

     

     Database URI の作成方法は以下のとおりです:

     ビルトイン接続文字列デザイナー

     JDBC URL の構築には、Hugging Face JDBC Driver に組み込まれた接続文字列デザイナーを使用できます。JAR ファイルをダブルクリックするか、コマンドラインから JAR ファイルを実行してください。

     	java -jar cdata.jdbc.api.jar
     	

     接続プロパティを入力し、接続文字列をクリップボードにコピーします。

     HuggingFace Hub は、API へのアクセスを可能にするためにトークンベースの認証を使用します。この API では、HuggingFace Hub プラットフォーム上の機械学習モデル、データセット、スペース、論文、その他のリソースにアクセスできます。

     API キー認証の設定

     HuggingFace Hub への認証には、API Key（アクセストークン）を指定する必要があります。アクセストークンを取得するには、以下のステップで進めます：

     1. https://huggingface.co で HuggingFace アカウントにログインします
     2. Settings > Access Tokens に移動します
     3. 「New token」をクリックして新しいアクセストークンを作成します
     4. 適切な権限（read または write）を選択します
     5. トークンの値をコピーします

     アクセストークンを取得したら、以下の接続プロパティを設定します：

     • AuthScheme：APIKey に設定します。
     • APIKey：HuggingFace のアクセストークンに設定します。

     接続文字列の例

     Profile=C:\profiles\HuggingFace.apip;ProfileSettings='APIKey=hf_xxxxxxxxxxxxxxxxxxxx';
     

     
6. "Test connection" ボタンをクリックして設定を確認し、Save をクリックします。

VirtualPort Administrator ツールで Hugging Face のデータ を表示

データソースを作成したら、Denodo Platform で使用する Hugging Face のデータ のベースビューを作成できます。

1. 新しく作成した VirtualPort (admin.API) で "Create base view" ボタンをクリックします。
2. オブジェクトツリーを展開し、インポートするオブジェクト（テーブル）を選択します。
3. "Create selected" ボタンをクリックして、Hugging Face のデータ のビューを作成します。
   オプション: "Create associations from foreign keys" をクリックして、オブジェクト間のリレーションシップを定義できます。
4. ビューが作成されたら、Server Explorer で対象テーブル（cdata_api_collections）に移動し、選択したテーブルをダブルクリックします。
5. 新しいタブで "Execution panel" をクリックしてクエリパネルを開きます。
6. "Execute" タブでクエリをカスタマイズするか、デフォルトのクエリを使用します:

   SELECT * FROM cdata_api_collections CONTEXT ('i18n'='us_est', 'cache_wait_for_load'='true')
   

   
7. Execute をクリックしてデータを表示します。

ベースビューの作成後は、Denodo Platform の他のデータソースと同様にライブ Hugging Face のデータ を扱うことができます。たとえば、Denodo Data Catalog で Hugging Face をクエリできます。

CData API Driver for JDBC の 30日間無料トライアルをダウンロードして、Denodo Platform でライブ Hugging Face のデータ の活用を始めましょう。ご不明な点がございましたら、サポートチーム までお問い合わせください。