【ノーコード】Hugging Face のデータを複数のデータベースにレプリケーション。



常時起動のアプリケーションは、自動フェイルオーバー機能およびリアルタイムなデータアクセスを必要とします。CData Sync は、リアルタイムHugging Face のデータをミラーリングデータベース、上記稼働のクラウドデータベース、レポーティングサーバーなどのほかのデータベースに連携し、Windows からリモートHugging Face に接続し、自動的に同期を取ります。

レプリケーションの同期先の設定

CData Sync を使って、Hugging Face をクラウド・オンプレにかかわらず複数のデータベースレプリケーションします。レプリケーションの同期先を追加するには、［接続］タブを開きます。

それぞれのデータベース向けに以下を行います：

1. ［同期先］タブをクリックします。
2. 同期先を選択します。この記事では、SQLite を使います。
3. 必要な接続プロパティを入力します。SQLite データベースにHugging Face をレプリケートするためにDataSource ボックスにファイルパスを入力します。
4. ［接続のテスト］をクリックして、正しく接続できているかをテストします。

5. ［変更を保存］をクリックします。

Hugging Face 接続の設定

データソース側にHugging Face を設定します。［接続］タブをクリックします。

1. ［同期先］タブをクリックします。
2. Hugging Face アイコンをデータソースとして選択します。プリインストールされたソースにHugging Face がない場合には、追加データソースとしてダウンロードします。
3. 接続プロパティに入力をします。
   
   

   HuggingFace Hub は、API へのアクセスを可能にするためにトークンベースの認証を使用します。この API では、HuggingFace Hub プラットフォーム上の機械学習モデル、データセット、スペース、論文、その他のリソースにアクセスできます。

   API キー認証の設定

   HuggingFace Hub への認証には、API Key（アクセストークン）を指定する必要があります。アクセストークンを取得するには、以下のステップで進めます：

   1. https://huggingface.co で HuggingFace アカウントにログインします
   2. Settings > Access Tokens に移動します
   3. 「New token」をクリックして新しいアクセストークンを作成します
   4. 適切な権限（read または write）を選択します
   5. トークンの値をコピーします

   アクセストークンを取得したら、以下の接続プロパティを設定します：

   • AuthScheme：APIKey に設定します。
   • APIKey：HuggingFace のアクセストークンに設定します。

   接続文字列の例

   Profile=C:\profiles\HuggingFace.apip;ProfileSettings='APIKey=hf_xxxxxxxxxxxxxxxxxxxx';
   

   
4. ［接続のテスト］をクリックして、正しく接続できているかをテストします。
5. ［変更を保存］をクリックします。

レプリケーションを実行するクエリの設定

CData Sync はレプリケーションをコントロールするSQL クエリを簡単なGUI 操作で設定できます。レプリケーションジョブ設定には、［ジョブ］タブに進み、［ジョブを追加］ボタンをクリックします。 次にデータソースおよび同期先をそれぞれドロップダウンから選択します。

テーブル全体をレプリケーションする

テーブル全体をレプリケーションするには、［テーブル］セクションで［テーブルを追加］をクリックします。表示されたテーブルリストからレプリケーションするテーブルをチェックします。

テーブルをカスタマイズしてレプリケーションする

SQL クエリを使って、レプリケーションをカスタマイズすることができます。REPLICATE ステートメントは、データベースにテーブルをキャッシュして、保持するハイレベルなコマンドです。Hugging Face API でサポートされているSELECT クエリを使うことができます。レプリケーションのカスタマイズには、［カスタムクエリを追加］をクリックして、カスタムクエリステートメントを定義します。

次のステートメントは、Hugging Face のテーブルのアップデートを差分更新でキャッシュします:

REPLICATE Collections;

特定のデータベースを更新するために、レプリケーションクエリを含むファイルを指定することもできます。レプリケーションクエリをセミコロンで区切ります。複数のHugging Face アカウントを同じデータベースに同期しようとする際には、以下のオプションが便利です：

• REPLICATE SELECT ステートメントで別のprefix を使う：

  REPLICATE PROD_Collections SELECT * FROM Collections;
  

• 別の方法では、別のスキーマを使う：

  REPLICATE PROD.Collections SELECT * FROM Collections;
  

レプリケーションのスケジュール起動設定

［スケジュール］セクションでは、レプリケーションジョブの自動起動スケジュール設定が可能です。反復同期間隔は、15分おきから毎月1回までの間で設定が可能です。

レプリケーションジョブを設定したら、［変更を保存］ボタンを押して保存します。Hugging Face のオンプレミス、クラウドなどのデータベースへのレプリケーションジョブは一つではなく複数を作成することが可能です。