Spark:
Apache Spark SQL は、分散コンピューティング環境で大規模なデータセットに対して SQL クエリを実行することを可能にする強力なデータ処理エンジンです。Spark のコア機能とシームレスに統合され、ユーザーは複雑なデータ変換、集計、分析を容易に実行することができます。Spark SQL は、さまざまなデータ形式とソースもサポートしています。
Microsoft Azure Tables:
Microsoft Azure Tables は、ユーザーが構造化データをクラウドに保存できる NoSQL データストレージサービスです。大量のデータへの高速アクセスを必要とするアプリケーションに対して、高可用性、スケーラビリティ、低レイテンシーを提供します。Azure Tables は、大規模なデータの保存とクエリを行うためのコスト効果の高いソリューションです。
CData Sync で Spark と Microsoft Azure Tables を統合
CData Sync を使えば、Apache Spark SQL データをデータベース・データレイク・データウェアハウスに継続的にレプリケーションし、分析・レポート・AI・機械学習にすぐ活用できます。
- Microsoft Azure Tables をはじめ、主要なデータベース・データウェアハウスにノーコードでデータを同期できます。
- Spark データを主要なデータベース・データウェアハウスに自動レプリケートし、運用レポートや BI・分析に活用できます。
- Spark へのクエリをオフロードすることで、負荷を軽減しパフォーマンスを向上させます。
- Spark をビジネス分析ツールと連携し、BI や意思決定を支援します。
- Apache Spark SQL データをアーカイブし、ディザスタリカバリに備えます。
Spark を Microsoft Azure Tables と統合
Spark データ統合機能
複雑なコードやセットアップは不要。短時間でより多くのデータを移動できます。Spark を任意の同期先に簡単に接続できます。
増分更新と自動スキーマレプリケーションにより、Spark データ統合の手間が省け、Microsoft Azure Tables には常に最新データが保持されます。
予測可能で透明性の高い料金体系で、必要なすべてのデータをレプリケート。Spark と Microsoft Azure Tables の間で無制限にレプリケーションできます。
その他の Spark データ統合ツール
Spark からサポートされている任意のデータストアにデータを統合・レプリケートするデータパイプラインを簡単に作成できます：
