Spark:
バッチ処理・ストリーム処理・機械学習・グラフ処理を単一フレームワークで実行でき、Hadoopの数十倍の処理速度を実現します。AWS EMRやDatabricksなどクラウド環境との連携により、大規模データパイプラインの構築・運用を効率化します。
Google Cloud SQL:
Google Cloud SQL は、ユーザーがクラウドで MySQL、PostgreSQL、SQL Server データベースを簡単にセットアップ、維持、スケーリングできる完全に管理されたリレーショナルデータベースサービスです。自動バックアップ、高可用性、他の Google Cloud サービスとのシームレスな統合などの機能により、Cloud SQL は開発者にとってデータベース管理を簡素化します。
CData Sync で Spark と Google Cloud SQL を統合
CData Sync を使えば、Apache Spark SQL データをデータベース・データレイク・データウェアハウスに継続的にレプリケーションし、分析・レポート・AI・機械学習にすぐ活用できます。
- Google Cloud SQL をはじめ、主要なデータベース・データウェアハウスにノーコードでデータを同期できます。
- Spark データを主要なデータベース・データウェアハウスに自動レプリケートし、運用レポートや BI・分析に活用できます。
- Spark へのクエリをオフロードすることで、負荷を軽減しパフォーマンスを向上させます。
- Spark をビジネス分析ツールと連携し、BI や意思決定を支援します。
- Apache Spark SQL データをアーカイブし、ディザスタリカバリに備えます。
CData Sync の詳細を見る
Spark データ統合機能
コード不要の Spark データ統合
複雑なコードやセットアップは不要。短時間でより多くのデータを移動できます。Spark を任意の同期先に簡単に接続できます。
数分で構築できるシンプルなデータパイプライン
増分更新と自動スキーマレプリケーションにより、Spark データ統合の手間が省け、Google Cloud SQL には常に最新データが保持されます。
行数課金なし
予測可能で透明性の高い料金体系で、必要なすべてのデータをレプリケート。Spark と Google Cloud SQL の間で無制限にレプリケーションできます。
その他の Spark データ統合ツール
Spark からサポートされている任意のデータストアにデータを統合・レプリケートするデータパイプラインを簡単に作成できます：
