QuerySurge で CSV のデータ を検証

QuerySurge は、データの検証とテストを自動化するスマートなデータテストソリューションです。CData JDBC Driver for CSV と組み合わせることで、QuerySurge からライブのCSV のデータを操作できます。この記事では、QuerySurge からCSV のデータに接続する方法を説明します。

CData JDBC Driver は最適化されたデータ処理機能を備えており、ライブのCSV のデータとのやり取りにおいて比類のないパフォーマンスを提供します。CSV に複雑な SQL クエリを発行すると、ドライバーはフィルタや集計などのサポートされている SQL 操作を直接 CSV にプッシュし、サポートされていない操作（主に SQL 関数や JOIN 操作）はクライアント側の組み込み SQL エンジンで処理します。また、ビルトインの動的メタデータクエリ機能により、ネイティブなデータ型を使用してCSV のデータを操作・分析できます。

QuerySurge から CSV のデータ に接続

QuerySurge からライブのCSV のデータに接続するには、JDBC Driver の JAR ファイルを QuerySurge Agent にデプロイし、QuerySurge の Admin ビューから新しい接続を追加する必要があります。

JDBC Driver をデプロイ

1. CData JDBC Driver for CSV のインストーラをダウンロードし、パッケージを解凍して JAR ファイルを実行し、ドライバーをインストールします。
2. ドライバーのインストールが完了したら、Agent Service を停止します。
3. インストール先（通常は C:\Program Files\CData\CData JDBC Driver for CSV\lib\）から JAR ファイル（ライセンスファイルがある場合はそれも）を Agent（QuerySurge_install_dir\agent\jdbc）にコピーします。
4. Agent Service を再起動します。

QuerySurge への JDBC ドライバーのデプロイについての詳細は、QuerySurge ナレッジベースをご参照ください。

CSV への新しい接続を設定

1. QuerySurge にログインし、Admin ビューに移動します。
2. Administration Tree で Configuration -> Connections をクリックします。
3. Add をクリックして新しい接続を作成します。
4. QuerySurge Connection Wizard で Next をクリックします。
5. 接続の名前を入力します（例：CData JDBC Connection to CSV）。
6. Data Source を「All Other JDBC Connections (Connection Extensibility)」に設定し、Next をクリックします。
7. Driver Class を cdata.jdbc.csv.CSVDriver に設定し、Next をクリックします。

8. CSV への認証に必要な接続プロパティを使用して Connection URL を設定します。Connection URL は以下のような形式になります：

   jdbc:csv:DataSource=MyCSVFilesFolder;

   ビルトイン接続文字列デザイナ

   JDBC URL の構成については、CSV JDBC Driver に組み込まれている接続文字列デザイナを使用できます。JAR ファイルをダブルクリックするか、コマンドラインから JAR ファイルを実行してください。

   java -jar cdata.jdbc.csv.jar
   	

   接続プロパティを入力し、接続文字列をクリップボードにコピーします。

   CSV 接続プロパティの取得・設定方法

   DataSource プロパティにローカルフォルダ名を設定します。

   .csv、.tab、.txt ではない拡張子のファイルを扱う場合には、IncludeFiles 使用する拡張子をカンマ区切りで設定します。Microsoft Jet OLE DB 4.0 driver 準拠の場合にはExtended Properties を設定することができます。別の方法として、Schema.ini ファイルにファイル形式を記述することも可能です。

   CSV ファイルの削除や更新を行う場合には、UseRowNumbers をTRUE に設定します。RowNumber はテーブルKey として扱われます。

   Amazon S3 内のCSV への接続

   URI をバケットおよびフォルダに設定します。さらに、次のプロパティを設定して認証します。

   • AWSAccessKey：AWS アクセスキー（username）に設定。
   • AWSSecretKey：AWS シークレットキーに設定。

   Box 内のCSV への接続

   URI をCSV ファイルを含むフォルダへのパスに設定します。Box へ認証するには、OAuth 認証標準を使います。 認証方法については、Box への接続 を参照してください。

   Dropbox 内のCSV への接続

   URI をCSV ファイルを含むフォルダへのパスに設定します。Dropbox へ認証するには、OAuth 認証標準を使います。 認証方法については、Dropbox への接続 を参照してください。ユーザーアカウントまたはサービスアカウントで認証できます。ユーザーアカウントフローでは、以下の接続文字列で示すように、ユーザー資格情報の接続プロパティを設定する必要はありません。

   SharePoint Online SOAP 内のCSV への接続

   URI をCSV ファイルを含むドキュメントライブラリに設定します。認証するには、User、Password、およびStorageBaseURL を設定します。

   SharePoint Online REST 内のCSV への接続

   URI をCSV ファイルを含むドキュメントライブラリに設定します。StorageBaseURL は任意です。指定しない場合、ドライバーはルートドライブで動作します。 認証するには、OAuth 認証標準を使用します。

   FTP 内のCSV への接続

   URI をルートフォルダとして使用されるフォルダへのパスが付いたサーバーのアドレスに設定します。認証するには、User およびPassword を設定します。

   Google Drive 内のCSV への接続

   デスクトップアプリケーションからのGoogle への認証には、InitiateOAuth をGETANDREFRESH に設定して、接続してください。詳細はドキュメントの「Google Drive への接続」を参照してください。

   
9. 接続の Test Connection ボタンを有効にするため、Test Query を設定し（例：SELECT * FROM Customer LIMIT 1）、Next をクリックします。
10. Test Connection をクリックして接続が正しく設定されていることを確認し、Save をクリックして接続を追加します。

接続を追加したら、QuerySurge でCSV のデータに対して SQL クエリを実行できます。

QueryPair で CSV のデータ クエリを比較

接続を設定したら、以下の手順に従って QueryPair でCSV のデータのクエリを比較できます。

1. Design メニューから「Design Library」を選択します
2. QuerySurge Design の下の QueryPairs をクリックします
3. 「Create New QueryPair」をクリックします
4. QueryPair に名前を付けて Save をクリックします
5. Source または Target ペインで、上記で作成した接続を選択します（CSV を2回クエリする場合は同じ接続を選択するか、比較を実行する場合は別の接続を選択します）
6. 各ペインの Editor にクエリを入力します（例：SELECT * FROM Customer）
7. 「Design-Time Run」タブをクリックしてクエリを実行します
8. クエリの実行が完了したら、「View Query Results」をクリックしてクエリから返されたCSV のデータを確認します

30 日間の無償トライアルをダウンロードして、QuerySurge でライブのCSV のデータを活用してみてください。ご不明な点がございましたら、サポートチームまでお問い合わせください。