Blog
 

Author: 宮本航太

December 22, 2020

GCP内で完結！BigQuery にSaaS データをローディングする構成について

by 宮本航太

本記事はBigQuery Advent Calendar 2020 22日目の記事です。 qiita.com こんにちは！CData Software Japan エンジニアの宮本です。 2020年もあっという間に終わろうとしていますが、この１年を思い返してみると、感覚的に去年に比べてBigQuery を軸にした相…

続きを読む
CData SyncGCPBigQueryDataflowCloud Data FusionCData Syncソリューションとユースケース
December 14, 2020

ELTツール＋Dataform でBigQuery へのデータロード・チェック・マージを自動化してみた：CDataSync

by 宮本航太

こんにちは、CData Software でエンジニアをしている宮本です。 先日、Google からDataform がGCP の傘下になったとアナウンスがありました。 cloud.google.com 自分自身、Dataform というサービスを知らなかったのですが、Webサイトやドキュメントなどを読…

続きを読む
CData SyncELTDataformBigQueryCData Syncデータ連携ソリューションとユースケース
December 10, 2020

HubSpot のカスタムオブジェクトにある製品情報をSalesforce に定期連携：CData Arc

by 宮本航太

こんちにちは、CData Software Japan エンジニアの宮本です。 HubSpot でカスタムオブジェクトが使えるようになったというアナウンスが出てからまだ間もないですが、今回はHubSpot → Salesforce への定期連携を行ってみます。 シナリオ CData Arc とは？ 必要な…

続きを読む
CData ArcHubSpotCData Arcデータ連携ソリューションとユースケース
December 9, 2020

ELTツールのCDataSyncでHubSpotからMySQLへのデータ同期をやってみよう

by 宮本航太

こんにちは、CData Software Japan エンジニアの宮本です。 今回はCData Sync というEL・ELTツールを使って、HubSpot からMySQL に同期する手順をご紹介いたします。 ちなみにこの記事を行っていただければ、CData Sync のメインどころの操作、つまりはDB へ…

続きを読む
CData SyncCData SyncHubSpotMySQLデータ連携ソリューションとユースケース
November 24, 2020

PowerShellでSalesforceのデータをRDBへレプリケート：CData Salesforce PowerShell Cmdlets

by 宮本航太

こんにちは、CData エンジニアの宮本です。 先日、Power Shell のモジュールとして使える「CData PowerShell Cmdlets」をリリースしました。 prtimes.jp いろいろと専用コマンドが用意されていますが、面白いところでは接続先のデータ（データソース）をRDB …

続きを読む
PowerShellCmdletsSalesforceデータ連携ニュース
November 16, 2020

Autify のテストデータをPower BIで可視化してみる：CData Autify ODBC Driver

by 宮本航太

本記事はCData Autify ODBC Driver を使って、AutifyにあるテストデータをPower BIから接続して可視化する方法をご紹介します。 Autify とは 本記事で使うもの Autify のアクセストークン取得 CData Autify ODBC Driver のインストール Power BI でAutify の…

続きを読む
AutifyPower BIODBCニュース
November 16, 2020

Autify のテストデータをGoogle BigQuery に定期連携：CData Sync

by 宮本航太

本記事はAWS EC2のVMインスタンスにCData Sync を起動させ、Autifyにあるテストデータを定期的にGoogle BigQuery に連携する方法をご紹介します。 Autify とは CDataSync とは 本記事で使うもの Autify のアクセストークン取得 EC2 VM作成～CDataSync Java版…

続きを読む
CData SyncAutifyBigQueryCData Syncデータ連携ニュース
November 6, 2020

Excel からHubSpot のカスタムオブジェクトにCRUDしてみる：CData Excel Add-In for HubSpot

by 宮本航太

こんにちは、CData でエンジニアをしています宮本です。 今回も引き続きHubSpot のカスタムオブジェクトについてです。 前回の記事では、Postman から直接HubSpot のカスタムオブジェクトを作成するAPI を実行してみました。 Excel Add-Ins とは？ 手順 Exce…

続きを読む
CData DriversHubSpotExceCData Driversソリューションとユースケース
November 4, 2020

Cloud Dataflow × CData JDBC Driver でMarketo のLeadデータをサーバーレスな環境でBigQuery に連携してみる

by 宮本航太

こんにちは、CData の宮本です！ 今回もCloud Dataflow を使った内容をご紹介します。 前回はというと、①CData Connect というSaaS 型のデータハブにDataflow からアクセスして、そこから更に②CData Connect からデータソースにアクセスする2段階の構成をや…

続きを読む
CData DriversDataflowJDBCMarketoBigQueryGCPCData Driversソリューションとユースケース
November 2, 2020

エンタープライズETL にちょうど良いデータ統合基盤「CData Sync」の強み

by 宮本航太

こんにちは、CDataでエンジニアをしている宮本です。 少し前になりますが、Data Engineering Study #2「データ収集基盤とデータ整備のこれまでとこれから」というイベントに参加したときに、印象に残るセッションがありました。 データ収集の基本と「Japan…

続きを読む
CData SyncCData SyncETLELTソリューションとユースケース
Postman でHubSpot のカスタムオブジェクトを作成してみた！
October 28, 2020

Postman でHubSpot のカスタムオブジェクトを作成してみた！

by 宮本航太

こんにちは、CData エンジニアの宮本です。 今回はHubSpot のカスタムオブジェクトを作成する方法をご紹介したいと思います。 え？、カスタムオブジェクト？と思う方もいるかもしれませんが、少し前にHubSpot でカスタムオブジェクトを作成できるようになっ…

続きを読む
ソリューションとユースケースCData DriversHubSpotPostmanCData Drivers
October 23, 2020

AWS EC2 Amazon Linux で簡単にCData Sync Java エディションを構成する方法

by 宮本航太

こんにちは、CDataの宮本です。 今回はよくお問合せをいただくCData Sync をLinux環境で使用する方法について、AWS EC2 Amazon Linux を使ってご紹介していきたいと思います。 ちなみに、Amazon Linux ではなく CentOS やRedHat などLinux ディストリビュー…

続きを読む
CData SyncCData SyncLinuxAWS EC2ソリューションとユースケース