Google Data Fusion で Amazon Marketplace に連携した ETL プロセスを作成
Google Data Fusion を使用すると、セルフサービス型のデータ連携を行い、異なるデータソースを統合できます。CData JDBC Driver for Amazon Marketplace をアップロードすることで、Google Data Fusion のパイプライン内から Amazon Marketplace のデータ にリアルタイムでアクセスできるようになります。CData JDBC Driver を使用すると、Amazon Marketplace のデータ を Google Data Fusion でネイティブにサポートされている任意のデータソースにパイプできますが、この記事では、Amazon Marketplace から Google BigQuery へデータをパイプする方法を説明します。
CData JDBC Driver for Amazon Marketplace を Google Data Fusion にアップロード
CData JDBC Driver for Amazon Marketplace を Google Data Fusion インスタンスにアップロードして、Amazon Marketplace のデータ にリアルタイムでアクセスしましょう。Google Data Fusion では JDBC ドライバーの命名規則に制限があるため、JAR ファイルを driver-version.jar という形式に合わせてコピーまたはリネームしてください。例:cdataamazonmarketplace-2020.jar
- Google Data Fusion インスタンスを開きます
- をクリックしてエンティティを追加し、ドライバーをアップロードします
- "Upload driver" タブで、リネームした JAR ファイルをドラッグまたは参照します。
- "Driver configuration" タブで以下を設定します:
- Name: ドライバーの名前(cdata.jdbc.amazonmarketplace)を作成し、メモしておきます
- Class name: JDBC クラス名を設定します:(cdata.jdbc.amazonmarketplace.AmazonMarketplaceDriver)
- "Finish" をクリックします
Google Data Fusion で Amazon Marketplace のデータ に接続
JDBC Driver をアップロードしたら、Google Data Fusion のパイプラインで Amazon Marketplace のデータ にリアルタイムでアクセスできます。
- Pipeline Studio に移動して、新しいパイプラインを作成します
- "Source" オプションから "Database" をクリックして、JDBC Driver 用のソースを追加します

- Database ソースの "Properties" をクリックしてプロパティを編集します
NOTE:Google Data Fusion で JDBC Driver を使用するには、ライセンス(製品版またはトライアル)とランタイムキー(RTK)が必要です。ライセンス(またはトライアル)の取得については、CData までお問い合わせください。
- Label を設定します
- Reference Name を将来の参照用の値に設定します(例:cdata-amazonmarketplace)
- Plugin Type を "jdbc" に設定します
- Connection String を Amazon Marketplace の JDBC URL に設定します。例:
jdbc:amazonmarketplace:RTK=5246...;Marketplace=Japan;Sellerid=mySellerId;Mwsauthtoken=amzn.mws.myAWSAuthToken;Amazon Marketplace Appstore 認証を使って接続が可能です。
- Amazon Marketplace Appstore で、CData Amazon Marketplace Drivers のページを開きます。
- 「今すぐ承認」をクリックしで、「次へ」と進みます。出品者ID などの必要情報を記入してCData Drivers にAmazon Marketplace データへのアクセス権を付与します。
- 手続きが完了すると、「MWS 認証トークン」が取得できます。
- CData Drivers の接続設定画面で「Marketplace」(任意のマーケットプレイスの国)、「Sellerid」(出品者ID)、「Mwsauthtoken」(先に取得したMWS 認証トークン)を入力して接続を行います。
ビルトイン接続文字列デザイナー
JDBC URL の作成には、Amazon Marketplace JDBC Driver に組み込まれている接続文字列デザイナーを使用できます。JAR ファイルをダブルクリックするか、コマンドラインから JAR ファイルを実行してください。
java -jar cdata.jdbc.amazonmarketplace.jar接続プロパティを入力し、接続文字列をクリップボードにコピーします。
- Import Query を Amazon Marketplace から取得したいデータを抽出する SQL クエリに設定します。例:
SELECT * FROM Orders
- "Sink" タブから、同期先シンクを追加します(この例では Google BigQuery を使用します)
- BigQuery シンクの "Properties" をクリックしてプロパティを編集します
- Label を設定します
- Reference Name を amazonmarketplace-bigquery のような値に設定します
- Project ID を特定の Google BigQuery プロジェクト ID に設定します(またはデフォルトの "auto-detect" のままにします)
- Dataset を特定の Google BigQuery データセットに設定します
- Table を Amazon Marketplace のデータ を挿入するテーブル名に設定します
Source と Sink を設定すると、Amazon Marketplace のデータ を Google BigQuery にパイプする準備が整います。パイプラインを保存してデプロイしてください。パイプラインを実行すると、Google Data Fusion が Amazon Marketplace からリアルタイムデータをリクエストし、Google BigQuery にインポートします。

これはシンプルなパイプラインの例ですが、変換、分析、条件などを使用してより複雑な Amazon Marketplace パイプラインを作成できます。CData JDBC Driver for Amazon Marketplace の 30日間の無償トライアルをダウンロードして、今すぐ Google Data Fusion で Amazon Marketplace のデータ をリアルタイムで活用しましょう。