SnapLogic を使用して Azure Synapse を外部サービスと連携
SnapLogic は、ノーコードでデータ連携フローを作成できる iPaaS(Integration Platform as a Service)です。CData JDBC Driver と組み合わせることで、Azure Synapse を含む250を超える SaaS、ビッグデータ、NoSQL ソースのリアルタイムデータに SnapLogic ワークフローからアクセスできます。
CData JDBC Driver は、最適化されたデータ処理機能を内蔵しており、リアルタイム Azure Synapse のデータ とのやり取りにおいて比類ないパフォーマンスを発揮します。外部ツールから複雑な SQL クエリが発行されると、ドライバーはフィルタや集計などのサポートされている SQL 操作を Azure Synapse に直接プッシュし、サポートされていない操作(多くの場合、SQL 関数や JOIN 操作)は内蔵の SQL エンジンを使用してクライアント側で処理します。動的なメタデータクエリ機能により、ネイティブデータ型を使用して Azure Synapse のデータ を操作できます。
SnapLogic から Azure Synapse に接続
SnapLogic から Azure Synapse のデータ に接続するには、CData Azure Synapse JDBC Driver をダウンロードしてインストールします。インストールウィザードに従って進めてください。インストールが完了すると、JAR ファイルはインストールディレクトリ(デフォルトでは C:/Program Files/CData/CData JDBC Driver for Azure Synapse/lib)に配置されます。
Azure Synapse JDBC Driver のアップロード
インストール後、Manager タブから SnapLogic 内の場所(例:projects/Jerod Johnson)に JDBC JAR ファイルをアップロードします。
接続の設定
JDBC Driver をアップロードしたら、Azure Synapse への接続を作成します。
- Designer タブに移動します
- Snaps から「JDBC」を展開し、「Generic JDBC - Select」snap をデザイナーにドラッグします
- Add Account をクリック(または既存のアカウントを選択)し、「Continue」をクリックします
- 次のフォームで、JDBC 接続プロパティを設定します:
- JDBC JARs に、先ほどアップロードした JAR ファイルを追加します
- JDBC Driver Class を cdata.jdbc.azuresynapse.AzureSynapseDriver に設定します
JDBC URL を Azure Synapse JDBC Driver の JDBC 接続文字列に設定します。例:
jdbc:azuresynapse:User=myuser;Password=mypassword;Server=localhost;Database=Northwind;RTK=XXXXXX;
注意:RTK はトライアルキーまたは製品キーです。詳細についてはサポートチームまでお問い合わせください。
組み込みの接続文字列デザイナー
JDBC URL の構築には、Azure Synapse JDBC Driver に組み込まれている接続文字列デザイナーを使用できます。JAR ファイルをダブルクリックするか、コマンドラインから JAR ファイルを実行してください。
java -jar cdata.jdbc.azuresynapse.jar
接続プロパティを入力し、接続文字列をクリップボードにコピーします。
Azure Synapse への接続
Azure Synapse データベースに接続するには、認証に加えて(下記参照)、次のプロパティを設定します。
- Server:Azure を実行しているサーバー。Azure ポータルにログインして、[Azure Synapse Analytics]->[Select your database]->[Overview]->[Server name]に進むと確認できます。
- Database:[Azure Synapse Analytics]ページのAzure ポータルに表示されるデータベース名。
Azure Synapse への認証
Azure Synapse は、Entra ID(Azure AD)、Azure サービスプリンシパル、Managed Service Identity(MSI)、パスワード(デフォルト)、Azure Password を使用する認証をサポートします。
パスワードでAzure Synapse に直接認証するには、以下のプロパティを設定します。
- AuthScheme:Password
- User:認証するAzure Synapse ユーザー。
- Password:認証するAzure Synapse ユーザーのパスワード。
その他の認証方法については、ヘルプドキュメント の「はじめに」セクションを参照してください。
- 接続プロパティを入力したら、「Validate」をクリックし、「Apply」をクリックします
Azure Synapse のデータ の読み取り
接続の検証と適用後に開くフォームで、クエリを設定します。
- Schema name を「AzureSynapse」に設定します
- Table name を Azure Synapse のテーブルに設定します。スキーマ名を使用して、例:「AzureSynapse」.「Products」(ドロップダウンで利用可能なテーブルの一覧を確認できます)
- テーブルから使用する各項目の Output fields を追加します
Generic JDBC - Select snap を保存します。
接続とクエリを設定したら、snap の末尾をクリックしてデータをプレビューします(下図でハイライト表示)。
結果が期待通りであることを確認したら、追加の snap を使用して Azure Synapse のデータ を別のエンドポイントに送信できます。
Azure Synapse のデータ を外部サービスにパイプ
この記事では、データを Google スプレッドシートに読み込みます。サポートされている任意の snap を使用するか、別の CData JDBC Driver と Generic JDBC snap を使用して、外部サービスにデータを移動できます。
- 「Worksheet Writer」snap を「Generic JDBC - Select」snap の末尾にドロップします。
- Google Sheets に接続するためのアカウントを追加します
- Worksheet Writer snap を設定して、Azure Synapse のデータ を Google スプレッドシートに書き込みます
これで、完全に設定されたパイプラインを実行して、Azure Synapse からデータを抽出し、Google スプレッドシートにプッシュできます。
外部データを Azure Synapse にパイプ
上記の通り、SnapLogic で Azure Synapse 用の JDBC Driver を使用して Azure Synapse にデータを書き込むこともできます。まず、Generic JDBC - Insert または Generic JDBC - Update snap をダッシュボードに追加します。
- 既存の「Account」(接続)を選択するか、新しいものを作成します
- クエリを設定します:
- Schema name を「AzureSynapse」に設定します
- Table name を Azure Synapse のテーブルに設定します。スキーマ名を使用して、例:「AzureSynapse」.「Products」(ドロップダウンで利用可能なテーブルの一覧を確認できます)
- Generic JDBC - Insert/Update snap を保存します
これで、Azure Synapse にデータを書き込み、新しいレコードを挿入したり既存のレコードを更新したりする snap が設定されました。
詳細情報と無料トライアル
CData JDBC Driver for Azure Synapse を使用することで、SnapLogic で Azure Synapse のデータ を外部サービスと連携するパイプラインを作成できます。Azure Synapse への接続の詳細については、CData JDBC Driver for Azure Synapse ページをご覧ください。CData JDBC Driver for Azure Synapse の30日間無料トライアルをダウンロードして、今すぐお試しください。