HULFT Integrate で Snowflake のデータ に接続

HULFT Integrate は、ドラッグ＆ドロップのユーザーインターフェースでコーポレーションフロー、データ変換、処理を簡単に作成できる最新のデータ連携プラットフォームです。CData JDBC Driver for Snowflake と組み合わせることで、HULFT Integrate からリアルタイムの Snowflake のデータ を扱うことができます。この記事では、Snowflake への接続方法と、データを CSV ファイルに出力する手順をご紹介します。

CData JDBC ドライバーは、最適化されたデータ処理機能を備えており、リアルタイムの Snowflake のデータ との連携において比類のないパフォーマンスを発揮します。Snowflake に対して複雑な SQL クエリを発行すると、ドライバーはフィルタや集計などのサポートされている SQL 操作を直接 Snowflake にプッシュし、サポートされていない操作（主に SQL 関数や JOIN 操作）は内蔵の SQL エンジンでクライアント側で処理します。また、動的なメタデータクエリ機能により、ネイティブなデータ型を使用して Snowflake のデータ を操作・分析できます。

はじめに

---

Snowflake へのアクセスを有効化

HULFT Integrate プロジェクトから Snowflake のデータ へのアクセスを有効にするには、以下の手順で設定します：

1. CData JDBC Driver の JAR ファイル（およびライセンスファイルがある場合はそれも）、cdata.jdbc.snowflake.jar（および cdata.jdbc.snowflake.lic）を、Integrate Server の jdbc_adapter サブフォルダにコピーします
2. HULFT Integrate Server を再起動し、HULFT Integrate Studio を起動します

Snowflake のデータ にアクセスするプロジェクトの作成

JAR ファイルをコピーしたら、Snowflake のデータ にアクセスするプロジェクトを作成できます。まず、Integrate Studio を開いて新しいプロジェクトを作成しましょう。

1. プロジェクト名を入力します
2. 「スクリプトを作成」チェックボックスがオンになっていることを確認します
3. 「次へ」をクリックします
4. スクリプト名を入力します（例：SnowflaketoCSV）

プロジェクトを作成したら、Snowflake のデータ を CSV ファイルにコピーするためのコンポーネントをスクリプトに追加します。

Execute Select SQL コンポーネントの設定

ツールパレット（Database -> JDBC）から「Execute Select SQL」コンポーネントをスクリプトワークスペースにドラッグします。

1. 「必須設定」タブの接続先で、「追加」をクリックして Snowflake 用の新しい接続を作成します。以下のプロパティを設定します：
   • 名前：Snowflake Connection Settings
   • ドライバークラス名：cdata.jdbc.snowflake.SnowflakeDriver
   • URL：jdbc:snowflake:User=Admin;Password=test123;Server=localhost;Database=Northwind;Warehouse=TestWarehouse;Account=Tester1;
     
     

     組み込みの接続文字列デザイナー

     JDBC URL の構築には、Snowflake JDBC Driver に組み込まれている接続文字列デザイナーをご利用ください。JAR ファイルをダブルクリックするか、コマンドラインから JAR ファイルを実行します。

     		java -jar cdata.jdbc.snowflake.jar
     		

     接続プロパティを入力し、接続文字列をクリップボードにコピーします。

     それでは、Snowflake データベースに接続していきましょう。認証に加えて、以下の接続プロパティを設定します。

     • Url：お使いのSnowflake URL を指定します。例：https://orgname-myaccount.snowflakecomputing.com
       • Legacy URL を使用する場合：https://myaccount.region.snowflakecomputing.com
       • ご自身のURL は以下のステップで確認できます。
         1. Snowflake UI の左下にあるユーザー名をクリックします
         2. Account ID にカーソルを合わせます
         3. Copy Account URL アイコンをクリックして、アカウントURL をコピーします
     • Database（オプション）：CData 製品によって公開されるテーブルとビューを、特定のSnowflake データベースのものに制限したい場合に設定します
     • Schema（オプション）：CData 製品によって公開されるテーブルとビューを、特定のSnowflake データベーススキーマのものに制限したい場合に設定します

     Snowflakeへの認証

     CData 製品では、Snowflake ユーザー認証、フェデレーション認証、およびSSL クライアント認証をサポートしています。認証するには、User とPassword を設定し、AuthScheme プロパティで認証方法を選択してください。

     キーペア認証

     ユーザーアカウントに定義されたプライベートキーを使用してセキュアなトークンを作成し、キーペア認証で接続することも可能です。この方法で接続するには、AuthScheme をPRIVATEKEY に設定し、以下の値を設定してください。

     • User：認証に使用するユーザーアカウント
     • PrivateKey：プライベートキーを含む.pem ファイルへのパスなど、ユーザーに使用されるプライベートキー
     • PrivateKeyType：プライベートキーを含むキーストアの種類（PEMKEY_FILE、PFXFILE など）
     • PrivateKeyPassword：指定されたプライベートキーのパスワード

     その他の認証方法については、ヘルプドキュメントの「Snowflakeへの認証」セクションをご確認ください。

     
2. SQL ステートメントを記述します。例：

   SELECT Id, ProductName FROM Products

3. 「抽出テスト」をクリックして、接続とクエリが正しく設定されていることを確認します
4. 「SQL を実行して出力スキーマを設定」をクリックします
5. 「完了」をクリックします

Write CSV File コンポーネントの設定

ツールパレット（File -> CSV）から「Write CSV File」コンポーネントをワークスペースにドラッグします。

1. クエリ結果を書き込むファイルを設定します（例：Products.csv）
2. 「入力データ」を「Select SQL」コンポーネントに設定します
3. SQL クエリで選択した各フィールドのカラムを追加します
4. 「書き込み設定」タブで、「最初の行にカラム名を挿入する」チェックボックスをオンにします
5. 「完了」をクリックします

Snowflake フィールドを CSV カラムにマッピング

「Select」コンポーネントの各カラムを、「CSV」コンポーネントの対応するカラムにマッピングします。

スクリプトの完成

「Start」コンポーネントを「Select」コンポーネントに、「CSV」コンポーネントを「End」コンポーネントにドラッグして接続します。スクリプトをビルドして実行すると、Snowflake のデータ が CSV ファイルに出力されます。

CData JDBC Driver for Snowflakeの30日間の無償トライアルをダウンロードして、HULFT Integrate でリアルタイムの Snowflake のデータ を活用してみてください。ご不明な点があれば、サポートチームまでお気軽にお問い合わせください。