Informatica Cloud で Azure Data Lake Storage のデータ を連携

Informatica Cloud は、クラウド上で抽出、変換、ロード（ETL）タスクを実行できるツールです。Cloud Secure Agent と CData JDBC Driver for Azure Data Lake Storage を組み合わせることで、Informatica Cloud から直接 Azure Data Lake Storage のデータ にリアルタイムでアクセスできます。本記事では、Cloud Secure Agent のダウンロードと登録、JDBC ドライバーを介した Azure Data Lake Storage への接続、そして Informatica Cloud のプロセスで使用可能なマッピングの作成方法をご紹介します。

Informatica Cloud Secure Agent

JDBC ドライバー経由で Azure Data Lake Storage のデータ に接続するには、Cloud Secure Agent をインストールします。

1. Informatica Cloud の Administrator ページに移動します
2. Runtime Environments タブを選択します
3. 「Download Secure Agent」をクリックします
4. Install Token をメモしておきます
5. クライアントマシンでインストーラを実行し、ユーザー名と Install Token を使って Cloud Secure Agent を登録します

NOTE: Cloud Secure Agent のすべてのサービスが起動するまでに、しばらく時間がかかる場合があります。

Azure Data Lake Storage JDBC Driver への接続

Cloud Secure Agent のインストールと起動が完了したら、JDBC ドライバーを介して Azure Data Lake Storage に接続する準備が整いました。

Secure Agent マシンへの JDBC ドライバーの追加

1. Secure Agent マシンの以下のディレクトリに移動します：

   %Secure Agent installation directory%/ext/connectors/thirdparty/

2. 設定するマッピングの種類に応じて、フォルダを作成しドライバーの JAR ファイル（cdata.jdbc.adls.jar）を追加します。

   マッピングの場合は、以下のフォルダを作成してドライバーの JAR ファイルを追加します：

   informatica.jdbc_v2/common

   アドバンスドモードのマッピングの場合は、以下のフォルダも作成してドライバーの JAR ファイルを追加します：

   informatica.jdbc_v2/spark

3. Secure Agent を再起動します。

Informatica Cloud での Azure Data Lake Storage への接続

• Connection Name: 接続に名前を付けます（例：CData Azure Data Lake Storage Connection）
• Type:「JDBC_V2」を選択します
• Runtime Environment: Secure Agent をインストールしたランタイム環境を選択します
• JDBC Driver Class Name: JDBC ドライバークラス名を入力します：cdata.jdbc.adls.ADLSDriver
• JDBC Connection URL: Azure Data Lake Storage の JDBC URL を設定します。URL は以下のようになります：
  
  

  jdbc:adls:Schema=ADLSGen2;Account=myAccount;FileSystem=myFileSystem;AccessKey=myAccessKey;

  Azure Data Lake Storage 接続プロパティの取得・設定方法

  Azure Data Lake Storage Gen2 への接続

  それでは、Gen2 Data Lake Storage アカウントに接続していきましょう。接続するには、以下のプロパティを設定します。

  • Account：ストレージアカウントの名前
  • FileSystem：このアカウントに使用されるファイルシステム名。例えば、Azure Blob コンテナの名前
  • Directory（オプション）：レプリケートされたファイルが保存される場所へのパス。パスが指定されない場合、ファイルはルートディレクトリに保存されます

  Azure Data Lake Storage Gen2への認証

  続いて、認証方法を設定しましょう。CData 製品では、5つの認証方法をサポートしています：アクセスキー（AccessKey）の使用、共有アクセス署名（SAS）の使用、Azure Active Directory OAuth（AzureAD）経由、Azure サービスプリンシパル（AzureServicePrincipal またはAzureServicePrincipalCert）経由、およびManaged Service Identity（AzureMSI）経由です。

  アクセスキー

  アクセスキーを使用して接続するには、まずADLS Gen2ストレージアカウントで利用可能なアクセスキーを取得する必要があります。

  Azure ポータルでの手順は以下のとおりです：

  1. ADLS Gen2ストレージアカウントにアクセスします
  2. 設定でアクセスキーを選択します
  3. 利用可能なアクセスキーの1つの値をAccessKey 接続プロパティにコピーします

  接続の準備ができたら、以下のプロパティを設定してください。

  • AuthScheme：AccessKey
  • AccessKey：先ほどAzure ポータルで取得したアクセスキーの値

  共有アクセス署名（SAS）

  共有アクセス署名を使用して接続するには、まずAzure Storage Explorer ツールを使用して署名を生成する必要があります。

  接続の準備ができたら、以下のプロパティを設定してください。

  • AuthScheme：SAS
  • SharedAccessSignature：先ほど生成した共有アクセス署名の値

  その他の認証方法については、 href="/kb/help/" target="_blank">ヘルプドキュメントの「Azure Data Lake Storage Gen2への認証」セクションをご確認ください。

  組み込みの接続文字列デザイナー

  JDBC URL の作成には、Azure Data Lake Storage JDBC Driver に組み込まれている接続文字列デザイナーを使用できます。.jar ファイルをダブルクリックするか、コマンドラインから実行してください。

      java -jar cdata.jdbc.adls.jar
      

  接続プロパティを入力し、接続文字列をクリップボードにコピーします。

  
• Username: プレースホルダー値を設定します（Azure Data Lake Storage はユーザー名を必要としないため）
• Password: プレースホルダー値を設定します（Azure Data Lake Storage はパスワードを必要としないため）

Azure Data Lake Storage のデータ のマッピングを作成

Azure Data Lake Storage への接続を設定したら、Informatica の任意のプロセスで Azure Data Lake Storage のデータ にアクセスできます。以下の手順では、Azure Data Lake Storage から別のデータターゲットへのマッピングを作成する方法を説明します。

1. Data Integration ページに移動します
2. New.. をクリックし、Mappings タブから Mapping を選択します
3. Source Object をクリックし、Source タブで Connection を選択し、Source Type を設定します
4. 「Select」をクリックして、マッピングするテーブルを選択します
5. Fields タブで、マッピングする Azure Data Lake Storage テーブルのフィールドを選択します
6. Target オブジェクトをクリックし、Target ソース、テーブル、フィールドを設定します。Field Mapping タブで、ソースフィールドをターゲットフィールドにマッピングします。

マッピングの設定が完了すると、Informatica Cloud でサポートされている任意の接続先と Azure Data Lake Storage のデータ のリアルタイム連携を開始できます。CData JDBC Driver for Azure Data Lake Storage の30日間無償トライアルをダウンロードして、Informatica Cloud で Azure Data Lake Storage のデータ の活用を今すぐ始めましょう。