Google Data Fusion で DB2 に連携した ETL プロセスを作成

Jerod Johnson
Jerod Johnson
Senior Technology Evangelist
CData JDBC Driver を Google Data Fusion にロードし、DB2 のデータ にリアルタイムでアクセスできる ETL プロセスを作成します。

Google Data Fusion を使用すると、セルフサービス型のデータ連携を行い、異なるデータソースを統合できます。CData JDBC Driver for IBM DB2 をアップロードすることで、Google Data Fusion のパイプライン内から DB2 のデータ にリアルタイムでアクセスできるようになります。CData JDBC Driver を使用すると、DB2 のデータ を Google Data Fusion でネイティブにサポートされている任意のデータソースにパイプできますが、この記事では、DB2 から Google BigQuery へデータをパイプする方法を説明します。

CData JDBC Driver for IBM DB2 を Google Data Fusion にアップロード

CData JDBC Driver for IBM DB2 を Google Data Fusion インスタンスにアップロードして、DB2 のデータ にリアルタイムでアクセスしましょう。Google Data Fusion では JDBC ドライバーの命名規則に制限があるため、JAR ファイルを driver-version.jar という形式に合わせてコピーまたはリネームしてください。例:cdatadb2-2020.jar

  1. Google Data Fusion インスタンスを開きます
  2. をクリックしてエンティティを追加し、ドライバーをアップロードします
  3. "Upload driver" タブで、リネームした JAR ファイルをドラッグまたは参照します。
  4. "Driver configuration" タブで以下を設定します:
    • Name: ドライバーの名前(cdata.jdbc.db2)を作成し、メモしておきます
    • Class name: JDBC クラス名を設定します:(cdata.jdbc.db2.DB2Driver)
  5. "Finish" をクリックします

Google Data Fusion で DB2 のデータ に接続

JDBC Driver をアップロードしたら、Google Data Fusion のパイプラインで DB2 のデータ にリアルタイムでアクセスできます。

  1. Pipeline Studio に移動して、新しいパイプラインを作成します
  2. "Source" オプションから "Database" をクリックして、JDBC Driver 用のソースを追加します
  3. Database ソースの "Properties" をクリックしてプロパティを編集します

    NOTE:Google Data Fusion で JDBC Driver を使用するには、ライセンス(製品版またはトライアル)とランタイムキー(RTK)が必要です。ライセンス(またはトライアル)の取得については、CData までお問い合わせください。

    • Label を設定します
    • Reference Name を将来の参照用の値に設定します(例:cdata-db2)
    • Plugin Type を "jdbc" に設定します
    • Connection String を DB2 の JDBC URL に設定します。例:

      jdbc:db2:RTK=5246...;Server=10.0.1.2;Port=50000;User=admin;Password=admin;Database=test;

      DB2 に接続するには以下のプロパティを設定します。

      • Server: DB2 を実行するサーバー名。
      • Port: DB2 サーバーのポート。
      • Database: DB2 データベース名。

      接続の準備ができたら、認証スキームを選択し、以下で説明するように適切なプロパティを設定します。

      CData 製品 は、DB2 への認証に4つの異なるスキームをサポートします。DB2 ユーザー資格情報(デフォルト)、暗号化されたユーザー資格情報、IBM Identity and Access Management(IAM)認証、および Kerberos です。

      DB2 ユーザー資格情報

      ユーザー資格情報を使用して認証するには、次のプロパティを設定します。
      • AuthSchemeUSRIDPWD
      • User:データベースへのアクセス権を持つユーザーのユーザー名。
      • Password:データベースへのアクセス権を持つユーザーのパスワード。

      暗号化されたユーザー資格情報

      サーバーがセキュア認証に対応しており、暗号化されたユーザー資格情報を使用して認証を行いたい場合は、このプロパティを設定します。
      • AuthSchemeEUSRIDPWD

      IAM、Kerberos で認証したい場合は、ヘルプドキュメントの「はじめに」セクションを参照してください。

      パスワード方式によるSSH 接続

      パスワード方式によるSSH接続時に必要なプロパティ一覧を以下に示します。

      • User: DB2 のユーザ
      • Password: DB2 のパスワード
      • Database: DB2 の接続先データベース
      • Server: DB2 のサーバー
      • Port: DB2 のポート
      • UserSSH: "true"
      • SSHAuthMode: "Password"
      • SSHPort: SSH のポート
      • SSHServer: SSH サーバー
      • SSHUser: SSH ユーザー
      • SSHPassword: SSH パスワード

      接続文字列形式では以下のようになります。

      Server=10.0.1.2;Port=50000;User=admin;Password=admin;Database=testUseSSH=true;SSHAuthMode=Password;SSHPort=22;SSHServer=ssh-server;SSHUser=root;SSHPassword=sshpasswd;

      公開鍵認証方式方式によるSSH 接続

      公開鍵認証によるSSH接続時に必要なプロパティ一覧を以下に示します。

      • User: DB2 のユーザ
      • Password: DB2 のパスワード
      • Database: DB2 の接続先データベース
      • Server: DB2 のサーバー
      • Port: DB2 のポート
      • UserSSH: "true"
      • SSHAuthMode: "Public_Key"
      • SSHClientCertType: キーストアの種類
      • SSHPort: SSH のポート
      • SSHServer: SSH サーバー
      • SSHUser: SSH ユーザー
      • SSHClientCert: 秘密鍵ファイルのパス

      接続文字列形式では以下のようになります。

      Server=10.0.1.2;Port=50000;User=admin;Password=admin;Database=test;UseSSH=true;SSHAuthMode=Public_Key;SSHClientCertType=PUBLIC_KEY_FILE;SSHPort=22;SSHServer=ssh-server;SSHUser=root;SSHClientCert=C:\Keys\key.pem;

      ビルトイン接続文字列デザイナー

      JDBC URL の作成には、DB2 JDBC Driver に組み込まれている接続文字列デザイナーを使用できます。JAR ファイルをダブルクリックするか、コマンドラインから JAR ファイルを実行してください。

            java -jar cdata.jdbc.db2.jar
            

      接続プロパティを入力し、接続文字列をクリップボードにコピーします。

    • Import Query を DB2 から取得したいデータを抽出する SQL クエリに設定します。例:
      SELECT * FROM Orders
  4. "Sink" タブから、同期先シンクを追加します(この例では Google BigQuery を使用します)
  5. BigQuery シンクの "Properties" をクリックしてプロパティを編集します
    • Label を設定します
    • Reference Name を db2-bigquery のような値に設定します
    • Project ID を特定の Google BigQuery プロジェクト ID に設定します(またはデフォルトの "auto-detect" のままにします)
    • Dataset を特定の Google BigQuery データセットに設定します
    • Table を DB2 のデータ を挿入するテーブル名に設定します

Source と Sink を設定すると、DB2 のデータ を Google BigQuery にパイプする準備が整います。パイプラインを保存してデプロイしてください。パイプラインを実行すると、Google Data Fusion が DB2 からリアルタイムデータをリクエストし、Google BigQuery にインポートします。

これはシンプルなパイプラインの例ですが、変換、分析、条件などを使用してより複雑な DB2 パイプラインを作成できます。CData JDBC Driver for IBM DB2 の 30日間の無償トライアルをダウンロードして、今すぐ Google Data Fusion で DB2 のデータ をリアルタイムで活用しましょう。

はじめる準備はできましたか?

IBM DB2 Driver の無料トライアルをダウンロードしてお試しください:

 ダウンロード

詳細:

IBM DB2 Icon IBM DB2 JDBC Driver お問い合わせ

IBM DB2 連携のパワフルなJava アプリケーションを素早く作成して配布。