JDBC で Kafka データソースから Informatica マッピングを作成

Jerod Johnson
Senior Technology Evangelist

標準の JDBC 接続プロセスを使用して、Informatica で Kafka データオブジェクトを作成します。JAR をコピーして接続するだけです。

Informatica は、データの転送と変換を行う強力でエレガントな手段を提供します。CData JDBC Driver for Kafka を使用することで、業界で実績のある標準に基づいたドライバーにアクセスでき、Informatica の強力なデータ転送および操作機能とシームレスに統合できます。このチュートリアルでは、Informatica PowerCenter で Kafka のデータを転送および参照する方法を説明します。

ドライバーのデプロイ

ドライバーを Informatica PowerCenter サーバーにデプロイするには、インストールディレクトリの lib サブフォルダにある CData JAR ファイルと .lic ファイルを、次のフォルダにコピーします：Informatica インストールディレクトリ\services\shared\jars\thirdparty。

Developer ツールで Kafka のデータを使用するには、インストールディレクトリの lib サブフォルダにある CData JAR ファイルと .lic ファイルを、次のフォルダにコピーする必要があります：

Informatica インストールディレクトリ\client\externaljdbcjars
Informatica インストールディレクトリ\externaljdbcjars

JDBC 接続の作成

Informatica Developer から接続するには、次の手順に従います：

Connection Explorer ペインで、ドメインを右クリックし、Create a Connection をクリックします。
表示される New Database Connection ウィザードで、接続の名前と ID を入力し、Type メニューで JDBC を選択します。
JDBC Driver Class Name プロパティに、次のように入力します：
```
cdata.jdbc.apachekafka.ApacheKafkaDriver
```
Connection String プロパティに、Kafka の接続プロパティを使用して JDBC URL を入力します。
Apache Kafka 接続プロパティの取得・設定方法

それでは、Apache Kafka に接続していきましょう。.NET ベースのエディションは、Confluent.Kafka およびlibrdkafka ライブラリに依存して機能します。これらのアセンブリはインストーラーにバンドルされており、CData 製品と一緒に自動的にインストールされます。別のインストール方法をご利用の場合は、NuGet から依存関係のあるConfluent.Kafka 2.6.0をインストールしてください。

Apache Kafka サーバーのアドレスを指定するには、BootstrapServers パラメータを使用します。

デフォルトでは、CData 製品はデータソースとPLAINTEXT で通信しており、これはすべてのデータが暗号化なしで送信されることを意味します。通信を暗号化したい場合は、以下の設定を行ってください：
1. UseSSL をtrue に設定し、CData 製品がSSL 暗号化を使用するように構成します
2. SSLServerCert およびSSLServerCertType を設定して、サーバー証明書をロードします
Apache Kafka への認証

続いて、認証方法を設定しましょう。Apache Kafka データソースでは、以下の認証方法をサポートしています：
- Anonymous
- Plain
- SCRAM ログインモジュール
- SSL クライアント証明書
- Kerberos
Anonymous 認証

Apache Kafka の特定のオンプレミスデプロイメントでは、認証接続プロパティを設定することなくApache Kafka に接続できます。このような接続はanonymous（匿名）と呼ばれます。

匿名認証を行うには、以下のプロパティを設定してください。
- AuthScheme：None
その他の認証方法については、ヘルプドキュメントをご確認ください。

組み込みの接続文字列デザイナー

JDBC URL の構築には、Kafka JDBC Driver に組み込まれている接続文字列デザイナーを使用できます。JAR ファイルをダブルクリックするか、コマンドラインから JAR ファイルを実行します。
```
java -jar cdata.jdbc.apachekafka.jar
```
接続プロパティを入力し、接続文字列をクリップボードにコピーします。

一般的な接続文字列は次のとおりです：
```
jdbc:apachekafka:User=admin;Password=pass;BootStrapServers=https://localhost:9091;Topic=MyTopic;
```

Kafka テーブルの参照

ドライバー JAR をクラスパスに追加し、JDBC 接続を作成したら、Informatica で Kafka エンティティにアクセスできます。Kafka に接続してテーブルを参照するには、次の手順に従います：

リポジトリに接続します。
Connection Explorer で、接続を右クリックし、Connect をクリックします。
Show Default Schema Only オプションのチェックを外します。

これで、Data Viewer で Kafka テーブルを参照できます。テーブルのノードを右クリックし、Open をクリックします。Data Viewer ビューで、Run をクリックします。

Data Viewer でのテーブルデータとメタデータ（Salesforce の例）

Kafka データオブジェクトの作成

プロジェクトに Kafka テーブルを追加するには、次の手順に従います：

Kafka でテーブルを選択し、テーブルを右クリックして Add to Project をクリックします。
表示されるダイアログで、各リソースに対してデータオブジェクトを作成するオプションを選択します。
Select Location ダイアログで、プロジェクトを選択します。
マッピングの作成

マッピングに Kafka ソースを追加するには、次の手順に従います：
1. Object Explorer で、プロジェクトを右クリックし、New -> Mapping をクリックします。
2. Kafka 接続のノードを展開し、テーブルのデータオブジェクトをエディターにドラッグします。
3. 表示されるダイアログで、Read オプションを選択します。
Kafka カラムをフラットファイルにマッピングするには、次の手順に従います：
1. Object Explorer で、プロジェクトを右クリックし、New -> Data Object をクリックします。
2. Flat File Data Object -> Create as Empty -> Fixed Width を選択します。
3. Kafka オブジェクトのプロパティで、必要な行を選択し、右クリックして copy をクリックします。フラットファイルのプロパティに行を貼り付けます。
4. フラットファイルデータオブジェクトをマッピングにドラッグします。表示されるダイアログで、Write オプションを選択します。
5. クリック＆ドラッグでカラムを接続します。
Kafka のデータを転送するには、ワークスペース内で右クリックし、Run Mapping をクリックします。