Pentaho Report Designer でKafka のデータを連携利用

CData JDBC Driver for Kafka のデータ を使えば、ダッシュボードやレポートからリアルタイムデータにアクセスできます。この記事では、Kafka のデータにJDBC データソースとして接続し、Pentaho でKafka のデータをもとにしたレポートを公開する方法を説明します。

接続してレポートを作成

1. インストールディレクトリのlib サブフォルダ内にあるドライバーのJAR ファイルを、Pentaho ディレクトリ内の\Report-Designer\lib\jdbc\ フォルダにコピーします。
2. \Report-Designer\ フォルダ内のreport-designer.bat ファイルを実行してReport-Designer UI を開きます。

3. Data -> Add Data Source -> Advanced -> JDBC（Custom）をクリックし、新しいKafka 接続を作成して、ドライバーで新しいデータソースを作成します。 表示されるダイアログで、以下のように接続プロパティを設定します。

   • Custom Connection URL property：JDBC URL を入力します。JDBC URL はjdbc:apachekafka: で始まり、その後にセミコロン区切りで接続プロパティを指定します。

     Apache Kafka 接続プロパティの取得・設定方法

     それでは、Apache Kafka に接続していきましょう。.NET ベースのエディションは、Confluent.Kafka およびlibrdkafka ライブラリに依存して機能します。 これらのアセンブリはインストーラーにバンドルされており、CData 製品と一緒に自動的にインストールされます。 別のインストール方法をご利用の場合は、NuGet から依存関係のあるConfluent.Kafka 2.6.0をインストールしてください。

     Apache Kafka サーバーのアドレスを指定するには、BootstrapServers パラメータを使用します。

     デフォルトでは、CData 製品はデータソースとPLAINTEXT で通信しており、これはすべてのデータが暗号化なしで送信されることを意味します。 通信を暗号化したい場合は、以下の設定を行ってください：

     1. UseSSL をtrue に設定し、CData 製品がSSL 暗号化を使用するように構成します
     2. SSLServerCert およびSSLServerCertType を設定して、サーバー証明書をロードします

     Apache Kafka への認証

     続いて、認証方法を設定しましょう。Apache Kafka データソースでは、以下の認証方法をサポートしています：

     • Anonymous
     • Plain
     • SCRAM ログインモジュール
     • SSL クライアント証明書
     • Kerberos

     Anonymous 認証

     Apache Kafka の特定のオンプレミスデプロイメントでは、認証接続プロパティを設定することなくApache Kafka に接続できます。 このような接続はanonymous（匿名）と呼ばれます。

     匿名認証を行うには、以下のプロパティを設定してください。

     • AuthScheme：None

     その他の認証方法については、ヘルプドキュメントをご確認ください。

     組み込みの接続文字列デザイナー

     JDBC URL の構成については、Kafka JDBC Driver に組み込まれている接続文字列デザイナーを使用してください。JAR ファイルをダブルクリックするか、コマンドラインからJAR ファイルを実行します。

     java -jar cdata.jdbc.apachekafka.jar
     

     接続プロパティを入力し、接続文字列をクリップボードにコピーします。

     

     JDBC URL を設定する際、Max Rows 接続プロパティの設定も検討してください。これにより返される行数が制限されます。特にレポートやビジュアライゼーションを設計する際のパフォーマンス向上に役立ちます。

     一般的なJDBC URL は次のとおりです：

     jdbc:apachekafka:User=admin;Password=pass;BootStrapServers=https://localhost:9091;Topic=MyTopic;

   • Custom Driver Class Name：cdata.jdbc.apachekafka.ApacheKafkaDriver を入力します。
   • User Name：認証に使用するユーザー名。
   • Password：認証に使用するパスワード。
   

レポートにKafka のデータを追加

Kafka のデータをもとにレポートを作成する準備が整いました。

1. レポートにKafka のソースを追加します。Data -> Add Data Source -> JDBC をクリックしてデータソースを選択します。

2. クエリを設定します。この記事では以下のクエリを使用します：

   SELECT Id, Column1 FROM SampleTable_1 WHERE Column2 = '100'

   
3. レポートにチャートをドラッグし、ダブルクリックしてチャートを編集します。レポートを実行してチャートを表示します。このクエリの結果を使用して、SampleTable_1 テーブルのシンプルなチャートを作成できます。
4. 最後に、レポートを実行してチャートを確認します。