DbVisualizer でKafka のデータに連携しクエリを作成

加藤龍彦
デジタルマーケティング

DbVisualizer のビジュアルデータ分析ツールやデータ接続ウィザードにKafka のデータを連携する方法を紹介します。

CData JDBC Driver for ApacheKafka は、JDBC 標準に準拠し、BI ツールからIDE まで幅広いアプリケーションでKafka のデータへの接続を提供します。この記事では、DbVisualizer からKafka のデータに接続する方法、およびtable エディタを使ってKafka を編集、および保存する方法を説明します。

CData JDBC ドライバとは？

CData JDBC ドライバは、以下の特徴を持ったリアルタイムデータ接続ツールです。

Kafka をはじめとする、CRM、MA、グループウェア、広告、会計ツールなど多様な270種類以上のSaaS / DB に対応
DBeaver を含む多様なアプリケーション、ツールにKafka のデータを連携
ノーコードでの手軽な接続設定
標準 SQL での柔軟なデータ読み込み・書き込み

CData JDBC ドライバでは、1.データソースとしてKafka の接続を設定、2.DBeaver 側でJDBC Driver との接続を設定、という2つのステップだけでデータソースに接続できます。以下に具体的な設定手順を説明します。

Kafka のデータの新しいドライバー定義を作成

下記の手順に従い、Driver Manager を使ってDbVisualizer ツールからKafka のデータに接続します。

DbVisualizer で「Tools」->「Driver Manager」をクリックします。
「」ボタンをクリックして新しくドライバーを作成します。
テンプレートは「Custom」を選択します。
Driver Settings タブで：
- Name をわかりやすい名前に設定します（例：CData Kafka Driver）。
- URL Format をjdbc:apachekafka: に設定します。
- Driver artifacts and jar files (jars are loaded in order from top) セクションで：
  1. 「」ボタンをクリックして、「Add Files」に進みます。
  2. インストールディレクトリ（C:\Program Files\CData\CData JDBC Driver for Kafka XXXX\）の「lib」フォルダに移動します。
  3. JAR ファイル（cdata.jdbc.ApacheKafka.jar）を選択して「Open」をクリックします。
Driver Class は自動的に入力されます。もし入力されない場合は、クラス（cdata.jdbc.apachekafka.ApacheKafkaDriver）を選択してください。

JDBC データソースへの接続を定義

「Driver Manager」を終了し、下記の手順に従ってJDBC URL に接続プロパティを入力します。

「Databases」タブで「」ボタンをクリックし、先ほど作成したドライバーを選択します。
「Connection」セクションで以下のオプションを設定します。
- Database Type：ウィザードオプションを選択した場合は、データベースの種類は自動検出されます。「No Wizard」オプションを選択した場合は、「Database Type」メニューから「Generic」または「Auto Detect」オプションを選択します。
- Driver Type：先ほど作成したドライバーを選択します。
- Database URL：完全なJDBC URL を入力します。JDBC URL 構文は、jdbc:apachekafka: に続けてセミコロン区切りでname-value ペアの接続プロパティを入力します。
  
  Apache Kafka 接続プロパティの取得・設定方法
  
  それでは、Apache Kafka に接続していきましょう。.NET ベースのエディションは、Confluent.Kafka およびlibrdkafka ライブラリに依存して機能します。これらのアセンブリはインストーラーにバンドルされており、CData 製品と一緒に自動的にインストールされます。別のインストール方法をご利用の場合は、NuGet から依存関係のあるConfluent.Kafka 2.6.0をインストールしてください。
  
  Apache Kafka サーバーのアドレスを指定するには、BootstrapServers パラメータを使用します。
  
  デフォルトでは、CData 製品はデータソースとPLAINTEXT で通信しており、これはすべてのデータが暗号化なしで送信されることを意味します。通信を暗号化したい場合は、以下の設定を行ってください：
  1. UseSSL をtrue に設定し、CData 製品がSSL 暗号化を使用するように構成します
  2. SSLServerCert およびSSLServerCertType を設定して、サーバー証明書をロードします
  Apache Kafka への認証
  
  続いて、認証方法を設定しましょう。Apache Kafka データソースでは、以下の認証方法をサポートしています：
  - Anonymous
  - Plain
  - SCRAM ログインモジュール
  - SSL クライアント証明書
  - Kerberos
  Anonymous 認証
  
  Apache Kafka の特定のオンプレミスデプロイメントでは、認証接続プロパティを設定することなくApache Kafka に接続できます。このような接続はanonymous（匿名）と呼ばれます。
  
  匿名認証を行うには、以下のプロパティを設定してください。
  - AuthScheme：None
  その他の認証方法については、ヘルプドキュメントをご確認ください。
  
  組み込みの接続文字列デザイナー
  
  JDBC URL の作成の補助として、Kafka JDBC Driver に組み込まれている接続文字列デザイナーが使用できます。JAR ファイルをダブルクリックするか、コマンドラインからjar ファイルを実行します。
```
java -jar cdata.jdbc.apachekafka.jar
```
  接続プロパティを入力し、接続文字列をクリップボードにコピーします。
  
  JDBC URL を構成する際に、Max Rows 接続プロパティを設定することもできます。この設定は返される行数を制限するため、レポートやビジュアライゼーションを作成する際のパフォーマンスが向上します。
  
  一般的な接続文字列は次のとおりです。
```
jdbc:apachekafka:User=admin;Password=pass;BootStrapServers=https://localhost:9091;Topic=MyTopic;
```
- NOTE：Database Userid とDatabase Password は、それぞれKafka のUser プロパティとPassword プロパティに対応しています。
「Connection」タブで「Connect」をクリックします。