Birst でKafka データのビジュアライゼーションを構築

加藤龍彦
加藤龍彦
デジタルマーケティング
CData JDBC Driver とBirst クラウドエージェントを使用して、Birst でKafka のデータ のリアルタイムの視覚化を構築します。

Birst は、組織が複雑なプロセスを迅速に理解し、最適化することを支援するクラウドビジネスインテリジェンス(BI)ツールおよび分析プラットフォームです。CData JDBC Driver for ApacheKafka と組み合わせると、Birst Cloud Agent を経由してリアルタイムKafka のデータ に接続し、ビジュアライズを構築できます。ここでは、Cloud Agent を使用してKafka に連携し、Birst で動的レポートを作成する方法を段階的に説明します。

強力なデータ処理機能により、CData JDBC Driver はBirst のKafka のデータ 操作に高いパフォーマンスを提供します。Birst からKafka への複雑なSQL クエリを発行すると、ドライバーはフィルタや集計などのサポートされているSQL 操作を直接Kafka にプッシュし、組込みSQL エンジンを利用してクライアント側でサポートしない操作を処理します。組み込みの動的メタデータクエリにより、JDBC ドライバーはネイティブのBirst データ型を使用してKafka のデータ を視覚化および分析することを可能にします。

Birst でKafka データへのJDBC 接続を設定

Birst プロジェクトを作成する前に、JDBC Driver を操作するためのBirst Cloud Agent をインストールする必要があります。また、JDBC ドライバーのJAR ファイル(および存在する場合はLIC ファイル)をCloud Agent のインストール場所の/drivers/ ディレクトリにコピーします。

ドライバーとCloud Agent のインストールが完了したら、開始できます。

  1. Birst で新しいプロジェクトを作成します。 Create a new Project in Birst
  2. 接続に名前を付けます。(e.g. CDataApacheKafka)
  3. Live Access を選択します。
  4. エージェントを選択します。
  5. Database Type をOther に設定します。
  6. Configure the Connection (part 1)
  7. SQL タイプをMSSQL に設定します。
  8. 接続文字列を設定します。

    Apache Kafka 接続プロパティの取得・設定方法

    それでは、Apache Kafka に接続していきましょう。.NET ベースのエディションは、Confluent.Kafka およびlibrdkafka ライブラリに依存して機能します。 これらのアセンブリはインストーラーにバンドルされており、CData 製品と一緒に自動的にインストールされます。 別のインストール方法をご利用の場合は、NuGet から依存関係のあるConfluent.Kafka 2.6.0をインストールしてください。

    Apache Kafka サーバーのアドレスを指定するには、BootstrapServers パラメータを使用します。

    デフォルトでは、CData 製品はデータソースとPLAINTEXT で通信しており、これはすべてのデータが暗号化なしで送信されることを意味します。 通信を暗号化したい場合は、以下の設定を行ってください:

    1. UseSSLtrue に設定し、CData 製品がSSL 暗号化を使用するように構成します
    2. SSLServerCert およびSSLServerCertType を設定して、サーバー証明書をロードします

    Apache Kafka への認証

    続いて、認証方法を設定しましょう。Apache Kafka データソースでは、以下の認証方法をサポートしています:

    • Anonymous
    • Plain
    • SCRAM ログインモジュール
    • SSL クライアント証明書
    • Kerberos

    Anonymous 認証

    Apache Kafka の特定のオンプレミスデプロイメントでは、認証接続プロパティを設定することなくApache Kafka に接続できます。 このような接続はanonymous(匿名)と呼ばれます。

    匿名認証を行うには、以下のプロパティを設定してください。

    • AuthSchemeNone

    その他の認証方法については、ヘルプドキュメントをご確認ください。

    ビルトイン接続文字列デザイナー

    JDBC URL の構成については、Kafka JDBC Driver に組み込まれている接続文字列デザイナーを使用してください。JAR ファイルのダブルクリック、またはコマンドラインからJAR ファイルを実行します。

    java -jar cdata.jdbc.apachekafka.jar
    

    接続プロパティを入力し、接続文字列をクリップボードにコピーします。

    Using the built-in connection string designer to generate a JDBC URL (Salesforce is shown.)

    JDBC URL を構成する際、Max Rows 接続プロパティを設定することもできます。これによって戻される行数を制限するため、可視化・レポートのデザイン設計時のパフォーマンスを向上させるのに役立ちます。

    以下はKafka の一般的なJDBC 接続文字列です。

    jdbc:apachekafka:User=admin;Password=pass;BootStrapServers=https://localhost:9091;Topic=MyTopic;
    
    
  9. Driver Name cdata.jdbc.apachekafka.ApacheKafkaDriver を設定し、[Save]をクリックします。
Configure the Connection (part 2)

NOTE Kafka への認証は接続文字列に管理されるため、[Security Credentials]は空白でも問題ありません。

Kafka データオブジェクトを設定

接続が構成されたら、データセットのスキーマを構成し、ビジュアライズするテーブル、ビュー、そしてカラムを選択することができるようになります。

  1. スキーマを選択します。 (e.g. ApacheKafka)
  2. [Tables]や[Views]をクリックしてこれらのエンティティに接続し、[Apply]をクリックします。
  3. アクセスする[Tables]と[Columns]を選択し、[Done]をクリックします。
Editing the objects

オブジェクトが構成されたら、Pronto Prepare and Relate ツールを用いて、データ準備の実行やデータのリレーションを検出できるようになります。

ビジュアライゼーションを構築

データを準備し、接続されたオブジェクト間のリレーションを定義することで、ビジュアライゼーションを構築することができるようになります。

  1. メニューから、Visualizer ツールを選択します。
  2. Select the Visualizer
  3. オブジェクトからMeasures & Categories を選択します。
  4. 選択したMeasure(s) に適切なビジュアライゼーションを選択し、構成します。
Live Kafka のデータ in a Birst visualization

CData JDBC Driver for ApacheKafka をCloud Agent やBirst とともに用いることにより、Kafka で簡単に堅牢なビジュアライゼーションとレポートを作成できます。30日の無償評価版をダウンロードし、Birst ビジュアライゼーションの構築を開始してください。

はじめる準備はできましたか?

Apache Kafka Driver の無料トライアルをダウンロードしてお試しください:

 ダウンロード

詳細:

Apache Kafka Icon Apache Kafka JDBC Driver お問い合わせ

Apache Kafka データに連携するJava アプリケーションを素早く、簡単に開発できる便利なドライバー。