ColdFusion で JDBC 経由でリアルタイム Hive のデータをインポートしてアプリケーションを構築

Dibyendu Datta
Lead Technology Evangelist

CData JDBC Driver を使用して、ColdFusion で Hive のデータをインポートして活用する方法を説明します。

Adobe ColdFusion は、Web およびモバイルアプリケーションの開発プラットフォームです。独自のスクリプト言語である ColdFusion Markup Language（CFML）を使用して、データ駆動型のWeb サイトを構築したり、REST などのリモートサービスを生成したりできます。

ColdFusion と CData JDBC Driver for Apache Hiveを組み合わせると、ColdFusion の Web およびモバイルアプリケーションを Hive の運用データに接続できます。これにより、アプリケーションをより堅牢で完成度の高いものにできます。この記事では、 JDBC Driver を使用して、ColdFusion マークアップファイル内で Hive データを含むテーブルを作成する方法を説明します。

CData JDBC Driver は、最適化されたデータ処理機能を組み込んでおり、Hive のデータとのリアルタイム連携において圧倒的なパフォーマンスを提供します。複雑な SQL クエリを Hive に発行すると、ドライバーはフィルタや集計などのサポートされている SQL 操作を Hive に直接プッシュし、サポートされていない操作（多くの場合 SQL 関数や JOIN 操作）は組み込みの SQL エンジンがクライアント側で処理します。組み込みの動的メタデータクエリ機能により、ネイティブのデータ型を使用して Hive のデータを操作・分析できます。

Hive への接続を設定

ColdFusion と Hive 間の接続を確立するには、JDBC 接続文字列が必要です。

Apache Hive への接続を確立するには以下を指定します。

Server：HiveServer2 をホストするサーバーのホスト名またはIP アドレスに設定。
Port：HiveServer2 インスタンスへの接続用のポートに設定。
TransportMode：Hive サーバーとの通信に使用するトランスポートモード。有効な入力値は、BINARY およびHTTP です。デフォルトではBINARY が選択されます。
AuthScheme：使用される認証スキーム。有効な入力値はPLAIN、LDAP、NOSASL、およびKERBEROS です。デフォルトではPLAIN が選択されます。
CData 製品においてTLS/SSL を有効化するには、UseSSL をTrue に設定します

組み込みの接続文字列デザイナー

JDBC URL の構築をサポートするために、Hive JDBC Driver に組み込まれている接続文字列デザイナーを使用できます。JAR ファイルをダブルクリックするか、コマンドラインから JAR ファイルを実行してください。

java -jar cdata.jdbc.apachehive.jar

組み込みの接続文字列デザイナーを使用して JDBC URL を生成（hive の例）

データソースの追加とテーブルの作成

接続を設定したら、次の手順に従って CData JDBC Driver を ColdFusion の lib ディレクトリに追加し、新しいデータソースを追加し、接続をテストし、 ColdFusion マークアップファイルを作成して、最終的に Hive のデータとリアルタイムに接続し、ColdFusion Markup Language（CFML）で記述されたテーブルに表示します。

Hive 用の JDBC Driver と lic ファイルを「C:\Program Files\CData[product_name]\lib」から「C:\ColdFusion2021\cfusion\wwwroot\WEB-INF\lib」にコピーします。
```
            cdata.jdbc.apachehive.jar
            cdata.jdbc.apachehive.lic
        
```
注意：.lic ファイルを jar と一緒にコピーしないと、有効なライセンスがインストールされていないことを示すライセンスエラーが表示されます。これはトライアル版と製品版の両方に当てはまります。
ColdFusion 管理画面から、Data & Services を選択します。
ここで「Add New Data Source」をクリックします。データソース名は、ColdFusion の変数命名規則に従っていれば任意の名前を指定できます。 JDBC Driver の場合は「other」を選択し、「Add」ボタンをクリックします。
次に、ドライバーのプロパティを入力します。
- JDBC URL は次の形式で指定します： jdbc:apachehive:|connectionString|
- 一般的な接続文字列は次のようになります：
  
  jdbc:apachehive:Server=127.0.0.1;Port=10000;TransportMode=BINARY;
- Driver Class：cdata.jdbc.apachehive.ApacheHiveDriver
- Driver Name は任意で、ColdFusion 管理コンソールでデータソースを識別するためだけに使用されます。
作成した CDataHiveJDBC データソースの左側にあるチェックマークをクリックして、接続をテストします。データソースが「OK」ステータスを報告すれば、使用可能な状態です。

次に、新しい ColdFusion マークアップファイル（.cfm）を作成し、ColdFusion の wwwroot ディレクトリ（「C:\ColdFusion2021\cfusion\wwwroot」）に配置します。

以下のコードでデータソースにクエリを実行します：

            
        <cfquery name="HiveQuery" dataSource="CDataHiveJDBC">
          SELECT * FROM Customers
        </cfquery>

CFTable を使用すると、HTML でテーブルを素早く出力できます：

            
          <cftable
          query = "HiveQuery"
          border = "1"
          colHeaders
          colSpacing = "2"
          headerLines = "2"
          HTMLTable
          maxRows = "500"
          startRow = "1">

          <cfcol header="<b>City</b>" align="Left" width=2 text="City"/>

          <cfcol header="<b>CompanyName</b>" align="Left" width=15 text="CompanyName"/>

          ...

        </cftable>

HTML 部分を含む完全なコードは以下のとおりです：

            
        <html>
        <head><title>CData Software | Hive Customers Table Demo </title></head>
        <body>
        <cfoutput>#ucase("Hive Customers Table Demo")#</cfoutput>
        <cfquery name="HiveQuery" dataSource="CDataHiveJDBC">

          SELECT * FROM Customers

        </cfquery>
        <cftable
          query = "HiveQuery"
          border = "1"
          colHeaders
          colSpacing = "2"
          headerLines = "2"
          HTMLTable
          maxRows = "500"
          startRow = "1">
          <cfcol header="<b>City</b>" align="Left" width=2 text="City"/>

          <cfcol header="<b>CompanyName</b>" align="Left" width=15 text="CompanyName"/>

          ...

        </cftable>
        </body>

        </html>