SSIS で SQL Server から BigQuery へのデータフローを構築

SQL Server データベースは、エンタープライズレコードの保存に広く使用されています。このデータを他の場所に移動する必要がある場合がよくあります。CData SSIS Task for BigQuery を使用すると、BigQuery のデータを簡単に転送できます。この記事では、SQL Server から BigQuery にデータをエクスポートする方法を説明します。

はじめに

---

ソースとデスティネーションコンポーネントの追加

まず、新しい ADO.NET Source コントロールと新しい BigQuery Destination コントロールを Data Flow Task に追加します。

ADO.NET ソースの設定

以下の手順に従って、SQL Server インスタンスへの接続に必要なプロパティを指定します。

1. ADO.NET Source を開き、新しい接続を追加します。ここでサーバーとデータベースの情報を入力します。
2. Data access mode メニューで「Table or view」を選択し、BigQuery にエクスポートするテーブルまたはビューを選択します。
3. ADO NET Source ウィザードを閉じ、デスティネーションコンポーネントに接続します。

BigQuery 用の新しい Connection Manager を作成

以下の手順に従って、Connection Manager で必要な接続プロパティを設定します。

1. 新しい Connection Manager を作成します：Connection Manager ウィンドウで右クリックし、New Connection をクリックします。Add SSIS Connection Manager ダイアログが表示されます。
2. メニューから CData GoogleBigQuery Connection Manager を選択します。
3. 接続プロパティを設定します。

   BigQuery 接続プロパティの取得・設定方法

   Google BigQuery はOAuth 認証標準を使用します。個々のユーザーとしてGoogle API にアクセスするには、組み込みクレデンシャルを使うか、OAuth アプリを作成します。

   OAuth では、Google Apps ドメインのユーザーとしてサービスアカウントを使ってアクセスすることもできます。サービスカウントでの認証では、OAuth JWT を取得するためのアプリケーションを登録する必要があります。

   OAuth 値に加え、DatasetId、ProjectId を設定する必要があります。詳細はヘルプドキュメントの「はじめに」を参照してください。

BigQuery デスティネーションの設定

デスティネーションコンポーネントの Connection Manager で、SQL Server ソーステーブルから BigQuery デスティネーションテーブルへのマッピングと、BigQuery のデータに対して実行するアクションを定義します。この記事では、Orders エンティティを BigQuery に挿入します。

1. BigQuery Destination をダブルクリックして、デスティネーションコンポーネントエディタを開きます。
2. Connection Managers タブで、先ほど作成した Connection Manager を選択します。
3. Use a Table メニューで Orders を選択します。 Action メニューで Insert を選択します。
4. Column Mappings タブで、入力カラムからデスティネーションカラムへのマッピングを設定します。

プロジェクトの実行

これでプロジェクトを実行できます。 SSIS Task の実行が完了すると、SQL テーブルのデータが選択したテーブルにエクスポートされます。