Blog
 

BigQuery

August 6, 2021

BigQuery に Google アナリティクス（ユニバーサル アナリティクス）のデータを連携する

by 宮本航太

こんにちは、テクニカルサポートエンジニアの宮本です！ 最近 G４という次世代のGoogle アナリティクスがリリースされ、徐々に使用されている方も増えてきているのではないでしょうか？ Ｇ４のトピックの一つとして、無償で BigQuery にデータを連携できる機…

続きを読む
CData SyncCData SyncGoogle AnalyticsBigQueryソリューションとユースケース
July 29, 2021

Microsoft AccessのリンクテーブルからGoogle BigQuery のデータを利用

by 桑島義行

CData Japan 技術ディレクター桑島です。本記事では、多くのお問い合わせをいただいている Microsoft AccessのリンクテーブルでGoogle BigQueryのデータを利用する方法をご紹介します。 利用製品 利用方法 Google BigQuery側の設定 ODBC Driverのインストー…

続きを読む
CData DriversbigqueryaccessodbcCData Driversソリューションとユースケース
ELTツールのAIRBYTEとCDataConnectでSaaSデータをBigQueryに連携してみた
March 4, 2021

ELTツールのAIRBYTEとCDataConnectでSaaSデータをBigQueryに連携してみた

by 宮本航太

こんにちは、CData Software Japan エンジニアの宮本です。 つい先日この記事や Twitter 上で AIRBYTE というオープンソースの ELT ツールの存在を知りました。 jp.techcrunch.com ということで早速触ってみましたが、結構簡単に確認できました。 Airbyte 初…

続きを読む
ソリューションとユースケースCData Connect AIAIRBYTEELTSalesforceBigQueryCData Connect
February 10, 2021

Backlogで管理している課題をBigQueryに連携してみる：CData Sync

by 宮本航太

こんにちは！CData Software Japanの宮本です！ 今回はプロジェクト管理ツールの Backlog で管理している課題を、ELT ツールのCData Sync を使って外部DBにレプリケートする方法をご紹介します。 backlog とは？ 開発からマーケティング、人事・総務まで様々…

続きを読む
CData SyncBacklogCData SyncBigQueryデータ連携ニュース
January 28, 2021

GCP の OAuth 2.0 grant_type=refresh_token で「Token has been expired or revoked.」が発生する場合の対処方法

by 杉本和也

こんにちは。CData Software Japanリードエンジニアの杉本です。 ここ最近、GCP・BigQuery や Google Contacts などの連携利用でリフレッシュトークンが期限切れになる・使えなくなるという事象に遭遇することがあったので、その対処方法についてお伝えした…

続きを読む
CData DriversOAuth 2.0GCPBigQueryGoogleCData Driversソリューションとユースケース
January 19, 2021

BigQueryへのInsert パターン比較：ストリーミング、DML、バルクロード：CData BigQuery Driver

by 宮本航太

こんにちは。CData Software Japan エンジニアの宮本です。 今回は BigQuery へデータを登録する際の「ストリーミングインサート、DML、バルクロード」の 3つのインサート方法についてみていきたいと思います。 それぞれのInsert パターンについて ストリー…

続きを読む
CData DriversBigQueryJDBCCData Driversソリューションとユースケース
January 8, 2021

BigQueryへのリクエストでエラー：Request payload size exceeds the limit

by 宮本航太

BigQueryへのリクエストでエラー：Request payload size exceeds the limit

続きを読む
CData SyncBigQueryCData Syncソリューションとユースケース
December 28, 2020

GCEインスタンスのアクセススコープを使用してBigQuery へのアクセス制御を試してみる：CData Sync

by 宮本航太

こんにちは、CData Software Japan エンジニアの宮本です。 GCE のVMインスタンスでは、インスタンスごとにアクセススコープを設定できるのはご存知でしょうか。以下のようにインスタンスからGCP 上のサービスにアクセスできる範囲を設定することができるよ…

続きを読む
CData SyncGCPBigQueryCData Syncソリューションとユースケース
December 24, 2020

製造業向けMAツール - MRC（マーケライズクラウド） の顧客データを Google BigQuery へ定期的に連携する：CData Sync

by 杉本和也

こんにちは。CData Software Japan リードエンジニアの杉本です。 本記事では 分析基盤向けデータ統合の自動化ツールである CDataSync を使って、MRCのデータを Google BigQuery に連携し、分析する方法を紹介したいと思います。 MRC（マーケライズクラウド…

続きを読む
CData SyncBigQueryCData SyncAPI ProfileMRCソリューションとユースケース
December 22, 2020

GCP内で完結！BigQuery にSaaS データをローディングする構成について

by 宮本航太

本記事はBigQuery Advent Calendar 2020 22日目の記事です。 qiita.com こんにちは！CData Software Japan エンジニアの宮本です。 2020年もあっという間に終わろうとしていますが、この１年を思い返してみると、感覚的に去年に比べてBigQuery を軸にした相…

続きを読む
CData SyncGCPBigQueryDataflowCloud Data FusionCData Syncソリューションとユースケース
December 14, 2020

ELTツール＋Dataform でBigQuery へのデータロード・チェック・マージを自動化してみた：CDataSync

by 宮本航太

こんにちは、CData Software でエンジニアをしている宮本です。 先日、Google からDataform がGCP の傘下になったとアナウンスがありました。 cloud.google.com 自分自身、Dataform というサービスを知らなかったのですが、Webサイトやドキュメントなどを読…

続きを読む
CData SyncELTDataformBigQueryCData Syncデータ連携ソリューションとユースケース
December 11, 2020

CData Driver・CDataSync BigQuery が サービスアカウント認証のJSONファイルフォーマットをサポート

by 杉本和也

こんにちは。CData Software Japanリードエンジニアの杉本です。 V20 の少し前のビルドからなのですが、CData Driver・CDataSync で提供しているBigQuery Driver・コネクタがサービスアカウント認証を行う場合のファイルフォーマットとしてJSON形式を正式に…

続きを読む
CData DriversBigQueryODBCCData Driversソリューションとユースケース