LinkedIn のデータをPowerShell でMySQL にレプリケーションする方法

CData Cmdlets for LinkedIn を使えば、PowerShell からLinkedIn のデータ データにリアルタイムで連携できます。データ同期などのタスクの連携にぴったりの製品です。 本記事では、PowerShell からCData Cmdlets for LinkedIn およびCData Cmdlets for MySQL を使って、同期スクリプトを作成して実行します。

まずは、PowerShell でLinkedIn への接続を行います。レプリケーションは4つのステップがあります。

LinkedIn はOAuth 2 認証標準を使用します。LinkedIn にアプリを登録して、OAuthClientId およびOAuthClientSecret を取得する必要があります。 詳細はヘルプドキュメントを参照してください。

LinkedIn のデータの取得

1. モジュールのインストール:

   Install-Module LinkedInCmdlets

2. LinkedIn への接続:

     $linkedin = Connect-LinkedIn  -OAuthClientId $OAuthClientId -OAuthClientSecret $OAuthClientSecret -CallbackURL $CallbackURL -CompanyId $CompanyId
     

3. 取得ターゲットのリソースの取得:

     $data = Select-LinkedIn -Connection $linkedin -Table "CompanyStatusUpdates"
     

   Invoke-LinkedIn cmdlet を使って、SQL-92 クエリを使用することもできます:

     $data = Invoke-LinkedIn -Connection $linkedin -Query 'SELECT * FROM CompanyStatusUpdates WHERE EntityId = @EntityId' -Params @{'@EntityId'='238'}
     

4. 戻り値からカラム名のリストを保存します。

     $columns = ($data | Get-Member -MemberType NoteProperty | Select-Object -Property Name).Name
     

LinkedIn のデータをMySQL データベースにレプリケーション

カラム名を指定できるようにして、データをMySQL データベースにレプリケーションします。

1. モジュールのインストール:

   Install-Module MySQLCmdlets

2. MySQL DB に、MySQL Server 名、ユーザー、パスワード、レプリケーション先のデータベース名を指定して、接続します:

     $mysql = Connect-MySQL -User $User -Password $Password -Database $Database -Server $Server -Port $Port
     

3. LinkedIn、保存された値、そしてAdd-MySQL Cmdlet を使って、MySQL にデータを1レコードずつ挿入します。この例では、MySQL 側のテーブルは、LinkedIn のリソース（CompanyStatusUpdates）と同じテーブル名を持っている必要があります。

     $data | % {
       $row = $_
       $values = @()
       $columns | % {
         $col = $_
         $values += $row.$($col)
       }
       Add-MySQL -Connection $mysql -Table "CompanyStatusUpdates" -Columns $columns -Values $values
     }
     

次回以降のレプリケーションをシンプルに実現

• 一度PowerShell でLinkedIn とMySQL に接続したら、次からは1行のコマンドでレプリケーションを実施できます:

    Select-LinkedIn -Connection $linkedin -Table "CompanyStatusUpdates" | % {
      $row = $_
      $values = @()
      $columns | % {
        $col = $_
        $values += $row.$($col)
      }
      Add-MySQL -Connection $mysql -Table "CompanyStatusUpdates" -Columns $columns -Values $values
    }
    

• 別のPowerShell モジュールで、LinkedIn を別のデータベースに複製する場合、Select-LinkedIn cmdlet のデータから、カラム、接続およびテーブルを除外しておきましょう。これらのデータはデータ移動のときだけ必要となるためです。

    $columns = ($data | Get-Member -MemberType NoteProperty | Select-Object -Property Name).Name | ? {$_ -NotIn @('Columns','Connection','Table')}
    

おわりに

これで、LinkedIn のデータをMySQL に複製できました。分析、BI などでLinkedIn のデータをMySQL から使うことができるようになります。