Azure Datafactory（V2）にSSIS（SQL Server Integartion Service）パッケージをデプロイしてみた
この前Azure Datafactoryの記事を書いたんですが
勉強会でAzure DatafactoryV2なら、SSISパッケージをデプロイして、実行できる！ というのを聞きまして、試してみました。
Azure で SSIS パッケージを配置、実行、および監視する | Microsoft Docs
ちなみにこの記事はMicrosoft Azure Advent Calendar 2017の23日目です！
どんなことができるの？
SSISを知っている人なら、わかりやすいと思いますが、
以下のようなデータの移行や処理の機能をAzure Datafactory上で実行できるようになりますよ！ というものです。
それだけといえば、それだけなのですが、IaaSの基盤を必要とせず、PaaSベースでETL/EAIの機能が使えるようになるというのは結構大きいのではないかと思います。
必要なもの
・Azure サブスクリプション
・SSDT（SQL Server Datatools）
・SSMS（SQL Server Management studio）
・Azure Powershell （最新版がよろしいかと）
構築手順
さて、実際に構築をしていきたいと思います。
全体のステップとしては以下のような感じなんですが
1.Azure SQL Serverの構成
2.Azure Datafactory（V2）の構成
3.Azure IRの構成・起動
4.デプロイするSSISパッケージの作成
5.SSISプロジェクトのインポート
6.SSISパッケージの配置・実行
たぶん、Azure IRってなんなんだ？ ってなると思います。
これは、Azure Datafactory上でSSISパッケージを動かすために必要となるIR（統合ランタイム）です。
実はAzure IRにはSSISの実行以外にもランタイムの機能が提供されていますが、今回は解説しませんので詳しくは上記資料からどうぞー。
各種Azureのリソースを構成
さて、最初にAzureの各種リソースを構成したいと思いますが、悲しいことにAzure IRは今のところ構成用のUIが提供されていません。
なので、PowerShellスクリプトベースで実行する必要があります。
以下に、なんにもリソースが無い状態から全部生成するためのPowerShellスクリプトのベースを配置しましたので、ご参考までにどうぞ。
最終的には、以下のような3種類のリソースが構成されます。
SSISプロジェクト・パッケージの作成
続いて、SSDTを用いて、SSISプロジェクトおよびパッケージを作成します。
ここは通常のSSISの使い方で大丈夫です。
今回は単純にAzure SQLのテーブル間コピーを実行するだけのパッケージです。
クラウドにアップするので、やはり全部クラウド上で構成されているものがやりやすくていいですね。
SSISプロジェクトをデプロイ
それでは、作成したSSISプロジェクトをデプロイしてみましょう。プロジェクトをデプロイした後に、パッケージを配置することで、パッケージを実行できるようになります。
ここでは、SSMS（SQL Server Managerment Studio）を使った方法を紹介します。（色々方法があるっぽいですが、これしか試せていません）
まず、SSMSを立ち上げて、普通に［データベースエンジン接続］をクリックします。
ここで、最初のポイントです。
ただ、Azure SQL Serverに接続するのではなく、［オプション］をクリックします。
ここの［接続プロパティ］タブの［データベースへの接続］で［SSISDB］を入力し
改めてログインタブへ戻って、事前に作成したAzure SQL Serverの接続情報を入力してから、接続します。
この事前のSSISDBの指定が無いと駄目です。
すると、以下のような感じでデータベース配下に、［Integration Service カタログ］、［SSISDB］が表示され、SSISパッケージをデプロイできるようになります。
さて、SSISパッケージをデプロイと行きたいところですが、その前にフォルダーを作成する必要があるので、作成しましょう。
［SSISDB］を右クリックし［フォルダーの作成］をクリックします。
適当な名前を入力し［OK］をクリック。
その後、［プロジェクトフォルダ］と［環境フォルダ］が自動生成されるので、このプロジェクトフォルダに対して、パッケージを構成していきます。
［プロジェクト］フォルダを右クリックし［パッケージのインポート］をクリックします。
あとは、ある程度ウィザードに従って、構成していくだけです。［次へ］をクリックし
SSISのパッケージが配置されたフォルダを指定して［次へ］をクリック
デプロイするSSISパッケージを選択した上で、［次へ］をクリックします。
任意のプロジェクト名を入力し
そのまま［次へ］
ここもとりあえず［次へ］進みます。
最後に［変換］をクリックすると、
SSISプロジェクトがSSISDB上にデプロイされます。
SSISパッケージの配置
プロジェクトのデプロイが完了したので、ようやく実行するためのパッケージを配置します。
これによってようやくパッケージが実行できる状態が整います。
プロジェクトデプロイ後、自動的に以下の画面が表示されるので［次へ］をクリック
プロジェクトの配置先サーバとして、事前に構成したAzure SQL Serverの情報を入力し、［構成］をクリック。接続完了後［次へ］をクリックします。
これで［配置］をクリックすると
パッケージがAzure SQL Server上に配置され
以下のように実行できうようになります！
プロジェクト配下のパッケージを右クリックし、［実行］をクリックしてみましょう。
とりあえず、一回だけ起動するので、そのまま［OK］をクリック
実行状況は以下のようなレポートで確認することが可能です。
無事完了しました！
データもうまく移行されていました。
おわりに
いやぁ、正直結構たいへんでした。
PowerShellはそうでもなかったんですが、Deployする方法が、なかなか回りくどく、調べるのに苦労しました・・・。
PowerShellでデプロイもできるはずなので、そのあたりは追々調べていきたいと思います。
