SSISにて、一時テーブルを使ったファイルの取り込みがうまく行かない場合がある（その２）

質問

SQL Server2005 のSSISにて、並列で一時テーブル(##tbl1,##tbl2,##tbl3)を作成し、
その作成した一時テーブルに、同じく並列でフラットファイルデータを取り込む、
といった処理を行っています。

##tbl1作成　##tbl2作成　##tbl3作成
　　　↓　　　　　　↓　　　　　　　↓
##tbl1取込　##tbl2取込　##tbl3取込

こちらの処理について、実行させると成功するときもあれば、失敗する時もあります。
失敗するときは、

[##tbl1 [38]] エラー : "[dbo].[##tbl1]" の Fastload 行セットを開けませんでした。オブジェクトがデータベース内に存在することを確認してください。

や、

[##tbl2 [38]] エラー : "[dbo].[##tbl2]" の Fastload 行セットを開けませんでした。オブジェクトがデータベース内に存在することを確認してください。

といったエラーになります。
一時テーブル作成処理は成功しているのに、何故このエラーが出るのかが分かりません、、
実際には一時テーブルの作成が完了していないのに、次の処理に移っているのでしょうか・・・？

また、この処理を並列ではなく、直列にしてやると、エラーは発生しません。

##tbl1作成
　　　↓
##tbl2作成
　　　↓
##tbl3作成
　　　↓
##tbl1取込
　　　↓
##tbl2取込
　　　↓
##tbl3取込

どなたかご存知の方、教えて頂けないでしょうか？

以上、よろしくお願い致します。

回答No.1

jamshid6 · ベストアンサー

SSISは並列処理が１つの売りだったりするわけですが、接続マネージャのRetainSameConnectionは「そのセッションをパッケージ完了まで維持する」ことは意味していますが、「そのセッションで全ての処理を行う」ことまでは意味していないということです。
今回のような並列処理で、SSISが並列実行可能と判断すれば、その部分については複数のセッションで接続し、並列実行を行おうとします。
（追加で立ちあがったセッションは並列実行が終われば切れてしまいます）

質問者さんのケースでエラーになる場合、例えば##T2がエラーになったとすれば、
1)最初に立ちあがったセッションが##T1, ##T3を作成
2)その間にもう一つのセッションが立ちあがり、##T2を作成（並列実行）し、そのセッションは切れる
3)最初に立ちあがったセッションが##T1, ##T2, ##T3へのインポート処理を行う
ということが起こっているはずです。
（一番いいのはSQL Serverプロファイラで実行中の内容を確認してみることです）

この問題を回避する案としては、
1) Packageのプロパティにある「MaxConcurrentExecutables」の値を-1から1に変更します（-1はCPU+2を意味する既定値）。ここを１にすると、並列処理であるものの並列実行はプランされないため、途中で余計なセッションが立ちあがることはなくなりますが、逆にいうとこのステップに関して並列にタスクを組むこと自体にうまみがなくなるということです。

2) 接続マネージャを３本作ってそれぞれに割り当てる。
　それぞれが最初から違うセッションで実行されますので、並列実行でも勝手にセッションが立ちあがることはないはずです。
　ただ、本当にここまでやる必要があるのかどうかという点だけですね。

補足

jamshid6さま

いつもご回答ありがとうございます。
なるほど、別のセッションが立ち上がり、
それが切れることで一時テーブルも無くなってしまった、
という事だったのですね、、

頂いたアドバイスを元に、並列処理のうまみを生かしつつ、
接続マネージャを１本でなんとかしようと考え、以下の手法で
やってみたところ、うまくいきました！

　　　　　##t1作成
　　　　　　　↓
　　　　　##t2作成
　　　　　　　↓
　　　　　##t3作成
　　↓　　　　↓　　　　↓
##t1取込、##t2取込、##t3取込（ここを並列に）

この方法なら問題ないですよね？？

回答No.2

jamshid6

一時テーブル作成を直列にするのであれば、確かに問題はないと思います。

お礼

ご回答ありがとうございます！
助かりました！