가늘어도 긴놈이 장땡

안녕하세요. 간만에 질문드립니다. ^^

 

조회 변환의 설정을 디폴트로 해놓고  

조회 변환에 쿼리 입력하고

이런 조회 변환을 20개를 주욱 이어붙였을 경우 '동시에' 20개의 커넥션을 DB에 열어서

데이터를 주우욱 읽어오는 걸로 알고 있었습니다. 예전에 그렇게 설명해주신 것 같구요..

그런데 오늘 로그를  살펴보니까 각 조회 변환이 데이터 캐시하는게 순차적이더군요...

간단하게 정리하면 이렇습니다.

 

--goodsdaq_brand
ssis 15:05:05 ~ 15:05:08

--maker
ssis 15:05:09 ~ 15:05:10

--dealersettletbl
ssis 15:05:12 ~ 15:05:30

--custom
ssis 15:05:32 ~ 15:07:36

--dsdeliverygroup
ssis 15:07:46 ~ 15:07:52

--goods_discount_list
ssis 15:07:54 ~ 15:07:59

--freeint_charge_goods
ssis 15:08:03 ~ 15:08:12

--fn_get_goods_satisfaction_point
ssis 15:08:14 ~ 15:11:11

 

(후략..)

 

그림상으로 goodsdaq_brand 이 가장 첫번째 오는 조회변환입니다. 사실 조회 변환 전에 OLEDB 원본 3개에서 테이블을 하나씩 읽어서 병합 조인을 하고 그 결과를 20여개의 조회변환을 주욱 태우는 건데요, 3개의 OLEDB원본과 첫번째 조회변환 goodsdaq_brand는 동시에 시작이 됩니다만, 늘어서 있는 20개의 조회변환이 데이터를 캐시해오는 것은 순차적인 것 같네요. 이게 정상적인건가요?? 제가 잘못본건가요??? 아니면.. 설정을 뭔가 바꿀 수 있는게 있는건가요??? 사실 메모리에 데이터 다 들고 있을거면 그냥 15:05:05 에 패키지 스타트하면 커넥션 23개 동시에 열어서 모든 조회 변환의 start 시간이 동일하게 찍혀도 될 것 같은데... 어찌된 일인지 도움을 좀 부탁드립니다.

 

참고로 EngineThread 는 32, MaxConcurrentExecutables 도 32 입니다 SSIS 엔진이 도는 서버는 32way 입니다.

 

 

 

파생열 변환과 관련하여 아무래도 이해가 잘 되지 않는 점이 있어서 다시 질문드립니다. 다음과 같은 소스 데이터가 있습니다.

 

select * from is_dnt_goods_src

 

is_dnt_goods_yn1 is_dnt_goods_yn2
---------------- ----------------
Y                NULL
Y                NULL
Y                NULL
Y                NULL
Y                NULL
NULL             A
NULL             A
NULL             A
NULL             A
Y                NULL
Y                NULL
Y                NULL
Y                NULL
Y                NULL
Y                NULL
Y                NULL
NULL             A
NULL             A
NULL             A
NULL             A
NULL             A
NULL             A
Y                NULL
Y                NULL
Y                NULL
Y                NULL
Y                NULL
Y                NULL

 

여기서 필요한 비즈니스 로직은 is_dnt_goods_yn 이라는 필드값을 파생열 변환을 사용해서 새 열로 만들어내는데,

 

'is_dnt_goods_yn2 가 A 면 A를 리턴하고 A가 아니면(NULL이거나 다른값) 이면 is_dnt_goods_yn1 을 검사해서 그 값이 Y면 Y를 리턴하고 그게 아니면(NULL이거나 다른값) 이면 N 를 리턴한다'

 

입니다. 위의 로직을 파생열 변환에서 다음과 같이 구현해보았습니다.

 

is_dnt_goods_yn      <새열로 추가>   is_dnt_goods_yn2 == 'A' ? 'A' : ((is_dnt_goods_yn1 == 'Y') ? 'Y' : 'N')

 

결과는 다음과 같습니다.

is_dnt_goods_yn1 is_dnt_goods_yn2 is_dnt_goods_yn
---------------- ---------------- ---------------
Y                NULL             NULL
Y                NULL             NULL
Y                NULL             NULL
Y                NULL             NULL
Y                NULL             NULL
NULL             A                A
NULL             A                A
NULL             A                A
NULL             A                A
Y                NULL             NULL
Y                NULL             NULL
Y                NULL             NULL
Y                NULL             NULL
Y                NULL             NULL
Y                NULL             NULL
Y                NULL             NULL
NULL             A                A
NULL             A                A
NULL             A                A
NULL             A                A
NULL             A                A
NULL             A                A
Y                NULL             NULL
Y                NULL             NULL
Y                NULL             NULL
Y                NULL             NULL
Y                NULL             NULL
Y                NULL             NULL

 

A는 제대로 넘어오는데 Y값이 제대로 채워지지 않습니다. 아무래도 이상해서 파생열 변환의 expression 을 바꿨습니다.

 

!ISNULL(is_dnt_goods_yn2) ? is_dnt_goods_yn2 : (!ISNULL(is_dnt_goods_yn1) ? is_dnt_goods_yn1 : 'N')

 

NULL을 검사하도록 했죠. 그랬더니 다음과 같이 나왔습니다.

 

is_dnt_goods_yn1 is_dnt_goods_yn2 is_dnt_goods_yn
---------------- ---------------- ---------------
Y                NULL             Y
Y                NULL             Y
Y                NULL             Y
Y                NULL             Y
Y                NULL             Y
NULL             A                A
NULL             A                A
NULL             A                A
NULL             A                A
Y                NULL             Y
Y                NULL             Y
Y                NULL             Y
Y                NULL             Y
Y                NULL             Y
Y                NULL             Y
Y                NULL             Y
NULL             A                A
NULL             A                A
NULL             A                A
NULL             A                A
NULL             A                A
NULL             A                A
Y                NULL             Y
Y                NULL             Y
Y                NULL             Y
Y                NULL             Y
Y                NULL             Y
Y                NULL             Y

 

정확한 결과가 나왔습니다.

 

제가 expression 을 잘못 사용한 것일까요? 3항 연산자 evaluate 하는데 버그가 있는 것일까요? -_-;;;;

이거때문에 정말 한참을 헤맸습니다. 흑. 혹시 이런 경우를 겪어 보셨는지요????