박종명의 아름다운 개발 since 2010.06

데이터 아키텍처 영역에서, 데이터 품질은 실제 데이터 값 자체가 그 대상으로 데이이 품질관리 체계에서 가장 기본이 되는 관리요소이다.

일반적인 데이터 품질관리 프레임워크에서는 데이터 값에 대한 관점별 관리요소를 다음과 같이 제시하고 있다.

이번 포스팅에서는 데이터 값 자체에 대한 품질을 어떤 식으로 평가하고 인증하는지에 대해 기술하며, 그 기준은 한국데이터베이스진흥원의 DQC-V 심사를 기반으로 한다.

DQC-V(Data Quality Certification-Value)
한국데이터베이스진흥원에서 주관하는, 3가지 데이터 관련 인증분야(데이터인증/데이터관리인증/데이터보안인증) 중 데이터 값에 대한 인증영역으로, 그 정의는 다음과 같다.

여기서 도메인과 업무규칙이란 데이터품질을 평가하는 주요관점으로, 비즈니스 상 요구되는 데이터가 정확한 값과 범위로 일관되게 저장/관리되고 있는지를 평가하기 위한 심사항목이 된다.

두 영역에 대한 세부 심사항목과 내용은 다음과 같다 (http://www.dqc.or.kr/certi/files/DQCV_check.pdf)

도메인은 숫자/코드/ 분류와 같은 것으로, 도메인 기반 데이터 품질진단은 조직에서 사전 정의한 데이터 값과 타입, 길이, 초기값 등에 맞춰 데이터가 저장되어 있는지에를 심사하게 되며, 비교적 객관적이고 공정하게 평가할 수 있는 기술적 평가 영역이라 하겠다.

반면,

업무규칙은 실제 비즈니스에 필요한 규칙을 대상으로 하기에 조직의 특성에 따라 그 기준이 서로 상이할 수 있고 복잡하기도 해서, 도메인 기반 품질진단에 비해 심사하기가 쉽지 않은 영역이기도 하다.

데이터 품질진단 접근방식
데이터 품질진단은 크게 다음과 같이 두 가지 방법으로 접근할 수 있다.

1) Inside-Out
- 데이터베이스 그 자체로부터 문제를 발견해 나가는 방식.
- 해당 기업의 비지니스 지식이 부족해도 가능한 '기술적 분석'에 해당.
- Profiling 기법과 Data Rule을 통한 Auditing 두 가지 접근 방식이 있음

2) Outside-In
- 정보시스템 내부사용자와 외부고객의 이슈로부터 데이터 품질을 접근하는 방식
- 주로 고객센터에서 접수된 SR과 내부에서 요청되는 iSR 분석을 통해 이슈를 도출함

1. 도메인 기반 데이터 품질진단
- 데이터 프로파일링 기법으로 도메인을 분석을 수행하여 컬럼에 대한 분류를 수행하고 메타 시스템에 정의된 내역이 존재할 경우 해당 내역을 연계해야 한다. 도메인 분석에서의 분석 대상은 다음과 같이 세분화 할 수 있다.

대체로 컬럼분석/날짜분석/패턴분석은 단일컬럼의 값이 그 대상이며, 코드분석/참조무결성분석은 테이블간 관계를 고려한 분석을 수행하게 된다.

컬럼분석은 대표적으로 해당 컬럼에 저장된 값에 대해 Min/Max 값분석, Min/Max길이분석, 빈도(Count)분석, Null/Space분석을 수행하며,날짜분석은 날짜의 범위분석, 날짜포맷부석, 날짜초기값 분석 등을 주로 수행한다

패턴분석은 정형패턴분석과 비정형패턴분석으로 나뉘는데, 정형패턴분석은 주민번호나 사업자번호, 여권번호등 그 패턴이 이미 정해진 패턴 유효성을 검사하며 비정형패턴분석은 기업 내부 규약에 따른 문자체계, 번호체계를 기준으로 준수여부를 심사하게된다.

코드분석은 단일코드분석과 복합코드분석, 목록형코드 분석으로 나누며 코드의 값이 코드테이블의 규칙을 준수하고 일관성을 유지하는지를 평가하게 된다.

참조무결성분석은 말 그대로 부모-자식 테이블간 관계 정합성을 검증하게 된다. 보통 DBMS상에 참조 제약사항이 명시적으로 걸려 있으면 참조무결성이 잘 유지되며 이럴경우 품질진단에서도 결함이 거의 나오지 않는다.

2. 업무규칙 기반 데이터 품질진단
- 공공정보 품질관리 매뉴얼에 따르면 업무규칙을 다음과 같이 정의하고 있다

즉 업무규칙 기반 데이터 품질진단은, 비지니스 상 사전에 규정된 기준에 맞도록 데이터가 저장/관리되는 가를 진단하는 것이다. 따라서 품질진단을 하기 전에 업규칙을 먼저 명확히 하는 것이 매우 중요하다.

DQC-V에서는 업무규칙의 유형 분류의 예를 다음과 같이 제시하고 있다.

업무규칙은 크게 세 가지 대상으로부터 도출이 가능한데,

그 첫번재는 앞서 살펴봤던 데이터 프로파일링 결과로 부터 업무규칙을 도출하는 것이다. 프로파일링을 수행해서 오류로 판명된 결과들 중에서 영향가 있는 것, 즉 중요테이블에 적용되는 항목들대해 업무규칙화가 가능하다.

다음으로 해당 비즈니스를 수행하는 조직의 담당자와의 인터뷰나 설문 SR, iSR, VOC와 같은 것으로도 도출이 가능할 것이다. 마지막으로 해당 비즈니스에 적용되는 법령이나 규정, 지침등으로 부터 업무규칙을 하향식으로 도출이 가능하다.

이때 중요한 것은 물리적인 진단이 가능한 테이블, 컬럼단위로 업무규칙을 도출해야 하며, 가장 작은 단위의 업무규칙으로 원자화하여 작성하는 것이 좋다

* 참고자료 출처
- 한국데이터베이스진흥원, DQC-V 심사원 연수자료

꽤 어려운 필기시험을 거쳐, 1주일간의 실무교육과 실무시험을 거쳐 ISMS 인증심사원 자격을 취득했다.

기업의 정보보안관리체계의 중요성이 증가하면서, 서류전형과 실무교육만으로 주어졌던 심사원 자격이, 그 자질에 대한 논란이 부각되면서 작년부터 필기시험이 추가되었다.

공책 한권 분량의 방대한 문제가 특이했으며, 정보보안기사 실기시험의 난이도를 웃돈다는 평가와 주어진 시나리오로 결함을 찾아내는 문제가 대다수였다.

1년에 한번 있는 이 시험은, 서울의 한 곳에서만 치뤄지는데 그래서인지 필기시험 당일 상당히 많은 사람들로 시험장소가 찼던 것으로 기억한다.

그 중 나이가 지긋하신 분들도 꽤 보여, IT 인생 참 빡빡하구나 하는 생각이 들었다.

어쨌던 필기시험을 무사히 통과하고, 5일간 실제 ISMS 심사와 결함보고서 작성에 관한 실무교육을 듣고 마지막날 가상의 시나리오와 인터뷰 자료, 기업의 산출물을 바탕으로 결함을 찾고 결함보고서를 수기로 작성하는 시험을 치르고 자격을 받게 되었다.

ISMS 심사는 5일 동안 진행되는데, 실제 심사를 나가게 될 여유가 생길지 모르겠다.
여하튼 올 한해, 목표한 바 중 또 하나를 이루게 되어 기분이 좋다.

지난 일요일, KPC 정기모의고사가 있었다.

이번에 정보관리 1교시 출제와 채점을 맡게 되어, 오전부터 종일 채점하느라 정신없는 하루를 보냈다.

물론 시험을 직접 치루는 수험생들은 훨씬 힘든 하루였으리라..
기억하건데, 모의고사날은 꽤 신경이 곤두서고 체력이 크게 소진되는 하루다.

남들 노는 일요일에, 목표를 위해 달리는 많은 수험생들에게 응원을 보낸다.
그들은 성공할 자격이 있다.

(모의고사 총평) http://cafe.naver.com/81th/105410

이게 뭡니까...
서비스 기획의 문제인가요? 마케팅 부서의 양보할 수 없는 요구사항인가요?

유투브...
동영상 플레이 전에 광고 노출 시, 5초 이후 스킵 가능하도록 하여 사용성을 크게 침해하지 않으면서도 광고를 노출시키고 있다.

그리고 이 시스템 상에서의 몇몇 광고는, 5초라는 짧은 시간내에 최대한 호기심을 유발시키도록 의도하여 목적 외 대부분에 무관심한 나 같은 사람도 나머지 광고를 보게 만드는 경우가 종종 있다.

즉, 사용성을 침해하지 않는 범위에서 광고도 노출하고, 5초라는 짧은 시간 제약은 자연스럽게 광고를 만드는 사람으로 하여금 호기심 응집도를 최대한 올릴 수 있게 만드는 촉발요인이 되기도 하는 것이다.

그런데, 국내 모 동영상 서비스를 보면, 무려 다음과 같은 문구가 나온다.
"15초 이후에 광고를 건너뛸 수 있습니다"

이건 뭐.. 광고 한편 보라는 거하고 뭐가 다른지...

누군가는, 무료 동영상에 광고 좀 보면 어떠냐 하겠지만...
따라 할꺼면 제대로 따라하고, 돈 벌꺼면 확실하게 까놓고 벌기 바란다. 이도 아니고 저도 아닌 어정쩡 한거 없어 보이기 까지 한다. 정말 별로임.

일반적으로...

자신의 능력을 (짧은 시간에) 평가 받아야 하는 환경에 놓인다는 것은 적잖이 피곤한 일이다.
그것이 시험이든, 면접이든, 시합이든 어떤 상황이든 할 것 없이 말이다.

필자의 경우에도 지금까지 많은 시험과 면접에 노출되어 왔다.
(사실 늙어서 고생중이기도 하다. ㅡ,ㅡ; 어릴때 좀 하지 그랬니... 슬로우 스타터라며 위로하며 산다)

특히 면접으로만 보면, 필자처럼 많은 면접에 노출되어본 사람도 아마 드물것이다.

근래, 짧은 주기로 몇 차례 이어진 시험과 면접을 겪으면서 생각을 정리하고 싶어 펜(?)을 들었다.

도전하고 있다는 증거
이 글을 보고 있는 당신이, 곧 마주칠 결전의 날(?)을 앞두고 압박 당하고 있다면 이말을 먼저 해 주고 싶다.
 
- "아무것도 하지 않으면 아무 일도 일어나지 않는다!"

그렇다. 맥주광고에 쓰인 카피다. 흔한 말이지만 진리다.
사람은 대체로 편하고 즐거운 상태를 유지하고 싶어한다. 대부분의 사람들이 의미있는 변화를 하지 못하는 근원적 이유이기도 하다. (고인물은 썩게 마련이다)

하지만 결전을 앞둔 당신은 이미 평범하기를 거부했을 가능성이 크다.
(여기서 평범함의 거부란 남들과의 상대적 비교보다는, 늘 같은 자기자신 즉 어제의 나보다 더 나은 내가 되기를 바라는 마음의 상태로 이해되어야 한다)
   
스스로를 다독여 주기 바란다.
아무것도 하지 않는 것보다 무언가에 의미있는 도전을 시도하고 실패해 보는 것이 훨씬 값지다.

- 도전해서 손해 볼 일은 없다.
  도전은 그 자체만으로도 둘 중 하나의 결과로 당신을 도울 것이다. 성취하거나 성장하거나!

만일 수 년동안 공정하게 평가받는 경험을 하지 않고 있다면, 적당히 편한것을 계속 추구하고 있는 것이며 지금의 자신의 상태에서 더 이상의 발전을 기대하지 말아야 할 것이다.

... 리우 올림픽에 출전한 우리 선수들에게 존경을 표합니다 ...

평가(특히 면접)에 임하는 자세
이 글을 쓰고자 한 동기이다. 앞서 말한대로 누군가에게 평가 받는다는 것은 언제나 피곤한 일이다.
더욱이 그것이 자신의 인생에 의미있는 전환점을 주는 도전이라면 부담감은 더욱 커진다. 이런 부담감을 줄이고 성공과 실패에 상관없이 의미있는 결과를 얻기 위한 자세를 말하고자 한다.

1) 준비!준비!준비!
아... 이건 뭐.. 너무 식상해서 오히려 놀라울 지경이다. ㅡ,ㅡ;

그렇다! 필자가 근래 몇 번의 평가를 받는 상황을 겪으며, '어떻게 하면 평가의 피곤함을 좀 줄일 수 있을까?' 하고 고민을 거듭해 본 결과 확실히 은총알은 없다는 결론에 이르렀다.

평가에 앞서 제일 먼저 해야 할 것이, 그 평가에 특화된 준비를 하는 것이다.
특히 낯선 분야에서의 변수가 많은 면접의 경우, 준비한 내용과 완전히 동일한 질문이 나올 확률은 극히 낮을 것이다. (자기소개, 포부.. 이런거 말고...)

그럼에도 불구하고 준비는 반드시 필요하다. 
필자도 예전에는 면접은 오히려 변수가 많아서 시험보다 준비하기가 힘들고, 평소 실력대로 봐야 한다는 생각을 했던 사람이다. 그러나 근래 굵직한 몇 번의 면접을 겪으면서 면접 역시 준비의 정도에 따라 퀄리티가 달라짐을 경험했다. (아... 기술사 면접의 압박감이란... )

준비한 내용을 그대로 물어보지 않더라도, 질문 내용과 전개과정의 맥락상에서 준비한 내용이 무기가 될 수 있다. 그리고 하나도 써먹지 못한 내용이 있더라도 그 자체로써 자신을 돌아보는 계기가 될 것이다.

- "지금 당장 면접노트를 준비하라.
   예상질문을 고민하고 두괄식으로 핵심내용으로 추상화 시킨 답변을 정리하라"


2) 진인사대천명
이제는 평가 당일날에 가져야 할 마음가짐에 대해 얘기하고자 한다. 사전 준비가 되었다는 가정하에, 다음의 한자성어를 결전의 당일날 되새기며 마음을 바로잡자.

필자가 굉장히 좋아하는 말이다.