국가통계 품질관리

1. 국가통계 품질관리 통계청 품질관리과 2010. 9.

2. I 통계품질관리 개요 I 1 1 1 1 2003년 성과와 성공사례 국내외 정보화 정책 및 환경변화 전망 국내외 정보화 정책 및 환경변화 전망 국내외 정보화 정책 및 환경변화 전망 Ⅳ III II V 통계작성 가이드라인 통계품질진단 방법 우리나라의 통계품질관리제도 통계종류별 오차관리

3. 잘못된 통계가 주는 시사점 생산자 : 조사만, 집계만 하면돼? 정확성은 이용자가 알아서 판단 사용 결과 책임없음!!! 이용자 : 통계보면 혼란스러워 어느 것이 정답일까 혹 이용하다 손실? 정부 신뢰 추락

4. Ⅰ. 통계품질관리 개요

5. 정의 • 국가통계? • 품질? • 통계품질 • 관리? • 품질관리? • 통계품질관리?

6. 통계의 정의 • 국가통계? • 통계작성기관이 정부정책의 수립,평가 또는 경제사회 현상의 연구분석 등에 활용할 목적으로 작성하는 수량적 정보(통계법 제3조) • 불확실한 상태에서 올바른 판단을 내리기 위한 정보

7. 품질의 정의 • 품질? • Quality  Qualitas: Difference of Items, Goodness or Badness • 제품의 유용성을 결정하는 성질 또는 사용목적을 다하기 위해 구비해야 할 성질 • 좋은 품질? 소비자의 사용목적이나 조건에 맞는 품질, 최고나 최상이 아니라 최적의 품질

8. 통계품질의 정의 • 통계품질? • 올바른 판단을 내릴 수 있는 정보인지의 여부 • 사용목적에 맞는 최적의 정보

9. 관리의 정의 • 관리? • 조직의 목표를 설정하고 이를 능률적으로 달성하기 위해 협동적 노력을 지휘 조정하는 과정

10. 품질관리의 정의 • 품질관리 (Quality Management)? • 고객이 요구하는 품질을 확보 ·유지하기 위해 품질목표를 세우고, 이것을 합리적이고 경제적으로 달성할 수 있도록 PDCA 사이클에 따라 수행해 나가는 모든 활동

11. Plan 계획 표준 설정 DO 계획대로 실행 Check 검토 및 평가 Act 수정 조치 PDCA 사이클

12. 품질관리 관련 용어 1 • Quality Management • Quality Control • Quality Assurance • 품질 방침, 목표 및 책임을 결정하고 품질경영시스템 내에서 품질계획, 품질관리, 품질보증 및 품질개선과 같은 수단에 의해 이를 수행하는 전반적인 경영 기능의 모든 활동

13. 품질관리 관련 용어 2 • Quality Management • Quality Control • Quality Assurance • 품질요구사항을 충족시키는 데 사용되는 운영상의 기법 및 활동 • 경제적인 효과를 달성하기 위해 모든 공정을 감시하고 불만족스러운 수행성과의 원인 제거를 목적으로 하는 기법 및 활동

14. 품질관리 관련 용어 3 • Quality Management • Quality Control • Quality Assurance • 품질요구사항을 충족시킬 것이라는 신뢰감을 주기 위해, 품질경영시스템에서 실시되고 실증되는 모든 계획적·체계적 활동 • 내부적으로는 경영자에게 신뢰감을, 외부적으로는 고객 또는 제3자에게 신뢰감을 주는 것이 목적 • 품질요구사항이 사용자의 요구를 충분히 반영하지 못하면, 품질보증은 적절한 신뢰감을 줄 수 없게 됨

15. 통계품질관리의 정의 • 통계품질관리? • 품질관리의 대상이 통계 • 이용자가 만족할 수 있는 통계를 가장 합리적이고 경제적인 방법으로 작성·제공하기 위한 활동

16. 품질관리 통계품질관리 조직 기업 통계작성기관 관리대상 상품·서비스 통계 고객 소비자 통계이용자 품질차원(요구사항) 품질기준 불량품 최소  고객만족 경제성, 기능, 성능, 외관, 내구성, 안전성, 편리성, 조작성 관련성, 정확성, 비교성, 일관성, 시의성/정시성, 접근성/명확성 신속·정확한 통계작성 이용자 목적에 적합한 통계 작성·제공 품질관리와 통계품질관리

17. 통계품질관리의 목적 • 정확한 통계는 국가경영에 필수적인 인프라 • 통계의 왜곡은 곧 정책의 왜곡 • 정보화 사회는 정확한 통계에서 시작 • 정확한 통계 데이터베이스 구축 필요성 대두 • 통계는 지방자치 시대의 필수 요소

18. 유럽국가 통계품질관리의 활용 • IMF는 일반 자료제공기준(GDDS)과 특별 자료제공 기준(SDDS)을 두어 통계품질을 관리 • GDDS : IMF회원국 모두에게 적용할 수 있는 기준 • SDDS :국제자본시장에 진출하려는 원국가를 위한 기준 IMF • 대부분 유럽 통계시스템의 개발 프로그램(European • Statistical System:ESS)에 참여 • 1999년 이후 ESS통계품질을 높이기 위한 품질 리더십 • 그룹(Leadership Group on Quality:LEG)의 구성 후 • 프랑스, 독일, 이탈리아, 그리스, 네덜란드, 포르투갈, • 영국 등이 수용

19. 2001년, OECD에서 특별 팀을 구성 ‘OECD 품질관리 체계’ 구축에 착수 OECD 1994년 처음 품질평가제도 도입 현재 통계품질을 관리하는 조직이 별도 구성 품질에 대한 보고서 (일명 Quality Report) 개발 2000년 8월에는 종합통계를 제외한 모든 통계에 품질 보고서를 작성하도록 함 Eurostat 1985년 ‘캐나다 통계품질 가이드라인(Statistics Canada Quality Guidelines)’발간 인적자원의 효과적인 개발과 관리를 위한 프로그램 운영 통계품질을 보증하기 위한 기관 내의 절차들을 문서화 캐나다

20. Ⅱ. 우리나라의 통계품질관리제도

21. 도입 배경/연혁 • 금융외환위기 (1997) IMF 위기 • 품질관리업무 시작 (1999) • 품질진단시스템 도입

22. 연혁 2002-2005년 : 통계청 생산통계를 대상으로 시범실시 2006년부터 : 539종 통계 정기품질진단 실시 2008년 : 자체품질진단 실시

23. 국가통계 작성실태 예비점검 결과 • 통계전담조직 및 통계인력 부족 • 통계용어 정의, 기준, 작성지침 등 부족 • 명확한 모집단 부재, 모집단 관리 필요 • 자료수집 단계의 오차 발생에 대한 관리 필요 • 대부분 관련 통계자료와의 비교검증 없이 공표 • 정부승인통계의 불신과 국민혼란 초래 가능 • (2005. 9. 국가승인통계 현황조사 결과)

24. 모든 승인통계는 품질진단의 대상 자체진단: 매년 모든 승인통계 작성기관 스스로 진단, 단 정기 또는 수시 진단 연도 제외, 주기 1년 초과 통계는 작성 당해 년 또는 다음 년에 실시(제11조) 법적 근거 2007년 개정 통계법 정기진단: 5년마다 외부전문가 진단 (제9조) 수시진단: 자체진단을 안 하거나 품질 저하가 의심되는 통계 등은 수시로 외부전문가 진단 (제10조)

25. 우리나라의 통계제도 • 집중형 성격이 강한 분산형 • 각 기관의 통계수요에 따라 통계 생산 및 보급 • 중앙통계 기관인 통계청이 통계조정

26. 국가 통계제도 유형

27. 품질관리의 목적 • 정확한 통계 생산 • 사용적합성 확보 • 지속적 품질 개선 지원

28. 품질의 기준이 달라졌습니다. 과 거 현 재 • 오래 사용할 수 있고 질기고 튼튼한 측면, 즉 제품의 물리적 성질 • 이용자 요구사항을충족시키는 것 • 제품 생산부터 공급까지 품질에 대한 중요성을 전면적 강조

29. 통계품질의 기준도 달라졌습니다. 오늘날 “통계품질” 전통적 “통계품질” • 정확하고 신속한 통계 • 표준편차, 즉 평균제곱오차(MSE, Mean Square Error)로 품질측정 • 통계가 이용자들에게 얼마나 사용 하기 적합하도록 작성 및 제공되고 있는가, 즉 이용 적합성 (Fitness for Use) • 결국에는 오차의 최소화도 포함

30. 품질의 정의 • 사용적합성 (Fitness for use) • 다차원적 개념 (Multi-dimensional concept)

31. 품질 좋은 통계는 이용자에게 만족을 주는 통계 국가통계 품질향상 정확성 관련성 일관성 시의성 비교성 접근성 이용자의 만족목표 통계품질

32. 품질차원 비교

33. Ⅲ. 통계품질진단 방법

34. 통계청 통계위원회 대상통계 작성기관 품질진단팀 통계품질진단 추진조직 통계품질 향상

35. 1. 품질관리기반 3. 세부작성절차별 5. 통계자료 서비스 2. 이용자만족& 요구사항 반영실태 4. 수집자료 정확성 작성기관 개선과제 이행 정기진단 절차 5개 부문별 진단 1 종합 • 문제점 및 개선점 발굴, 개선과제 제시 • 최종보고서 작성 (통계별, 주제분야별), 통계작성기관에 환류

36. 1. 품질관리기반 진단 • 품질관리의 기반인 리더십, 인적자원 등 통계생산에 필요한 기본 인프라 진단 • 기본현황 • 통계작성 여건 (인적,물적) • 조직관리실태 및 통계작성담당자 인식 • 통계작성담당자와의 면담내용

37. 2. 이용자만족도 진단 • 이용자 및 이용자요구 파악 • 전문가그룹면접(Focus Group Interviews) : 정성적 분석 • 통계이용실태 및 만족도 조사 : 정량적 분석

38. Focus Group Interviews (FGI) • 정해진 주제에 대한 집단 상호작용을 통해 자료를 수집하는 연구방법 • 개인이 알고 있지만 아는 줄 몰랐던 지식을 자극해서 표출

39. 통계이용실태 및 만족도 조사 • 통계이용실태 • 통계이용자 만족도 • 전문이용자에 대한 질문 • 응답자 기본정보

40. 3. 세부작성절차별 진단 • 통계생산절차별 진단 “절차의 품질이 생산물의 품질을 좌우” • 품질지표(질문)를 이용한 품질차원 진단 • 통계작성담당자 내부진단  내부진단서 및 근거자료를 바탕으로 2명의 전문가가 외부진단

41. (3) 조사표 설계 (1) 통계작성 기획 및 관리 (4) 현장조사관리 (2) 모집단 및 표본 설계 (7) 사후관리 (6) 자료이용 (5) 자료처리 및 집계 절차 진단 (조사통계)

42. 통계종류별 절차진단 비교 • 조사통계 • 통계작성기획 및 관리 • 모집단 및 표본 설계 • 조사표설계 • 현장조사 관리 • 자료처리 및 집계 • 자료이용 • 사후관리단계 • 품질개선 의견서 • 보고통계 • 통계작성기획 및 관리 • 자료수집 대상설정 및 • 양식설계 • 보고체계 관리 • 자료처리 및 집계 • 자료이용 • 사후관리단계 • 품질개선 의견서 • 가공통계 • 통계작성기획단계 • 통계작성과정 설계 • 투입자료 수집입력편집 • 투입자료 조정,가공, • 통계작성 • 결과공표 및 자료이용 • 사후관리단계 • 품질개선 의견서

43. 4. 수집자료의 정확성 • 조사나 보고 등 자료가 수집되는 과정에서의 오류(오류가능성) 점검 • 전화 또는 현장방문 재조사 (조사통계) • 현지 담당자 면담 (보고통계) • 투입자료 선정과정과 절차상 문제점 (가공통계)

44. 5. 통계자료서비스 진단 • 발간물의 충실성 점검 • 발간물 오류 점검 • 수치자료, 표 형식 및 내용, 용어해설, 단위, 주석, 출처 및 도표(그림), 표기방법 등 • 이용자편의사항 점검 • 이용자를 위하여, 조사정보, 모집단 및 표본설계, 자료집계 및 추정 등

45. Ⅳ. 통계작성가이드라인

46. 통계작성기획 ◈ 통계조사에 의해서 작성할 것인지, 행정체계에 의해서 작성할 것인지 결정 ☞ 자료수집 계획을 수립 ◈ 기획 시, 얻고자 하는 정보의 내용, 정보를 어디서 또는 누구로 부터 얻을 수 있는지 등을 검토 ◆ 통계작성기획: 조사 필요성, 조사대상, 조사주기 등 ◆ 조사목적 설정 ◆ 이용자 요구사항 파악

47. 조사(통계작성)계획에 포함해야 할 사항 • 조사 필요성, 조사목적 및 대상, 분석하고자 하는 내용 등 • •통계조사(작성)기준시점, 통계작성 및 공표 주기 • •조사항목, 조사방법 등이 실제 현장에서 적용 가능한지 • ⇒ 시험조사(pretest, pilot survey: 사전조사)계획 수립 • •조사된 자료를 통계표로 작성 분석 계획 수립 • •표본크기, 조사비용 등을 감안한 조사원 및 입력요원의 • 채용 계획 수립 • •개인식별 가능 자료는 개인정보 보호 계획 수립 • •조사된 자료의 보존 및 폐기를 위한 자료 관리 계획 수립 • •조사의 법적 근거(법률, 규정 및 지침 등)을 조사표에 명확히 제시 • ※ 통계의 중복성 검토 ⇒ 작성승인, 변경승인

48. << 통계작성 승인 >>

49. << 통계변경 승인 >>

50. 조사목적 • □ 명확하고 실현 가능하도록 설정 • □ 통계의 필요성 또는 이용은 어디서(정부기관 또는 민간기관 등), • 어떠한 정책에 어떻게 이용하는지 구체적으로 명시 • 통계작성 주기는 통계작성 목적, 예산, 통계 이용자의 • 요구 등을 반영하여 월, 분기, 연간, 2년, 3년, 5년 등 • 일정하게