• 제목/요약/키워드: 평가도구검증

검색결과 622건 처리시간 0.036초

웹사이트 접근성 자동화 평가 도구의 개선 방안에 관한 연구

  • 홍순구;이대형
    • 한국정보시스템학회:학술대회논문집
    • /
    • 한국정보시스템학회 2005년도 추계학술대회 발표 논문집
    • /
    • pp.97-109
    • /
    • 2005
  • 노인 인구의 급격한 증가와 인터넷을 통한 정보획득의 보편화로 인하여 웹 접근성의 중요성이 부각되고 있다. 웹 접근성이란 "경제적, 지역적, 신체적, 사회적 한계로 인해 정보서비스를 받기 어려운 자들에 대한 정보 통신망의 자유로운 접근과 이용" 을 의미한다 정부기관이 선도하여 웹사이트를 통해 보다 편리하고 좋은 서비스를 국민에게 제공하려는 전세계적인 노력에도 불구하고 장애인이나 노인들에게는 아직도 웹사이트의 접근이 용이하지 못한 실정이다. 이는 웹 접근성의 문제를 발생시키는 근본 원인 중 하나인 웹 접근성(Web Accessibility)에 대한 개념 이해 및 현재 사용되는 웹사이트의 접근성 만족 유무를 정확하게 평가할 수 있는 평가 방법의 부재에 기인한다. 현재까지 웹 접근성 평가는 표준 평가항목인 W3C의 웹 접근성 지침(Web Contents Accessibility Guideline 1.0, 이하 WCAG 1.0)을 기반으로 만들어진 자동화 평가도구를 이용하여 대부분 이루어져 왔다. 자동차 평가도구를 이용한 웹 접근성 평가 방법은 평가가 용이하고 평가결과의 정량화로 인해 연구의 객관성을 높일 수 있다는 장점이 있다. 그러나 선행연구와 실험을 통해 자동화 평가도구의 문제점이 지적되고 있다. 예를 들어 전문가가 직접 스크린 리더를 통해 계산한 접근성 오류와 자동화 도구가 계산한 접근성 오류와는 많은 차이를 보이고 있다. 기존 연구에서는 자동화 평가도구의 문제점을 보완하기 위해 전문가가 직접 평가하는 매뉴얼 평가방식과의 병행을 제시하고 있으나, 근본적인 문제점을 해결하고 이를 개선할 수 있는 연구가 필요하다. 따라서 본 연구에서는 "한국형 웹 콘텐츠 접근성 지침(TTAS.0T-10.0003)"을 기본으로 하여 "EuroAccessibilty Consortium" 에서 고려하고 있는 "testable statement" 으로 통합 보안한 접근성 체크항목의 재구성과 함께 "자연어 처리" 알고리즘을 적용하여 자동화 평가도구의 개선 방안을 제시한다. 아직까지 제시된 개선방안의 적용 및 검증이 이루어지지 않아 한계점을 가지고 있으나 자동화 평가도구의 개선방안에 대한 제안은 향후 연구의 기초자료로 활용 가능할 것이며 많은 후속연구를 유발할 것으로 기대한다.

  • PDF

독서치료 효과 측정을 위한 질적 심리평가도구 개발에 관한 연구 (The Development of a Qualitative Psychological Assessment of Bibliotherapy and the Examination of it Efficacy)

  • 임성관
    • 한국도서관정보학회지
    • /
    • 제45권3호
    • /
    • pp.141-168
    • /
    • 2014
  • 공공도서관과 대학도서관을 비롯한 우리나라 문헌정보학계에서는 독서치료에 대한 관심이 증가하고 있고 다양한 독서치료 방법도 적용되고 있다. 하지만 그동안 독서치료 영역에서는 단순하고 획일적인 질문을 사용하여 내담자를 이해하고 진단하는 방법이 주로 사용되어 왔다. 그러므로 독서치료에 적합한 심리평가도구에 대한 개발이 필요한 상황이다. 왜냐하면 독서치료에서 심리평가도구는 프로그램에 대한 효과 검증에 앞서 독서치료사가 치료 대상자를 이해할 수 있는 기본적인 정보원으로서의 역할을 한다. 또한 자료 선정 및 관련 활동을 설계하는 기초가 되는 중요한 도구가 된다. 이에 본 연구에서는 독서치료 효과 측정을 위한 질적 심리평가도구로 활용할 수 있는 면담과 행동평가, 종합평가 보고서 양식을 개발하고, 실제 독서치료 프로그램 장면에 적용한 사례들을 제시하였다.

디지털 포렌식을 위한 증거 분석 도구의 신뢰성 검증 (Reliability Verification of Evidence Analysis Tools for Digital Forensics)

  • 이태림;신상욱
    • 정보보호학회논문지
    • /
    • 제21권3호
    • /
    • pp.165-176
    • /
    • 2011
  • 본 논문에서는 TTAK.KO-12.0112 문서에 따른 컴퓨터 포렌식을 위한 디지털 증거 분석도구의 일반적인 검증 절차를 살펴보고, 제시된 검증 항목들을 이용하여 실제 증거분석 도구를 대상으로 기능 요구사항들을 테스트한다. 또한 테스트 내용을 바탕으로 대상 도구들에 대한 성능 평가를 수행하며 각 도구들의 증거 분석 기능에 대하여 향후 성능 개선 방향을 제시한다. 이는 테스트 대상 도구가 수행 가능한 기능들을 파악하고, 요구사항 문서에서 제안된 검증 절차들을 활용하여 각 기능 별로 구체적인 모의 테스트를 설계한 후, 검증 항목의 내용을 포함시킨 가상의 증거 이미지 파일들을 생성하여 도구가 분석한 결과를 검증하고 해석한다. 이 과정을 통해 대부분의 도구들에서 단편화된 삭제 파일에 대한 복구, 국내에서 널리 사용되고 있는 파일 포맷 인식, 한글 문자열 처리 기능 등에 취약점이 존재함을 확인할 수 있다.

청소년 비행행동 측정도구 개발 (DEVELOPMENT OF SCALE FOR MEASURING DELINQUENT BEHAVIOR)

  • 김현실;김헌수
    • Journal of the Korean Academy of Child and Adolescent Psychiatry
    • /
    • 제11권1호
    • /
    • pp.79-90
    • /
    • 2000
  • 연구 목적:본 연구는 요인분석을 통하여 한국 청소년의 비행행동 유형을 분류하고, 청소년 비행행동을 조기에 평가하기 위한 측정도구 개발을 위한 연구이다. 방 법:서울 및 지방의 소아·청소년 정신과 외래 방문청소년 4명, 소년원, 분류심사원의 재소청소년 4명과, 중 ${\cdot}$ 고교에 재학중인 학생청소년 4명, 총 12명을 대상으로 실시한 개인면담 내용과 관련문헌 고찰을 근거로 총 31개 문항으로 구성된 예비도구를 작성하였다. 다음 단계로 본 예비도구에 대한 신뢰도와 타당도를 검증하였는데 도구의 타당도 검증은 전문가집단에 의한 내용타당도와 요인분석을 통한 구성타당도를 검증하였으며, 신뢰도 검증은 검사-재검사 신뢰도, 내적 일관성 정도 및 각 문항과 요인과의 상관계수를 조사하였다. 이상의 검증과정을 통하여 31개 문항이 모두 청소년 비행행동 평가를 위한 최종 도구로 확정되었다. 마지막으로 실제 상황에서의 최종도구의 변별력 정도를 확인하기 위하여 학생청소년군과 비행청소년군총 2,177명을 대상으로 본 도구를 이용한 설문조사를 실시한 후 t 검정을 하였다. 결 과:1) 최종확정된 도구는 총 31개 문항 3개 요인으로 구성되어 있으며 이들 요인들의 총설명변량은 52.2%였다. 또한 31개 문항들은 모두 각 요인에 .40이상의 유의한 적재량을 보였다. 2) 3개요인 중 요인 I 은 반사회적 비행행동으로 명명하였고 총 17개문항으로 구성되어 있으며, 요인 II는 공격적 비행행동으로 총 8개문항, 그리고 요인 III은 정신병질적 비행행동으로 총 6개 문항으로 구성되어 있다. 3) 본 도구의 총 31개 문항의 신뢰도는 Cronbach Coefficient Alpha값이 .952였으며, 각 요인별 신뢰도 는 요인 Ⅰ이 .950, 요인 II가 .866, 그리고 요인 III이 .721이었다. 4) 본 도구의 변별력을 확인하기 위하여 학생청소년군과 비행청소년군을 대상으로 실시한 요인별 차이검정 결과 요인 Ⅰ, 요인 II, 요인 III 및 전체 문항 모두에서 학생청소년군과 비행청소년군간에 유의한 차이가 있었다. 결 론:1) 본 연구를 통해 개발된 도구를 다른 대상자에게 반복 적용하여 연구함으로써 계속적인 신뢰도와 타당도 검증이 필요하다. 2) 이상적인 도구평가기준은 신뢰도와 타당도 뿐만 아니라 단순성, 효율성, 객관성 등까지도 고려되어져야 한다는 관점에서 볼 때, 본 도구는 지속적인 수정 보완 작업이 필요하며 이 과정을 통하여 보다 완전한 도구가 될 수 있으리라 추론된다. 3) 본 도구를 적용하여 한국청소년의 비행행동 유형이 어떤 것인지를 파악하고 이와 관련된 치료적 접근, 비행가능 청소년에 대한 사전 평가 척도까지도 연구 개발할 수 있다고 본다.

  • PDF

학교기능평가(School Function Assessment)도구의 구성타당도 검증을 위한 라쉬분석의 적용 (Applying Rasch Analysis for Validation of School Function Assessment)

  • 박경영
    • 한국콘텐츠학회논문지
    • /
    • 제14권3호
    • /
    • pp.269-276
    • /
    • 2014
  • 본 연구에서는 라쉬분석을 통하여 한글판 학교기능평가(School Function Assessment)도구의 구성타당도, 척도 적합성을 검증함으로써 이 평가도구의 국내 사용을 위한 기초자료를 제시하고자 한다. 서울 및 경기, 충청 지역의 만 7세~12세(초등학교 1학년~6학년)인 98명 장애아동을 대상으로 아동의 보호자 및 담임 특수교사 또는 작업치료사와 직접 면담 또는 전화를 통하여 자료를 수집하였다. 자료분석은 라쉬분석을 통하여 단일차원모형(unidimensionality)에 대한 적합통계치(fit statistics)를 제시하였다. 또한, 라쉬분석의 평정척도모형(rating scale model)을 이용하여 평정척도의 적합성 분석을 실시하였다. 라쉬분석 결과 각 25개 하위척도 내 총 328개 항목 중 단일모형 적합통계치가 부적합한 항목은 Part II 과제지원 영역에서 총 4개였고, Part III 신체적 과제 영역에서 부적합 항목은 18개, 인지/행동적 과제 영역에서 부적합 항목은 14개 항목으로 나타났다. 한글판 학교기능평가 도구의 모든 평가 하위영역의 5점 평정척도는 적합한 것으로 나타났다 본 연구를 통하여 한글판 학교기능평가 도구의 구성타당도와 평정척도 적합성을 확인하였다. 그 결과 5점 평정척도는 적합한 것으로 나타났으나, 일부 부적합 항목이 발견되어 앞으로 국내 타당도 확립과 준거제시를 위한 연구가 추후 이루어져야 할 것으로 판단된다.

7차 교육과정에 따른 '정보사회와 컴퓨터' 교과의 평가도구 개발 (Development of Assessment Model for the 'Information Society and Computer' subject of the 7th National Curriculum)

  • 이승현;곽은영;김현철
    • 컴퓨터교육학회논문지
    • /
    • 제7권1호
    • /
    • pp.15-25
    • /
    • 2004
  • 본 논문에서는 제7차 교육과정에 따른 고등학교 '정보사회와 컴퓨터' 교과의 평가도구를 제시한다. 제시된 평가도구는 제7차 교육과정의 목표와 '정보사회와 컴퓨터' 교과의 특성을 모두 반영할 수 있도록 개발하였고 현장 교사들이 구체적으로 활용할 수 있도록 하였으며, 궁극적으로 교육과정의 질을 향상시키도록 하였다. 이를 위하여 먼저 분석된 교과내용을 영역별로 분류하고 성취기준과 평가영역, 평가기준을 개발하였다. 또한 개발된 평가 모델 기반의 예시 평가도구를 제시함으로써 학교현장에서 교육목표가 구현된 평가 활동이 이루어지게 하였다. 현장 전문가의 타당성 검증을 통하여 제시된 평가 도구의 현장 활용도를 높이고자 하였다.

  • PDF

PBL/S-PBL 패키지 평가도구 개발 및 평가 : 보건계열(학)과와 간호(학)과를 중심으로 (Development and Evaluation Frameworks for PBL/S-PBL Packages: in the case of the Dept. in Allied Health Professionals and Nursing)

  • 양정화;김수진;김효실;임진형;채수경
    • 대한방사선기술학회지:방사선기술과학
    • /
    • 제33권3호
    • /
    • pp.203-211
    • /
    • 2010
  • 본 연구의 목적은 PBL/S-PBL에 사용되는 패키지(교재)를 측정할 수 있는 타당하고 신뢰할 수 있는 평가도구를 개발하는 것이다. 이러한 목적을 실현하기 위해 문헌 고찰을 통하여 PBL 및 S-PBL 패키지를 측정하는 도구의 3항목 15문항의 예비문항들을 만들었다. 예비문항을 대학의 교수 9인의 전문가를 통해 내용타당도를 검증하여 PBL은 14문항, S-PBL은 15문항으로 구성하였다. 개발된 평가도구의 구성 타당도 검증을 위하여 요인분석을 하였다. PBL은 동기부여 3항목, 통합성 7항목, 체계성 4항목, 총 14항목으로, S-PBL은 동기부여 4항목, 통합성 6항목, 체계성 5항목, 총 15항목으로 이루어진 평가도구가 제시되었으며 Cronbach's $\alpha$계수가 PBL은 0.9112, S-PBL은 0.9166으로 적절한 신뢰도를 갖는 평가도구로 검증되었다.

아동용 참여평가도구 한글판 Life Habits Assessment(LIFE-H 1.0)의 타당도 연구 (A Study on Validity of the Korean Version of the Assessment of Life Habits (LIFE-H 1.0) in Children)

  • 우예신;이예진;김연주;강재원;박혜연
    • 재활치료과학
    • /
    • 제6권2호
    • /
    • pp.59-70
    • /
    • 2017
  • 목적: 아동 발달의 핵심적인 요소인 참여를 평가하고 참여의 특징을 이해하는 것은 아동의 치료목표를 설정하고 참여를 강화시키는데 중요하다. 따라서 본 연구에서는 아동용 참여평가도구 한글판 LIFE-H 1.0의 타당도를 검증하여 국내 작업치료사들이 아동의 참여를 체계적으로 평가할 수 있도록 하고자 한다. 연구방법: 본 연구는 장애 및 비장애 아동 총 47명을 대상으로 2016년 2월부터 4월까지 약 2개월간 진행되었다. 아동의 부모를 대상으로 0-4세와 5-13세 아동에 따라 문항이 다른 한글판 Life Habits Assessment(LIFE-H 1.0)를 자가 보고식 설문으로 진행하였다. 수집된 자료는 SPSS(Statistical Package for Social Science) 통계분석 프로그램을 이용하여 판별타당도를 검증하였다. 결과: 일반적 특성에 관한 동질성 검증에서는 두 집단 간 차이를 보이지 않았으며, 0-4세 및 5-13세로 나누어 장애 유무에 따른 두 집단 간 점수를 비교한 결과, LIFE-H 1.0 수행도 및 만족도의 총점에서 유의미한 차이(P<.05)가 발생하여 높은 판별타당도가 검증되었다. 결론: 한글판 LIFE-H 1.0은 장애 유무에 따른 참여의 차이를 분명하게 판별할 수 있는 참여평가도구다. 아동작업치료의 궁극적 목표는 신체 기능이나 능력 향상을 넘어 일상생활 및 사회에의 참여를 증진시키는 것이다. 따라서 작업치료사는 아동의 참여 수준을 정확히 평가하고 치료목표를 설정하여야 한다. 본 연구를 통해 높은 수준의 타당도가 검증된 만큼 작업치료 임상 현장과 연구에서 한글판 LIFE-H 1.0 평가도구가 널리 활용되기를 기대한다.

일반화가능도 이론을 활용한 유아정서지능 평가도구의 오차요인 분석 (An Analysis of Error Sources and Reliability Estimation in Emotional Intelligence Assessment of Young Children Using Generalizability Theory)

  • 김경철;최연철
    • 한국산학기술학회논문지
    • /
    • 제18권1호
    • /
    • pp.565-571
    • /
    • 2017
  • 본 연구는 유아정서지능검사 도구의 신뢰도와 오차 분석을 통해 유아의 정서지능을 평가하는 도구의 적절성을 검증하고 유아 대상의 검사도구를 활용할 때 고려해야 할 도구 관련 정보를 제공하려는 데 목적이 있다. 본 연구의 연구대상은 만5세 14학급 198명의 담임교사 14명과 어머니가 유아의 정서지능을 평가한 자료이다. 이병래[14]의 유아정서지능검사를 사용하여 유아의 정서지능을 측정한 후 그 결과를 활용하여 평가자, 평가문항, 평가대상 유아, 검사도구 그리고 각 요인간의 상호작용에 대한 분산분석을 실시하였다. 또한 각 요인의 분산추정치에 대한 분석을 수행하였다. 본 연구 결과에 따르면 유아의 정서지능 개인차가 평가결과에 반영되었음을 보여준다. 하위요인중 '자기인식능력', '자기조절능력' '타인조절능력' 등은 단일국면을 측정하고 있는 것으로 볼 수 있다. 또한 유아 정서지능을 평가할 때 교사뿐 아니라 부모도 평가자로 활용할 수 있다는 시사점을 얻을 수 있다. 다만 일부 하위 요인의 경우에는 오차변인의 비율이 크게 나와 이를 줄일 수 있는 방안을 모색해야할 필요가 있다. 본 연구는 유아의 정서지능을 평가할 때 사용하는 도구의 문제점을 파악하여 앞으로 정서지능 평가도구의 제작 및 활용시 적용할 수 있는 정보를 제공한다는 점에서 커다란 의의가 있을 것이다.

열차제어 소프트웨어 안전성 평가도구의 설계 (Design of Train Control Software Safety Evaluation Tool)

  • 황종규;조현정;김형신
    • 한국철도학회논문집
    • /
    • 제11권2호
    • /
    • pp.139-144
    • /
    • 2008
  • 최근 임베디드 시스템 기술의 발전에 따라 열차제어시스템의 자동화가 촉진되고 있다. 이를 위한 하드웨어의 안전성 검증을 위한 연구는 활발히 진행되고 있으나, 소프트웨어의 안전성을 검증하기 위한 체계적인 노력은 거의 이루어지지 않고 있다. 이 논문에서는 열차제어 시스템 소프트웨어의 안전성을 자동으로 평가 할 수 있는 소프트웨어 도구를 제안한다. 이를 위하여 관련 국제표준을 분석하였으며, 기존의 사용 소프트웨어 테스팅 도구들을 조사하였다. 이로부터 국제표준에서 요구하는 주요 요건을 테스팅 할 수 있는 도구를 제안하였으며, 이 도구는 소프트웨어 전 개발주기에서 이용이 가능하다. 이 도구는 기존의 테스팅 도구들과는 달리 소프트웨어의 안전성을 검증할 수 있다는 점에서 그 의의가 크다.