마인드 맵 갤러리 테스트 타당성, 테스트 항목 분석
테스트 타당성, 테스트 항목 분석, 타당도는 테스트 또는 척도가 측정하려는 심리적 특성을 실제로 측정할 수 있는 정도를 나타냅니다. 간단히 말하면 테스트의 정확성/타당성입니다.
2024-11-27 12:35:35에 편집됨Dive into the world of the Chinese animated film Nezha 2: The Devil's Birth! This knowledge map, created with EdrawMind, provides a detailed analysis of main characters, symbolic elements, and their cultural significance, offering deep insights into the film's storytelling and design.
This is a mindmap about Nezha 2, exploring its political metaphors and cultural references. The diagram highlights the symbolism behind the Dragon Clan’s suppression, drawing parallels to modern geopolitical conflicts and propaganda manipulation. It also details Chinese historical and cultural elements embedded in the film, such as the Jade Void Palace, Ao Bing’s armor, Taiyi Zhenren’s magic weapon, and Nezha’s hairstyle.
This is a mindmap about the main characters of Nezha 2, detailing their backgrounds, conflicts, and symbolic meanings. It explores the personal struggles and transformations of Nezha, Ao Bing, Shen Gongbao, and Li Jing as they navigate themes of rebellion, duty, ambition, and sacrifice.
Dive into the world of the Chinese animated film Nezha 2: The Devil's Birth! This knowledge map, created with EdrawMind, provides a detailed analysis of main characters, symbolic elements, and their cultural significance, offering deep insights into the film's storytelling and design.
This is a mindmap about Nezha 2, exploring its political metaphors and cultural references. The diagram highlights the symbolism behind the Dragon Clan’s suppression, drawing parallels to modern geopolitical conflicts and propaganda manipulation. It also details Chinese historical and cultural elements embedded in the film, such as the Jade Void Palace, Ao Bing’s armor, Taiyi Zhenren’s magic weapon, and Nezha’s hairstyle.
This is a mindmap about the main characters of Nezha 2, detailing their backgrounds, conflicts, and symbolic meanings. It explores the personal struggles and transformations of Nezha, Ao Bing, Shen Gongbao, and Li Jing as they navigate themes of rebellion, duty, ambition, and sacrifice.
측정타당도, 검사항목분석
타당성 테스트
유효성 개요
타당성의 정의
이는 테스트 또는 척도가 측정하려는 심리적 특성을 실제로 측정할 수 있는 정도를 나타냅니다. 간단히 말하면 테스트의 정확성/타당성입니다. 테스트 이론에서 타당도는 측정 목적과 관련된 분산(또는 유효 분산)과 측정 세트의 총 분산 비율로 정의됩니다. 즉, r2xy=S2V/S2X입니다.
신뢰성과 타당도의 관계
1. 높은 신뢰도는 높은 타당도를 위한 필요조건이지만 충분조건은 아닙니다. 2. 유효성은 신뢰성에 따라 달라질 수 있습니다.
타당성 평가
내용 타당성
내용 타당성 의미
테스트를 통해 실제로 측정한 내용과 측정하려는 내용이 일치하는 정도, 즉 테스트가 측정하려는 행동 영역의 대표 표본인지 여부를 말한다. 측정할 내용이나 행동 영역은 측정 목적에 따라 결정되며, 일반적으로 측정할 지식의 범위와 범위 내 각 지식 포인트에 필요한 숙달 정도가 포함됩니다.
콘텐츠 타당성을 평가하는 방법
논리적 분석/전문가 판단
시험문제가 명시된 내용을 나타내는지 여부를 확인하기 위해 시험문제가 원본 내용과 일치하는지 여부를 관련 전문가에게 판단하도록 요청합니다. 따라서 내용 타당성은 때때로 논리적 타당성이라고도 불립니다.
통계 분석
1. 두 평가자 간의 평가 일관성, 즉 평가자의 신뢰도를 계산합니다. 2. Cronbach는 동일한 내용 범위에서 독립적으로 수행된 두 가지 복제 테스트에서 피험자 그룹의 점수 상관 관계, 즉 복제 신뢰성을 통해 내용 타당성을 추정할 수 있다고 제안했습니다. (잘못된 상관 관계를 조심하세요!) 3. 시험-재시험 신뢰도/시험-재시험 방법(학습 전후 시험): 특정 지식을 학습하기 전과 후에 시험을 치르며 비교한다.
경험적 추측
즉, 연습을 통해 타당성을 테스트하는 것입니다. 과목별로는 시험 점수와 각 질문에 대한 응답에 큰 차이가 있습니다. 일반적으로 각 질문의 총점과 합격률은 학년과 연령에 따라 증가합니다. (성장 및 발달 변화의 증거) 예를 들어 아동발달척도의 타당성 여부를 다양한 연령대의 아동을 조사 분석한 결과 연령에 따라 합격률이 높아지는 경우 해당 시험에 내용 타당성이 있다고 유추할 수 있다.
콘텐츠 유효성의 장점과 단점
장점: 시험 내용에 대한 자세한 설명은 모든 시험 준비에 참고가 됩니다.
단점: 신뢰성 있는 정량적 지표가 부족하고, 검사 간 비교가 불편함
타당성을 구성하다
의미
구성타당도, 구성타당성이라고도 알려져 있으며, 테스트가 측정하려는 이론적 구조와 특성을 실제로 측정하는 정도 또는 테스트 결과가 특정 이론의 가정, 용어 또는 구성을 확인하거나 설명할 수 있는지 여부를 나타냅니다.
기본 특성
①구인타당도의 크기는 사전에 가정된 심리구조이론에 따라 달라진다. 서로 다른 이론적 구성을 사용한 테스트의 구성 타당성은 비교할 수 없습니다. ②구성타당도를 얻기 어려운 경우가 있다. 확인할 수 없는 경우 이론에 문제가 있거나 실험 설계가 가설을 제대로 테스트할 수 없는 경우일 수 있습니다. ③ 구성타당도에 대한 단일한 정량적 지표는 없으며, 모든 측면에서 축적된 증거를 바탕으로 평가한다. ④ 일부 검사의 측정된 내용이나 행동범위에 대한 정의나 설명은 이론적 구성의 설명과 유사하므로 내용타당도가 높다는 것은 본질적으로 구조타당도가 높다는 것을 의미한다.
구성 타당성을 결정하는 방법
1. 테스트 내 증거 검색 2. 테스트 간 증거 검색 3. 시험의 실증적 타당성 방법 4. 다중 특성 - 다중 방법 매트릭스 방법 5. 실험적 운용방법
내부 테스트 증거
1. 내용 타당성 2. 질문에 대한 피험자의 응답 특성 3. 균질성 신뢰성
테스트 간 증거 찾기
호환 타당도: 새로 컴파일된 테스트와 타당도가 높고 동일한 특성을 효과적으로 측정할 수 있는 기존 테스트 간의 상관 관계를 조사합니다.
판별 타당성(Discriminant Validity): 이종 타당성(Heterogeneous Validity)이라고도 하며, 두 검사가 서로 다른 특성을 측정하는 경우 동일한 방법으로 측정하더라도 두 검사 간의 상관 관계가 매우 낮아야 합니다.
수렴타당도(Convergent Validity) : 동일타당도, 수렴타당성이라고도 하며, 두 검사가 동일한 특성을 측정하는 경우에는 서로 다른 측정방법을 사용하더라도 두 검사 사이의 상관관계가 높아야 합니다.
요인 분석 방법: 테스트 그룹에 대한 요인 분석을 수행하여 테스트에 영향을 미치는 공통 요인을 찾아냅니다. 공통 요인에 대한 각 테스트의 로딩(즉, 테스트와 각 요인 간의 상관 관계)이 요인입니다. 테스트의 타당성은 우리가 측정하려는 심리적 특성/구조일 수 있습니다. 관련 요인으로 인한 시험 점수의 전체 변동 비율은 시험의 구성 타당성을 나타내는 지표입니다.
시험의 실증적 타당성 방법
테스트를 통해 예측된 기준의 성격과 유형은 테스트 분석을 위한 구조적 타당성 지표로 사용됩니다.
다중 특성-다중 방법 매트릭스 방법(MTMM)
두 가지 이상의 심리적 특성을 동시에 측정하며, 각 심리적 특성은 두 가지 이상의 방법을 사용하여 측정됩니다. 여러 특성(예: A, B, C)이 여러 방법(예: 1, 2, 3, 4)으로 측정된다고 가정합니다.
실험적인 작동 방법
불안과 같은 특정 조건에 민감한 테스트에 적합합니다. 측정할 특성에 대한 이론적 개념을 바탕으로 특정 상황이나 특정 치료 후에 피험자의 점수가 바뀔 것이라고 예측할 수 있습니다.
구성타당도의 장점과 단점
장점: 연구자가 가설을 제안하고 검증하는 테스트 목적에 집중할 수 있게 하며, 단순히 보조적인 의사결정 기능이 아닌 이론적 연구 도구로서의 역할에 주목하여 테스트에 대한 보다 폭넓은 개발 전망을 제공합니다.
단점: 일부 구성의 개념은 모호하고 일관된 정의가 없습니다. 타당성을 판단하기 위한 운영 단계와 고유하고 객관적인 지표를 명확히 하는 것은 불가능합니다. (조작 난이도)
경험적 타당성
의미
준거 관련 타당성(준거 타당성이라고도 함)이라고도 하며 특정 상황에서 개인의 행동을 추정하는 테스트의 타당성, 즉 실제 효과를 테스트 표준으로 사용하는 테스트의 타당성을 말합니다. 타당성 기준: 추정되는 행동은 테스트의 타당성을 테스트하기 위한 표준입니다.
효능기준
의미
테스트가 유효한지 여부를 측정하는 외부 표준으로 테스트와 독립적이며 테스트의 행동 특성에서 직접 얻을 수 있습니다.
특징
다양성, 특이성, 시간성
좋은 효능 표준
타당성; 객관성/반오염성;
교정 표준물질 오염 방지
(1) 평가자는 종합적인 평가를 실시해야 하며, 평가 내용이나 규칙을 최대한 객관적이 되도록 개선해야 한다. (2) 평가 시 주관적인 경향이 발생하지 않도록 평가자에게 이전 시험 결과를 알려주지 않도록 노력한다.
경험적 타당성을 결정하는 방법
관련 법률: 시험 점수와 타당성 기준 측정값 간의 상관 계수를 계산합니다. 이 상관 계수를 타당성 계수라고 합니다. 테스트 점수와 기준 측정값은 일반적으로 연속 변수이기 때문에 가장 일반적으로 사용되는 제품 차이 상관 방법입니다.
구별방법; 차별은 시험 점수가 기준에 의해 정의된 그룹을 효과적으로 구별할 수 있는지 여부를 테스트하는 방법입니다. 구체적인 방법은 대상자를 상위그룹과 하위그룹으로 나누어 두 그룹 간의 시험성적 차이가 유의미한지 분석하는 것이다.
적중률 방법: 적중률법이란 테스트를 선택의 기준으로 삼을 때 올바른 결정을 내린 비율을 타당성 지표로 활용하는 방법이다. ①적중률 테스트를 통해 선발된 사람 중 실제로 올바르게 선발된 사람의 비율을 말합니다. ②네거티브 적중률 실제로 탈락했어야 했던 사람 수 대비, 테스트를 통해 탈락한 사람의 비율을 말합니다. ③총 적중률 전체 인원에서 테스트를 통과한 인원과 탈락된 인원을 합한 비율을 말합니다.
타당성을 향상시키는 방법
1. 시험의 구성 2. 테스트 실행에 방해가 되는 요소 3. 표본집단의 성격 4. 기준의 성격 5. 측정의 신뢰성
시험항목 분석
시험항목의 난이도
의미: 피험자가 테스트 프로젝트 작업을 완료할 때 직면하는 어려움의 정도를 나타내며 일반적으로 P로 표시됩니다.
프로젝트 난이도 계산
이분법적 채점
합격률
극단적인 그룹화
비이분법적 채점
시험 난이도 결정
문항 난이도 분석을 수행하는 주요 목적은 문항을 선별하는 것입니다. 문항 난이도의 적절한 수준은 시험의 목적과 성격에 따라 다릅니다.
난이도의 등각 변환
시험 난이도의 영향
1. 시험 점수 분포 패턴: 일반적으로 난이도가 중간인 시험의 점수 분포는 일반적으로 너무 어렵거나 너무 쉬우면 점수 분포가 왜곡됩니다.
2. 시험 점수의 분산 정도: 시험 난이도가 0.5 부근일 때 점수 분포의 분산 정도가 가장 크고, 난이도가 너무 높거나 너무 작으면 점수 분포의 분산 정도가 작아집니다. .
3. 시험난이도가 시험신뢰도에 영향을 미친다: 시험난이도가 0.5 부근일 때 점수의 분포범위가 가장 넓고 상관계수에 따른 신뢰도가 상대적으로 높아진다.
4. 시험항목의 차별
시험항목의 차별
의미: 차별이라고도 하며, 일반적으로 D로 표시되는 피험자의 심리적 품질 수준 차이를 구별하거나 식별하는 테스트 항목의 능력을 나타냅니다.
프로젝트 차별화의 중요성
D 값은 -1~+1 사이입니다. D 값은 양수이며 양수 차별이라고 합니다. +1은 해당 항목이 피험자의 심리적 특성을 완전히 구별할 수 있음을 나타냅니다. D 값이 0이면 구별이 없다고 하며, 이는 해당 항목이 피험자의 심리적 특성 수준과 아무런 관련이 없음을 나타냅니다. D 값은 음수이므로 음의 구별이라고 합니다. -1은 항목이 대상의 심리적 수준과 반대임을 나타냅니다.
프로젝트 차별화 계산
품목 식별 지수 방법
차별 지수 계산: D=PH-PL D: 프로젝트 식별 지수 PH: 높은 단체 합격률 PL: 낮은 단체 합격률
극단집단의 구분
분산 방법
관련법률
1. 점대2 열 상관관계: 적용 범위: 항목은 0 또는 1(또는 이분형 변수)로 점수가 매겨지며, 기준 점수 또는 총 시험 점수는 연속형 변수입니다.
2. 이중 열 상관관계: 적용 범위: 둘 다 연속형 변수이지만 변수 중 하나를 인위적으로 두 가지 범주로 나눕니다. 항목 점수는 연속적인 반면, 기준 점수 또는 총 시험 점수는 높음, 낮음, 합격 또는 불합격의 두 가지 범주로 나뉩니다. 기준 점수 또는 총 시험 점수는 연속적인 반면, 항목 점수는 참, 거짓, 합격 또는 불합격의 두 가지 범주로 나뉩니다.
3.Φ 상관관계: 적용 범위: 두 변수 모두 이분형 변수입니다. 4각형 표: 표준 점수 또는 총 시험 점수의 높고 낮은 그룹, 프로젝트 점수의 통과 및 실패.
4. 제품-차이 상관관계: 적용 범위: 두 변수 모두 연속형 변수입니다. 총점을 활용하면 문항점수가 높을수록 차별성이 커진다.
차이 테스트 방법
총점이 높은 피험자와 총점이 낮은 피험자 사이에 각 항목의 점수에 유의미한 차이가 있는지 검정해 보면, 차이가 크다면 문항 변별력이 좋은 것으로 판단됩니다.
차별과 어려움의 관계
특정 항목의 합격률이 1 또는 0이면 상위 또는 하위 그룹이 모두 합격했거나 아무도 합격하지 않았음을 의미하므로 이때 D=0입니다. 특정 프로젝트의 합격률이 0.50이라면 상위그룹은 모두 합격했지만, 하위그룹은 한 명도 합격하지 못했을 가능성이 있으므로 이때 D=1이다. 난이도가 1 또는 0이면 항목의 잠재적 변별력은 더 작고 0에 가까우며, 난이도가 0.50이면 항목의 잠재적 변별력은 더 크고 1에 가까워집니다.
구별의 상대성
계산 방법이 다르면 차별 정도도 달라집니다. 표본의 크기는 관련 법적 구별 값의 크기에 영향을 미칩니다. 그룹화 기준은 차별 지수 값(D)에 영향을 미칩니다. 대상 표본의 동질성 정도는 판별값의 크기에 영향을 미칩니다.
추측 및 프로젝트 기능 차이 분석
추측 및 난이도 추측 수정
객관식 문제의 문항 분석
프로젝트 기능 차이점
통계에서 항목 기능 차이는 특정 항목에 대한 두 대상 그룹의 성능 차이를 나타냅니다. 프로젝트 기능의 차이가 발생한다는 것은 서로 다른 그룹의 프로젝트 기능이 서로 다른 그룹에 다르거나 불공평하다는 것을 의미합니다.
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마
플로팅 테마