표제지
목차
연구요약 5
Ⅰ. 서론 13
1. 연구의 필요성 및 목적 14
가/나. 연구 목적 16
2. 연구 내용 16
가. TIMSS 2019 예비검사 평가도구 번역ㆍ번안 16
나. TIMSS 2019 예비검사 시행 및 자료 정리 17
다. TIMSS 2019 예비검사 결과 분석 및 본검사 평가도구 준비 18
3. 연구 방법 18
가. 문헌 분석 18
나. 조사 연구 19
다. 통계 분석 19
마. 전문가 협의회 20
바. 워크숍 20
사. 국제본부 및 관련 기관과의 교류ㆍ협력 20
Ⅱ. TIMSS 2019 예비검사 평가도구 22
1. 평가도구 구성 23
가. 성취도 검사 23
나. 배경변인 설문 26
2. 평가도구 번역 및 검증 32
가. 수학ㆍ과학 성취도 검사 번역 및 검증 32
나. 배경변인 설문지 번역 및 검증 36
다. 각종 시행 지침서 번안 37
Ⅲ. TIMSS 2019 예비검사 시행 39
1. 표집 40
가. 표집 설계 40
나. 학교 및 학급 표집 절차 41
다. 표집 결과 45
2. 예비검사 시행 절차 및 방법 46
가. 검사 시행 체제 46
나. 학교책임자ㆍ감독교사 연수 및 검사자료 송부 46
다. 예비검사 시행 47
라. 검사시행 모니터링 및 평가도구 회수 50
마. 검사 시행 질 관리 51
바. 시행 과정 검토 및 개선 사항 51
3. 예비검사 채점 53
가. 채점 기준 및 채점 코드 체계 54
나. 국제 및 국내 채점 연수 55
다. 채점 설계 및 절차와 신뢰도 결과 57
라. 채점 과정 점검 및 본검사 문항과 채점 기준에 대한 피드백 내용 61
4. 예비검사 자료 입력 62
가. 자료 입력 62
나. 자료의 질 관리 64
다. 데이터베이스 생성 및 자료 송부 67
Ⅳ. TIMSS 2019 예비검사 결과 분석 및 본검사 준비 68
1. 성취도 검사 자료 분석 69
2. 설문 자료 분석 71
3. 본검사 준비 73
가. 본검사 준비 일정 73
나. 본검사 평가도구 구성 74
다. 본검사 평가 대상 표집 75
라. 본검사 시행 설계 시 유의할 점 76
Ⅴ. 요약 및 제언 79
1. 요약 80
가. TIMSS 2019 예비검사 평가도구 80
나. TIMSS 2019 예비검사 시행 82
다. TIMSS 2019 예비검사 자료 분석 및 본검사 준비 83
2. 제언 85
참고문헌 89
ABSTRACT 90
[부록 1] 학교 정보 양식 93
[부록 2] 학급 정보 양식 94
[부록 3] 학생-교사 연결 양식 95
[부록 4] 검사 실시 보고서 97
[부록 5] 학생 참여율 보고서 99
판권기 2
〈표 Ⅱ-1〉 TIMSS 2019 예비검사 성취도 평가도구 설계 25
〈표 Ⅱ-2〉 TIMSS 2019 예비검사 전체 문항 중 PSI 문항의 수와 비율 26
〈표 Ⅱ-3〉 TIMSS 2019 예비검사 학생 설문의 문항 구성 27
〈표 Ⅱ-4〉 TIMSS 2019 예비검사 학부모 설문의 문항 구성 29
〈표 Ⅱ-5〉 TIMSS 2019 예비검사 학교 설문의 문항 구성 30
〈표 Ⅱ-6〉 TIMSS 2019 예비검사 교사 설문의 문항 구성 31
〈표 Ⅱ-7〉 TIMSS 2019 예비검사 관련 운영 및 시행 지침서 목록 38
〈표 Ⅲ-1〉 TIMSS 2019 학교 표집 절차 42
〈표 Ⅲ-2〉 TIMSS 2019 예비검사 학교 표집 결과 45
〈표 Ⅲ-3〉 지역규모별 표집 학생수, 참여 학생수 및 참여율 현황 47
〈표 Ⅲ-4〉 TIMSS 2019 예비검사 시행 시간표 49
〈표 Ⅲ-5〉 TIMSS 국제본부에서 제공하는 채점 코드 예시 자료 55
〈표 Ⅲ-6〉 TIMSS 2019 예비검사 채점 문항 수와 채점 분량 57
〈표 Ⅲ-7〉 TIMSS 2019 예비검사 컴퓨터 채점 프로그램의 종류 59
〈표 Ⅲ-8〉 TIMSS 2019 예비검사 학년별 수학ㆍ과학 채점자 간 신뢰도 결과 60
〈표 Ⅳ-1〉 TIMSS 2019 예비검사 문항 검토 기준별 해당 문항 수 70
〈표 Ⅳ-2〉 TIMSS 2019 예비검사 문항 중 본검사 문항으로 채택된 문항 수 71
〈표 Ⅳ-3〉 TIMSS 2019 예비검사 설문 분석 결과에 따른 문항 수정, 삭제, 추가 사항 72
〈표 Ⅳ-4〉 TIMSS 2019 본검사 준비 및 시행 일정 73
〈표 Ⅳ-5〉 TIMSS 2019 본검사 평가도구 구성 74
〈표 Ⅳ-6〉 TIMSS 2019 본검사 학교 표집 결과 75
[그림 Ⅰ-1] TIMSS 2019 연구 단계별 연구 내용 및 검사 시행 과정에서의 주요 변화 15
[그림 Ⅱ-1] TIMSS 2019 수학ㆍ과학 평가 도구 번역ㆍ번안 및 검증 과정 32
[그림 Ⅱ-2] eTIMSS 온라인 번역 시스템 상의 문항 번역 화면 33
[그림 Ⅱ-3] eTIMSS 온라인 번역 시스템 상의 NAF 작성 화면 34
[그림 Ⅱ-4] TIMSS 2019 예비검사 배경변인 설문의 번역ㆍ번안 및 검증과정 37
[그림 Ⅲ-1] TIMSS 2019 예비검사 학급 표집 절차 44
[그림 Ⅲ-2] eTIMSS 플레이어 학생 로그인 화면 49
[그림 Ⅲ-3] 온라인 데이터 점검 시스템(Online Data Monito)의 자료 전송 확인 화면 51
[그림 Ⅲ-4] Data Management Expert 프로그램의 학생설문 자료 입력창 63
[그림 Ⅲ-5] 고유 아이디 검증(Unique ID Check) 절차를 수행한 결과의 예시 65
[그림 Ⅲ-6] 타당화 확인(Validation Check) 절차를 수행한 결과의 예시 65
[그림 Ⅲ-7] 기록 일관성 검증(Record Consistency Check) 절차를 수행한 결과의 예시 66
[그림 Ⅴ-1] 컴퓨터를 이용한 활동(일주일에 한두 번 이상 한다는 비율) 87