Rasch 모형 기반 FACETS/WINSTEPS 프로그램을 활용하여 논문 결과 작성하기

FACETS 프로그램 또는 WINSTEPS 프로그램을 사용하여 논문을 준비하는 연구자들은 프로그램 실행하는 방법과 실행 후 제시된 결과를 해석하는데 확고한 자신감이 없다. 두 프로그램을 어떻게 실행하고 어떻게 해석하는 것이 적합한지를 구체적으로 소개한 우리나라 책은 아직 찾아볼 수 없기 때문이다. 따라서 이 책은 필자가 연구에 사용했던 자료들을 통해 첫째, 프로그램을 실행하는 방법을 제시하였다. 둘째, 프로그램 실행 후 제시되는 많은 결과들 중에서 논문에 필요한 결과가 무엇인지를 제시하였다. 셋째, 논문에 필요한 결과를 보고 어떻게 논문의 표와 글을 작성해야 하는지를 제시하였다. 또한 수학 기호 및 수식이 어려운 초보 연구자들을 위해 Rasch 모형과 관련된 수학 기호와 수식은 모두 생략하였다. FACETS 프로그램과 WINSTEPS 프로그램의 출력 결과를 바르게 해석하고 논문 결과 작성을 위해 필요한 실질적 내용에 중점을 두었다.
이 책을 쓰는데 사용된 모든 자료는 도서출판 황소걸음 웹사이트(bullsbook.co.kr)에서 다운받을 수 있다. 우선 자료를 다운받고, 이 책의 내용을 토대로 프로그램을 실행하면서 공부하는 것이 효율적인 도움이 될 것이다.
FACETS 프로그램 또는 WINSTEPS 프로그램을 사용하여 논문 결과를 작성하는 분들에게 조금이나마 도움이 되길 바라며 의문이 생기는 부분은 필자의 이메일(ksme@cbnu.ac.kr)을 통해 질문하면 최대한 빠른 시일 내에 답변하도록 노력할 것이다. 이 책을 쓰는 데 많은 도움을 주신 John Michael Linacre 교수에게 진심으로 감사드린다.

머리말

그림 차례

1부 FACETS 프로그램 활용하여 논문 결과 작성하기

제 1 장 FACETS 프로그램 실행을 위한 EXCEL 프로그램 활용
제 2 장 FACETS 프로그램 실행을 위한 메모장 만들기
[알아두기] EXCEL 프로그램에서 F열 작업에 의미
제 3 장FACETS 프로그램 실행
[알아두기] 설계서 이름 결정과 빠른 실행 방법
제 4 장 FACETS 프로그램 결과 해석
4-1) 수직 단면 분포도 탐색
[알아두기] Rasch 모형 로짓(logits) 척도에 의미
4-2) 수직 단면 분포도 논문 결과 쓰기
4-3) 심사자의 엄격성 탐색
[알아두기] 논문 결과에 적절한 문어체
4-4) 심사자 엄격성 분석 논문 결과 쓰기
[알아두기] 심사자 엄격성에 의미
4-5) 응시생의 능력 탐색
4-6) 응시생 능력 분석 논문 결과 쓰기
[알아두기] 응시생 능력 지수와 공정한 평균 점수
4-7) 평가요인의 난이도 탐색
4-8) 평가요인 난이도 분석 논문 결과 쓰기
제 5 장 평가요인에 대한 편파적 심사자 추정 방법 및 결과 해석
5-1) 평가요인에 대한 편파적 심사자 추정
5-2) 평가요인에 대한 편파적 심사자 추정 논문 결과 쓰기
[알아두기] Table 뒤에 긴 숫자에 의미
제 6 장 다국면 Rasch 모형을 적용한 심사자 무선배치 설계
[알아두기] FACETS 설계서에 적절한 표본 수
제 7 장 다국면 Rasch 모형을 적용한 대학교 평가 자료 분석
[알아두기] R10과 R10K에 의미
제 8 장 FACETS 프로그램 적용한 대학교 평가자료 분석 논문 결과 쓰기
8-1) 수직 단면 분포도 분석 논문 결과 쓰기
[알아두기] 문항 난이도, 문항 곤란도, 문항 중요도
8-2) 심사자 엄격성 분석 논문 결과 쓰기
[알아두기] FACETS 프로그램에서 신뢰도와 일치도 해석
8-3) 대학교 수준 분석 논문 결과 쓰기
8-4) 평가요인 곤란도 분석 논문 결과 쓰기
8-5) 평가요인에 대한 편파적 심사자 분석 결과 탐색
[알아두기] 다량의 결과표 작성방법
8-6) 평가요인에 대한 편파적 심사자 분석 논문 결과 쓰기
[알아두기] Rasch 모형과 1모수 로지스틱 모형
제 9 장 FACETS 프로그램을 적용한 심리측정척도 자료 분석
[알아두기] 설문지 문항 내용과 코딩된 자료 검토
제 10 장 FACETS 프로그램 실행 및 경고 탐색
제 11 장 데이터 구조변환과 FACETS 설계서 작성
[알아두기] 수직형태 코딩과 수평형태 코딩
제 12 장 FACETS 프로그램 적용한 심리측정척도 분석 결과 해석
[알아두기] noncentered와 positive 설정에 의미
12-1) 심리측정척도 수직 단면 분포도 분석 논문 결과 쓰기
12-2) 성별에 따른 자아탄력성 차이 분석 논문 결과 쓰기
[알아두기] Measure + , - 값 해석의 중요성
12-3) 체육수업 운동시간에 따른 자아탄력성 차이 분석 논문 결과 쓰기
[알아두기] '일관성 있게 배정된 것을 알 수 있다'에 의미
12-4) 체육수업 운동시간에 따른 자아탄력성 차이 분석 논문 결과 쓰기 이해
[알아두기] 논문 결과표 작성과 글 쓰기
12-5) 자아건강평가에 따른 자아탄력성 차이 분석 논문 결과 쓰기
[알아두기] 공정한 평균을 기준으로 작성하기
12-6) 자아탄력성 문항의 곤란도와 적합도 분석 논문 결과 쓰기
[알아두기] 부적합도 기준만으로 해석
12-7) 응답범주의 적합성 검증 논문 결과 쓰기
[알아두기] 응답범주 수 변환하기
12-8) 응답범주의 적합성 검증 그래프 작성
[알아두기] FACETS 프로그램 그래프

2부 WINSTEPS 프로그램 활용하여 논문 결과 작성하기

제 1 장 WINSTEPS 프로그램을 활용하기 위한 심리측정척도 자료
제 2 장 WINSTEPS 프로그램 실행
[알아두기] WINSTEPS 프로그램 종료 / 140
제 3 장 WINSTEPS 프로그램 기본 탐색
[알아두기] Dont't ask again
제 4 장 WINSTEPS 프로그램 결과 해석 및 논문쓰기
4-1) Global fit statistics 결과 실행 및 해석
4-2) Global fit statistics 분석 논문 결과 쓰기
4-3) 응답범주의 적합성 결과 실행 및 해석
4-4) 응답범주의 적합성 분석 논문 결과 쓰기
4-5) 응답범주의 적합성 검증 그래프 작성
[알아두기] 응답범주 수 결정과 EXCEL 핸들링
4-6) 문항 적합도 결과 실행 및 해석
4-7) 문항 적합도 분석 논문 결과 쓰기
[알아두기] 내적합 지수와 외적합 지수, 부적합 문항과 과적합 문항
4-8) 성별에 따른 차별기능문항 추출 결과 실행 및 해석
4-9) 성별에 따른 차별기능문항 추출 논문 결과 쓰기
[알아두기] DIF 분석과 FIT 분석 순서
4-10) 개발된 측정척도의 문항 차원성 탐색
[알아두기] 일차원성 가정과 일차원성 탐색, 그리고 문항 제거 딜레마
4-11) 차원성 탐색 논문 결과 쓰기
4-12) 개발된 측정척도의 응답자 속성과 문항 곤란도 분포도 탐색
4-13) 응답자 속성과 문항 곤란도 분포도 논문 결과 쓰기
[알아두기] 심리측정척도에서 문항 난이도 이해
제 5 장 Rasch 평정척도모형과 Rasch 부분점수모형의 이해와 적용
5-1) WINSTEPS 프로그램을 적용한 Rasch 부분점수모형 분석 설계
5-2) 각 문항별로 산출되는 응답범주 결과 분석
5-3) Rasch 부분점수모형을 적용한 응답범주 적합성 분석 논문 결과 쓰기
5-4) Rasch 평정척도모형 분석 결과와 Rasch 부분점수모형 분석 결과 비교
[알아두기] Rasch RSM, Rasch PCM 결과 비교
5-5) Rasch 평정척도모형과 Rasch 부분점수모형 탐색 결과 비교
[알아두기] Rasch PCM이 FACETS 프로그램에서도 가능 (? vs #)
제 6 장 WINSTEPS 프로그램을 활용한 다요인 심리측정척도 자료 분석
6-1) 다요인의 차원성 탐색
6-2) 요인별 분석을 위한 메모장 설계서 보완
[알아두기] ISELECT와 요인별로 다시 설계서 만들기
6-3) 심리측정척도 분석 순서
6-4) 요인별 응답자와 문항의 분리지수와 신뢰도 지수 분석
6-5) 요인별 응답자와 문항의 분리지수와 신뢰도 지수 분석 논문 결과 쓰기
6-6) 요인별 응답자 속성과 문항 곤란도 분포도 분석
6-7) 요인별 응답자 속성과 문항 곤란도 분포도 분석 논문 결과 쓰기
6-8) 요인별 응답범주의 적합성 분석
[알아두기] 응답범주 확률곡선의 X축 간격 조정
6-9) 요인별 응답범주의 적합도 분석 논문 결과 쓰기
6-10) 요인별 차원성과 지역독립성 분석
[알아두기] 문항 차원성과 지역독립성 분석 딜레마
6-11) 요인별 차원성과 지역독립성 분석 논문 결과 쓰기
6-12) 요인별 문항 곤란도와 적합도 분석
6-13) 요인별 문항 곤란도와 적합도 분석 논문 결과 쓰기
6-14) 요인별 성별에 따른 차별기능문항 분석
6-15) 요인별 성별에 따른 차별기능문항 분석 논문 결과 쓰기
6-16) 요인별 연령범주에 따른 차별기능문항 분석
6-17) 요인별 연령범주에 따른 차별기능문항 분석 논문 결과 쓰기
[알아두기] 논문 결과 유의확률 작성법: APA 규정
제 7 장 WINSTEPS 프로그램 그래프와 플롯 탐색
7-1) WINSTEPS 그래프
[알아두기] WINSETES 5.3.2부터 그래프 업그레이드
7-2) DIF 결과 EXCEL 그래프
[알아두기] DIF Size, DIF t-value, DIF Score, Item Average 그래프
7-3) DIF 결과 EXCEL 산점도
[알아두기] DIF와 DTF에 차이
7-4) 문항별 응답범주 확률곡선(probability category curve) 그래프
7-5) 문항별 응답범주 확률곡선과 실증곡선 그래프
7-6) 예상된 문항특성곡선과 응답범주의 중앙점 그래프
7-7) 문항별 실증적 무작위성 그래프
7-8) 예상된 문항특성곡선, 실증된 문항특성곡선, 그리고 95% 신뢰구간 곡선
[알아두기] [Exp + Empirical ICC], [Empirical ICC], and [Empirical bin width]
7-9) 누적된 확률곡선 그래프
[알아두기] Rasch-Andrich thresholds, Rasch-half-point thresholds, Rasch-Thurstonian thresholds
7-10) 문항정보함수와 응답범주 정보함수
7-11) 문항별 예상된, 실증된 문항특선곡선과 문항정보함수 동시 그래프
[알아두기] 동시 그래프 선택 방법과 [Absolute x]에 의미
7-12) 검사 무작위성 그래프, 검사특성곡선, 검사정보함수
[알아두기] What is the [Output Files]?
7-13) 비균일적 차별기능문항 특성곡선 그래프
[알아두기] 비균일적 차별기능문항 특성곡선과 균일적 차별기능문항 특성곡선
7-14) 응답자 속성과 문항 곤란도 특성 동일선상 히스토그램 / 311
7-15) WINSTEPS 플롯 / 315
[알아두기] WINSTEPS 플롯과 TABLE 연결 / 324
7-16) TABLE + WINSTEPS 플롯 / 326
[알아두기] Analysis of PRCOMP= / 330
7-17) DIF, DTF, DPF, DGF 플롯 / 331
[알아두기] 성별에 따른 DIF vs 성별과 문항에 따른 DGF
제 8 장 WINSTEPS 프로그램과 R 프로그램 .
8-1) R 프로그램 연결
8-2) WINSTEPS 프로그램을 통한 R 프로그램 그래프 생성
[알아두기] R 프로그램 그래프의 장점
8-3) WINSTEPS 프로그램을 통한 R 프로그램의 히스토그램 생성
[알아두기] Output Files에서 다른 프로그램 자료 획득
8-4) WINSTEPS 프로그램을 통한 R 프로그램의 산점도 (2D x-y Scatterplot) 생성
8-5) WINSTEPS 프로그램을 통한 R 프로그램의 산점도 (3D x-y-z Scatterplot) 생성
[알아두기] 의미있는 3D x-y-z Scatterplot?
[알아두기] ALL BLACK 산점도 그래프
8-6) WINSTEPS 프로그램을 통한 R 프로그램의 스크리 플롯 (scree plots) 생성
제 9 장 WINSTEPS 프로그램으로 인지능력검사 자료 분석
9-1) 피험자 능력과 문항 난이도 분포도 분석
9-2) 문항 난이도와 적합도 분석
9-3) 피험자 능력과 적합도 분석
9-4) 일차원성 검증과 지역독립성 검증
9-5) 성별에 따른 차별기능문항 검증
[알아두기] 논문 결과 작성과 분석에 대한 자신감

참고문헌
도움이 된 워크숍
도움이 된 이메일 답변
찾아보기

김세형 현) 충북대학교 체육측정평가 교수
홈페이지: ksme.cbnu.ac.kr