QUESTIO PSYCHOMETRICS A/B TESTING REPORT

2027 가톨릭대(자연·공학) 수리논술 100인 A/B 테스트 결과

표본: 가톨릭대 지원자 100인 (그룹 A 50명 / 그룹 B 50명)
비교 대상: [A: 기존 단문형] vs [B: 2027 연쇄 Scaffolding형]
그룹 B 평균 점수
67.8점
그룹 A 대비 +9.4점 상승
시간 부족 결시/미완성률
8.0%
그룹 A(34.0%) 대비 -26.0% 개선
인기학과 컷 (상위 10%)
86.0점
인공지능 / 생명공학 / 데이터
킬러 3-3번 정답률
38.0%
그룹 A(16.0%) 대비 2.3배 향상
1. A/B 그룹 종합 점수 및 통계 메트릭 비교
구분 그룹 A (기존 단문형 50인) 그룹 B (2027 연쇄 Scaffolding 50인) A/B 효과 및 통계적 유의성
전체 평균 점수 58.4점 (100점 만점) 67.8점 +9.4점 (p < 0.01 유의미)
점수 표준편차 (SD) 18.2점 13.6점 극단적 백지 제출 방지 (편차 4.6점 축소)
90분 시험 시간 부족률 34.0% (17명 미완) 8.0% (4명 미완) 시간 관리 효율 26.0%p 개선
인기학과 합격선 (상위 10%) 81.5점 86.0점 최상위권 고난도 변별력 완벽 유지
일반학과 합격선 (상위 30%) 69.0점 76.5점 중상위권 안정적 합격선 형성
2. 문항별 정답률 및 서술 완성도 세부 비교
문항 번호 및 영역 그룹 A 정답률 그룹 B 정답률 개선폭 A/B 핵심 분석 및 출제위원 피드백
[1-1] 삼차함수 접선 기울기 78.0% 92.0% +14.0% 기함수 대칭성(\(m_1=m_2\)) 파악 후 단계적 논증 성공률 대폭 상승
[1-2] 직교 조건 \(k\) 산출 62.0% 76.0% +14.0% \(t^2\) 방정식의 단일 양수근 판별 성공률 증가 (\(k=1/3\))
[1-3] 삼각형 넓이 최적화 48.0% 64.0% +16.0% \(S(t)\) 함수식 수립 후 도함수 극소점 \(t=\sqrt{3}\) 최솟값 도출 안착
[2-1] 초월함수 극값 \(x\)좌표 64.0% 78.0% +14.0% \(\tan(2x)=2\) 삼각방정식 변환으로 극값 2개 정확한 도출
[2-2] 변곡점 2개 도출 52.0% 70.0% +18.0% \(\tan(2x)=-4/3\) 부호 판정 및 변곡점 2개 증명 서술 향상
[2-3] 무한등비급수 넓이 합 36.0% 54.0% +18.0% 공비 \(r=e^{-\pi}\) 유도 후 무한급수 공식 적용 능력 개선
[3-1] 부분적분 및 최솟값 70.0% 86.0% +16.0% 부분적분 원시함수 \((x-2)e^x+2\) 전개 계산 실수 대폭 감소
[3-2] 점 (2,2) 접선의 방정식 82.0% 94.0% +12.0% 기울기 \(e^2\) 대입 접선 완성형 문항으로 기본 배점 전원 확보
[3-3] 사잇값 정리 실근 유일성 16.0% 38.0% +22.0% 연속성 + 사잇값 정리 + 도함수 단조성 3단계 서술 성공률 2.3배 증가