STUDY NOTE Ch.13 · Assessment

개념 정리 노트

Concept Notes · Assessment

서브노트 순서 기반 · 기출 포인트 · 비교 도식

📌 목차 버튼 클릭 → 해당 섹션으로 이동  ·  ▼ 섹션 제목 클릭 → 열고 닫기

📋 목차
1 Assessment Qualities
2 Validity
3 Authenticity
4 Washback
5 Test Types
6 Classroom Tests
7 Alternative Assessment
8 Scoring and Items
키워드 ★★★ 최빈출 ★★ 빈출 ★ 기본개념 부키워드
📝 기출분석 포인트 (Ch.13 Assessment)

1. Practicality — financial, time, administration constraints

2. Reliability — consistent and dependable results

3. Validity — content, face, construct, criterion-related

4. Authenticity and Interactiveness — target language use와 individual characteristics involvement

5. Washback — testing이 teaching/learning에 미치는 영향

6. Test Types — formative/summative, norm/criterion, direct/indirect

7. Alternative Assessment — portfolio, self-assessment, performance-based assessment

8. Scoring and Items — holistic/analytic scoring, MC guidelines, item analysis

🎯 1 Assessment Qualities core qualities of language assessment
Practicality
Practicality는 financial limitation, time constraint, ease of administration 안에서 test가 실행 가능한 정도입니다.

좋은 test라도 비용·시간·운영 조건이 맞지 않으면 classroom assessment로 쓰기 어렵습니다.

Reliability
Reliability는 test가 consistent and dependable results를 주는 정도입니다.

Internal-consistency, student, test administration, intra-rater, inter-rater, test-retest, equivalent-forms, split-half reliability를 구분합니다.

📋 기출 이력

2014 기입10 — reliability, validity, washback 맥락

🔎 2 Validity validity types
Content Validity
Content validity는 assessment content가 course objective와 domain을 representative하게 sample하는 정도입니다.

Speaking competence를 paper-and-pencil multiple-choice test로만 측정하면 content validity가 낮습니다.

Construct Validity
Construct validity는 assessment instrument가 정의된 theoretical construct를 제대로 측정하는 정도입니다.

Oral interview score를 pronunciation과 grammar만으로 결정하면 intended construct를 충분히 측정하지 못할 수 있습니다.

Face and Criterion-related Validity
Face validity는 test-taker가 test를 타당하게 느끼는 정도, concurrent validity와 predictive validity는 criterion-related validity와 관련됩니다.

Concurrent validity는 같은 시점의 다른 test와 correlation, predictive validity는 future performance 예측입니다.

🔎 3 Authenticity authenticity and interactiveness
Authenticity
Authenticity는 test task가 target language use task의 features와 대응하는 정도입니다.

Natural language, contextualized items, thematic organization, meaningful topic이 관련됩니다.

📋 기출 이력

2012 Q25 — portfolio와 authentic assessment 맥락

Interactiveness
Interactiveness는 test task 수행에 learner의 language ability, topical knowledge, affective schemata 같은 individual characteristics가 관여하는 정도입니다.

Role play는 high authenticity와 high interactiveness의 예시입니다.

🔎 4 Washback effect on teaching and learning
Washback
Washback effect는 testing이 teaching과 learning에 미치는 영향입니다.

Useful diagnoses와 specific feedback은 beneficial washback을 만들지만, simple letter grade만 제공하면 washback이 약합니다.

📋 기출 이력

2018 기입7 — assessment, washback, formative 맥락

🔎 5 Test Types major test classifications
Formative vs Summative
Formative assessment는 instruction 과정 중 learner learning을 scaffold하기 위한 평가이고, summative assessment는 course end에서 learning outcome을 document하는 평가입니다.

Portfolio assessment는 formal이면서 formative일 수 있습니다.

📋 기출 이력

2011 Q29 — formative assessment와 feedback 맥락

Norm vs Criterion
Norm-referenced testing은 scores를 test takers끼리 비교하고, criterion-referenced testing은 mastery criterion에 비추어 performance를 해석합니다.

Norm-referenced는 rank order, percentile, relative standing과 관련되고 criterion-referenced는 qualitative feedback과 learning goals 관련 progress를 중시합니다.

📋 기출 이력

2010 Q25 — norm-referenced test와 criterion-referenced test 비교

🔎 6 Classroom Tests purpose-based tests
Purpose-based Tests
Proficiency test, placement test, diagnostic test, achievement test는 목적이 다릅니다.

Proficiency test는 prior instruction과 무관한 overall proficiency, placement test는 비슷한 level group 분류, diagnostic test는 strengths/weaknesses 파악, achievement test는 instruction outcome 확인입니다.

📋 기출 이력

2010 Q26 — diagnostic test와 placement test 구분

2015 기입8 — proficiency test와 placement test 구분

🔎 7 Alternative Assessment portfolio and self-assessment
Portfolio
Portfolio는 learner work의 purposeful collection으로 progress와 achievement를 보여 줍니다.

Process-oriented, formative, reflective이며 production과 teacher judgement를 중시합니다.

📋 기출 이력

2010 Q29 — portfolio assessment와 formative assessment

2016 서술6 — portfolio와 self-assessment

Self-assessment
Self-assessment는 learner가 자신의 process, strategies, outcomes를 평가하는 alternative assessment입니다.

Learner autonomy와 intrinsic motivation을 촉진하지만 checklist를 구체화하고 conferencing을 병행해야 합니다.

🔎 8 Scoring and Items rubrics and item analysis
Holistic vs Analytic Scoring
Holistic scoring은 single score를 빠르게 제공하고, analytic scoring은 components를 따로 rating하여 diagnostic feedback을 제공합니다.

Analytic scoring은 시간이 더 걸리지만 formative feedback과 strengths/weaknesses 파악에 유용합니다.

📋 기출 이력

2021 논술2 — rubric, feedback, writing assessment 맥락

Multiple-choice Guidelines
Selected-response item은 declarative knowledge와 beginning level learner 평가에 유용하지만 guessing과 distractor quality 문제가 있습니다.

Stem은 concise and simple, single clearly formulated problem이어야 하며 distractors는 같은 grammatical/semantic category에 속해야 합니다.

📋 기출 이력

2023 B-11 — selected-response item guideline 맥락