카테고리 보관물: 교육평가

Four AI usage profiles

Four AI usage profiles

  • co-creation
  • laziness
  • plagiarism
  • full human creativity

표절(plagiarism)은 AI를 사용하면서도 '내가 했다'고 말하는 것과 같음
게으름(laziness)은 AI가 하도록 내버려 두고 인정하는 것

from Todd Lubart from Université Paris Cité

Goodhart’s law

Goodhart의 법칙은 "측정 대상이 된 지표는 더 이상 좋은 지표가 될 수 없다"라는 것이다. 이는 1975년 영국의 경제학자 Charles Goodhart가 처음 제시했다.

이 법칙의 핵심 개념을 실제 예시로 설명하면:

학교에서 시험 점수를 학생의 실력 평가 지표로 사용하기 시작하면, 학생들은 진정한 학습보다 시험 점수를 올리는 데 집중하게 된다. 결과적으로 시험 점수는 더 이상 학생의 실제 실력을 정확하게 반영하지 못하게 된다.

기업에서도 자주 발생하는 현상이다. 예를 들어:

  • 고객 서비스 품질을 통화 처리 시간으로 측정하면, 상담원들은 문제를 제대로 해결하지 않고 통화를 빨리 끊으려고 할 수 있다.
  • 프로그래머의 생산성을 코드 라인 수로 측정하면, 불필요하게 복잡한 코드를 작성할 수 있다.

이 법칙의 중요한 시사점은 성과 측정 시스템을 설계할 때, 단순히 하나의 지표에만 의존해서는 안 되며, 다양한 관점에서 평가해야 한다는 것이다. 또한 측정 지표가 의도하지 않은 행동을 유발할 수 있다는 점을 항상 고려해야 한다.

쉽게 따라하는 Reading Progress

쉽게 따라하는 Reading Progress

서문

이 교재는 선생님들을 대상으로 Reading Progress 기능을 효과적으로 활용할 수 있도록 돕기 위해 제작되었습니다. Microsoft Teams를 기반으로 하는 Reading Progress는 학생들의 읽기 능력 향상과 교사의 효율적인 지도 및 평가를 지원하는 강력한 도구입니다. 이 교재는 실습과 예시를 통해 간단하고 명확하게 설명하여, 초보 사용자도 쉽게 따라 할 수 있도록 구성되었습니다.

목차

  1. Reading Progress 소개
    1.1. Reading Progress란?
    1.2. 주요 기능 및 장점

  2. 준비 단계
    2.1. Microsoft Teams 설치 및 로그인
    2.2. Reading Progress 앱 설정

  3. Reading Progress 사용법
    3.1. 읽기 과제 만들기
    3.2. 학생 진행 상황 추적하기
    3.3. 자동 평가 및 피드백 활용하기

  4. 활용 사례
    4.1. 학년별 활용 전략
    4.2. 읽기 수준에 따른 맞춤형 활동

  5. 팁과 문제 해결
    5.1. 자주 묻는 질문(FAQ)
    5.2. 문제 상황 해결 가이드

  6. 부록
    6.1. 추가 자료 및 링크
    6.2. 실습용 템플릿

1. Reading Progress 소개

1.1. Reading Progress란?

Reading Progress는 Microsoft Teams 내에서 작동하는 읽기 연습 도구로, 학생들이 자신의 읽기 능력을 스스로 녹음하고 제출할 수 있도록 돕습니다. 교사는 학생들의 읽기 속도, 정확도, 발음 등을 자동으로 분석할 수 있으며, 이를 통해 맞춤형 피드백을 제공할 수 있습니다.

1.2. 주요 기능 및 장점

  • 자동 분석 및 평가: AI 기반으로 읽기 오류와 속도를 분석.
  • 효율적인 관리: 학생 개개인의 읽기 진도를 한눈에 확인.
  • 맞춤형 피드백: 학생별 읽기 데이터를 기반으로 개인화된 지도 가능.
  • 접근성 강화: 집에서도 과제를 수행할 수 있어 학생과 학부모 모두 만족.

2. 준비 단계

2.1. Microsoft Teams 설치 및 로그인

  1. Microsoft Teams를 다운로드하고 설치합니다.
  2. 계정을 생성하거나 기존 계정으로 로그인합니다.
  3. Teams 내에서 사용할 클래스를 생성하거나 기존 클래스에 참가합니다.

2.2. Reading Progress 앱 설정

  1. Teams의 [과제] 탭으로 이동합니다.
  2. ‘과제 만들기’ 버튼을 클릭하고, Reading Progress를 선택합니다.
  3. 기본 설정을 완료하면 사용 준비가 완료됩니다.

3. Reading Progress 사용법

3.1. 읽기 과제 만들기

  1. 새 과제 추가: Reading Progress 과제를 생성합니다.
  2. 텍스트 업로드: 학생들이 읽을 텍스트를 업로드하거나 Teams의 라이브러리에서 선택합니다.
  3. 설정 완료: 읽기 속도 목표, 마감일, 평가 기준 등을 설정합니다.

3.2. 학생 진행 상황 추적하기

  • 학생들이 제출한 녹음을 들어보고, 읽기 오류, 발음, 속도를 확인합니다.
  • AI가 제공하는 분석 데이터를 활용해 학생의 읽기 능력을 객관적으로 평가합니다.

3.3. 자동 평가 및 피드백 활용하기

  • AI가 감지한 오류를 확인하고, 필요시 수정합니다.
  • ‘코멘트’ 기능을 활용해 학생들에게 구체적이고 건설적인 피드백을 제공합니다.

4. 활용 사례

4.1. 학년별 활용 전략

  • 초등 저학년: 간단한 단어와 문장 읽기 활동으로 시작.
  • 초등 고학년: 이야기를 통한 독해력과 발음 교정.
  • 중등: 학습자 수준에 맞춘 교과 텍스트 활용.

4.2. 읽기 수준에 따른 맞춤형 활동

  • 초보 수준: 발음 정확성에 집중.
  • 중급 수준: 읽기 속도 및 표현력 향상.
  • 고급 수준: 내용 이해와 감정을 담은 읽기.

5. 팁과 문제 해결

5.1. 자주 묻는 질문(FAQ)

  • Q: Reading Progress는 모든 언어를 지원하나요?
    A: 현재는 주요 언어를 지원하며, 한국어도 포함됩니다.
  • Q: 학생 데이터는 어디에 저장되나요?
    A: Microsoft의 안전한 클라우드 서버에 저장됩니다.

5.2. 문제 상황 해결 가이드

  • 문제: 학생들이 과제를 제출하지 못하는 경우
    해결: 인터넷 연결 확인 및 Teams 앱 최신 버전 업데이트.
  • 문제: AI 분석 결과가 정확하지 않은 경우
    해결: 교사가 직접 분석을 보완하여 수동으로 수정.

6. 부록

6.1. 추가 자료 및 링크

6.2. 실습용 템플릿

  • 학년별 읽기 텍스트 예제
  • 평가 기준 샘플

이 교재를 통해 Reading Progress를 쉽게 배우고, 학생들에게 더 나은 읽기 경험을 제공하시길 바랍니다!

테일러의 과학적 관리법

상상해 봐! 너희 반 친구들이 운동회에서 30미터 달리기를 하는데, 누가 가장 빠른지 알고 싶어. 그래서 너는 각 친구들이 달리는 모습을 꼼꼼히 관찰하고, 어떤 자세와 방법으로 뛰는 게 가장 빠른지 연구해. 그리고 그 결과를 바탕으로 "가장 빠르게 달리는 방법"이라는 설명서를 만들어 줘.

테일러의 과학적 관리법은 이와 비슷한 방법으로 "일을 가장 효율적으로 하는 방법"을 찾는 과학적인 방법이야. 옛날에는 숙련된 장인들이 자신의 경험에 의지해서 일을 했지만, 테일러는 과학적인 연구를 통해 더 나은 방법을 찾아낼 수 있다고 생각했지.

테일러는 다음과 같은 방법으로 과학적 관리법을 실천했어.

  1. 모든 일을 꼼꼼히 관찰하고 분석한다. 마치 운동선수의 달리는 모습을 분석하듯, 테일러는 노동자들이 일하는 모습을 꼼꼼히 관찰하고, 어떤 부분에서 시간이 가장 많이 소요되는지, 어떤 동작이 불필요한지 등을 분석했지.
  2. 가장 효율적인 방법을 찾아낸다. 분석 결과를 바탕으로 테일러는 불필요한 동작을 없애고, 더 빠르고 정확하게 일할 수 있는 방법을 연구했어. 마치 운동선수의 달리는 자세를 개선하듯, 테일러는 일하는 방법을 개선하여 더 효율적으로 일할 수 있도록 도왔지.
  3. 모든 사람이 같은 방법으로 일하도록 한다. 테일러는 자신이 연구해낸 "가장 효율적인 방법"을 설명서로 만들어 모든 노동자들이 같은 방법으로 일하도록 했어. 마치 운동선수들이 모두 같은 달리기 기술을 배우도록 하는 것과 비슷하지.

테일러의 과학적 관리법은 다음과 같은 장점을 가지고 있어.

  • 일을 더 빠르고 정확하게 할 수 있다. 불필요한 동작을 없애고 효율적인 방법을 사용하면 더 빠르고 정확하게 일을 할 수 있지. 마치 운동선수가 달리는 기술을 개선하면 더 빠르게 달릴 수 있는 것과 같아.
  • 생산성을 높일 수 있다. 더 많은 일을 할 수 있게 되면 회사의 생산성이 높아져 더 많은 이익을 얻을 수 있지. 마치 운동선수가 더 빠르게 달리면 경기에서 승리하여 팀에 영광을 가져다주는 것과 같아.
  • 노동자들의 임금을 높일 수 있다. 생산성이 높아지면 회사는 노동자들에게 더 많은 임금을 줄 여력이 생겨. 마치 운동선수가 좋은 성적을 거두면 더 많은 돈을 벌 수 있는 것과 같아.

하지만 과학적 관리법은 다음과 같은 단점도 가지고 있어.

  • 노동자들이 일에 대한 흥미를 잃을 수 있다. 항상 같은 방법으로 일해야 하기 때문에 노동자들이 일에 대한 흥미를 잃고, 단순 노동에 지쳐버릴 수 있어. 마치 운동선수가 항상 같은 방법으로 훈련해야 하면 지루해지고 운동을 그만두게 될 수 있는 것과 같아.
  • 노동자들과 경영진 사이에 갈등이 생길 수 있다. 테일러는 노동자들을 기계처럼 생각하고, 일에 대한 모든 권한을 경영진이 가지는 것이 좋다고 생각했어. 하지만 노동자들은 자신들의 의견을 반영할 수 없다는 불만을 가지고, 경영진과 갈등이 생길 수 있었지.

테일러의 과학적 관리법은 현대 경영학에 큰 영향을 미쳤지만, 오늘날에는 단점을 보완하기 위해 다양한 방법들이 사용되고 있어.

feed-up, feedback, feed-forward

  • feed-up: 어떤 목표를 향해 가고 있는가?
  • feedback: 얼마나 잘하고 있는가?
  • feed-forward: 다음 단계는 어떤 방향으로 나아가야 하는가?

낸시 프레이, 더글러스 피셔(2021). 피드백, 이렇게 한다(역: 강정임). 서울: 교육을바꾸는사람들.

Frey, N., & Fisher, D. (2011). The formative assessment action plan: Practical steps to more successful teaching and learning. ASCD.

IB의 학습자상

  1. 탐구하는 사람(Inquirers)
  2. 지식이 풍부한 사람(Knowledgesable)
  3. 사고하는 사람(Thinkers)
  4. 소통하는 사람(Communicators)
  5. 원칙을 지키는 사람(Principled)
  6. 열린 마음을 가진 사람(Open-minded)
  7. 배려하는 사람(Caring)
  8. 도전하는 사람(Risk-takers)
  9. 균형잡힌 사람(Balanced)
  10. 성찰하는 사람(Reflective)

교육평가의 과거, 현재, 그리고 미래: 학제 간 관점

Brown GTL (2022) The past, present and future of educational assessment: A transdisciplinary perspective. Front. Educ. 7:1060633. doi: 10.3389/feduc.2022.1060633

"학제간 관점"은 여러 학문 분야 간의 연결과 통합을 강조하는 관점을 의미합니다. 이는 특정 주제나 문제를 해결하거나 이해하기 위해 여러 학문 분야의 지식과 방법을 종합적으로 활용하는 접근 방식을 나타냅니다. 학제간 관점은 학문적인 경계를 넘어서서 다양한 전문 분야 간의 협력을 강조하며, 이를 통해 새로운 통찰력과 창의적인 해결책을 찾을 수 있다고 믿습니다. 이러한 관점은 문제 해결에 있어서 단일 학문 분야의 한계를 극복하고, 복잡한 현실 문제에 대한 종합적이고 다양한 관점에서의 이해를 촉진합니다. 예를 들어, 환경문제는 과학, 공학, 경제학, 사회학 등 다양한 분야의 지식이 필요한 복합적인 문제일 수 있습니다. 학제간 관점에서는 이러한 다양한 분야의 전문가들이 협력하여 종합적인 해결책을 모색하게 됩니다. 이러한 학제간 관점은 현대 사회의 복잡성과 상호 연결성을 고려할 때 매우 중요하며, 대학교 및 연구기관에서는 이러한 관점을 강화하기 위한 교육 및 연구 노력을 기울이고 있습니다.

교육평가의 과거, 현재, 그리고 미래: 학제 간 관점

<초록>

교육 평가의 역사를 살펴본다면 초기부터 20세기를 거쳐 현대까지 평가가 어떻게 진행되고 분석되어 왔는지 알 수 있습니다. 초기에는 종이와 연필을 이용한 평가가 주류를 이루었으며, 응시자의 성취도를 판단하는 데에 타당도와 정확성이 중요시되었습니다. 이 평가는 주로 전문가의 의견에 의존했습니다. 교육의 대중화로 인해 자격과 선발을 위한 공식 시험이 도입되었고, 시험 채점을 위한 통계적 방법이 개발되었습니다. 최근에는 개인용 컴퓨터를 이용한 화면 및 웹 기반의 시험이 등장하면서 적응형 채점이 가능해졌습니다. 이로써 시험은 더 정확한 프로세스를 통해 진행되며, 응시자가 사용하는 프로세스를 분석하는 것이 중요해지고 있습니다. 그러나 시험은 응시자의 심리적, 문화적, 상황적인 요소를 무시해 왔습니다. 특히, 교실의 복잡하고 역동적인 과정은 수학적으로 모델링하기 어려워 평가에서 소홀히 다뤄지고 있습니다. 현재의 교육 평가는 기술, 데이터, 심리측정이 교실 환경과 교육의 심리로부터 점점 더 고립되고 있는 상황입니다. 앞으로는 평가의 심리학이 시험의 세계에 통합되어 교육 평가가 크게 발전할 것으로 예상됩니다. 이는 심리학 이론과 연구를 통계 및 기술과 통합하여 학습 과정을 이해하고, 학생들의 학습 수준을 평가하며 교수법을 개선하는 방향으로 나아갈 것입니다. 실제 교실에서 유효하고 신뢰할 수 있는 평가를 개발하기 위해서는 심리측정학자, 테스터, 데이터 분석가, 공학자들이 노력해야 할 과제입니다.

키워드: assessment, testing, technology, psychometrics, psychology, curriculum, classroom

도입

교육 평가의 지평을 넓게 조망할 때, 우리는 어느 시점에서 출발했는지, 현재 어떤 상태에 있는지, 그리고 이 지평이 어떤 방향으로 나아가고 있는지를 넓은 연대기적 관점에서 이해하려 합니다. 교육 평가는 학생의 학습 경험의 질, 교사의 교육 활동, 커리큘럼의 효과, 학교의 수준, 그리고 교육 시스템의 성과를 평가하는 데 중요한 역할을 합니다. 이러한 평가는 교수법과 학습의 지속적인 개선뿐만 아니라 교사, 학교, 행정부에 대한 총체적인 책임 평가를 위한 도구로 사용됩니다. 평가는 강력한 영향을 미치기 때문에 그 역사, 현재 상태, 그리고 미래의 가능성을 세밀하게 이해하는 것이 중요합니다. 이 개요에서는 최근 3000년 동안의 평가 역사를 시작으로, 다양한 장소와 상황에서 이미 시행 중인 현재의 평가 방법 및 미래의 가능성을 간략하게 살펴보겠습니다.

평가 리터러시(assessment literacy)

댓글 남기기
  1. 평가 리터러시란 무엇인가?
  2. 교육자들이 아직 평가에 익숙하지 않은 이유는 무엇인가?
  3. 교육자가 평가에 능숙해야 하는 이유는 무엇인가?
  4. 교육자가 평가에 능숙해지려면 어떻게 해야 할까?

평가 리터러시는 교육적 결정에 영향을 미칠 수 있는 기본적인 평가 개념과 절차에 대한 개인의 이해로 구성됨(Popham, 2018)