현실 세계에 대한 평가 논리의 적용

평가 프로세스의 4 단계 논리 이해.

평가 란 무엇인가의 장점, 가치 또는 중요성을 결정하는 과정이며, 평가는 그 과정의 구체적인 결과물입니다. The Logic of Evaluation의 Michael Scriven에 따르면, “전문 평가는 광범위하고 구체적인 교육이나 학습이 필요한 정도의 전문 지식을 갖춘 체계적이고 객관적인 방식으로 평가됩니다.”평가 논리는 단계별 프로그램, 정책 또는 인력의 품질에 대한 판단을 내리는 데 도움을 줄 수있는 프로세스입니다.

프로세스 정의

평가 논리는 다음을 포함하는 4 단계 프로세스입니다. 1) 평가를 위해 사용할 기준을 정의합니다. 2) 그 기준에 대한 수행 기준을 설정한다. 3) 실제 성능 측정; 4) 결과를 종합하여 평가 판단을 내린다. 이 과정에서 특히 흥미로운 점은 사람들이 직관적으로하는 경우가 많지만 오해의 소지가있는 결론으로 ​​이어질 수있는 단계를 건너 뛸 수 있습니다. 이 기사는이 프로세스가 어떻게 생겼는지, 그리고 실제 상황에 어떻게 적용될 수 있는지를 명확히 밝힙니다.

기준 을 정의하는 첫 번째 단계는 제품 / 프로그램 / 정책의 성과를 파악하는 데 도움이되는 차원 또는 요소 목록을 생성하는 데 초점을 둡니다. 예를 들어 자동차를 평가하고 싶다면 좌석 수, 갤런 당 마일 (MPG), 충돌 안전 등급, 외관 (미학) 및 차량의 안전 등급을 포함 할 수 있습니다. 가격. 이것은 포괄적 인 기준 목록은 아니지만 자동차를 평가하는 방법에 대한 차원을 생각할 때 출발점을 제공합니다. 모든 기준이 똑같이 중요하지는 않다는 점에 유의해야합니다. 따라서 자동차 평가의 경우 안전 기준을 중요하게 생각하기 때문에 자동차 가격이 적당하고 멋지며 훌륭한 MPG를 얻을 수 있습니다 , 6 명이 앉을 수 있지만 가장 단순한 안전 충돌 테스트에서 실패하면 안전 장치가 아마도 가장 중요한 기능 중 하나이기 때문에 자동차로 자동 실패합니다.

기준을 파악한 후에는 기준 (예 : 표준)에서 무언가가 얼마나 잘 수행되어야 하는지를 결정해야합니다. 예를 들어 MPG를 기준으로 사용하는 경우 해당 기준에 대한 성능 표준 을 결정해야합니다. 이것은 우리가 그 기준에서 허용 가능한 수준의 성능을 알아 내야한다는 것을 의미하므로 10 MPG가 수용 가능합니까? 35 MPG? 50 MPG 또는 심지어 100 MPG? 이 프로세스에 접근하는 데는 여러 가지 방법이 있습니다. 가장 간단한 방법은 가스가 “좋은”수준으로 간주되기 위해 35 MPG 이상을 확보해야하는 가스 가격으로 인해 성능의 한계 수준을 설정하는 것입니다 MPG 성능 또 다른 방법은 포인트 시스템을 개발하는 것입니다. MPG가 좋을수록 더 많은 포인트를 얻을 수 있습니다 (예 : 10 MPG는 10 포인트, 100 MPG는 100 포인트를 얻습니다). 이 과정을 다른 기준과 함께 진행할 수 있으므로 자동차에 지출 할 금액에 대한 가격 지점을 설정하고 자리를 잡을 수있는 승객 수를 확인하고 등급 시스템을 개발할 수도 있습니다 차가 얼마나 좋은지.

기준 식별 및 표준 설정을 마쳤 으면 정보 수집 및 수집의 재미있는 부분이 시작됩니다. 자동차 예에서 이것은 우리가 고려중인 다른 자동차에 대한 기준 데이터를 수집하기 시작할 것임을 의미합니다. 데이터를 직접 수집 할 수 있으므로 가스 갤런을 자동차에 넣고 트랙 주위로 몰아 가면 얼마나 멀리 있는지 확인할 수 있습니다 (MPG 결정에 도움이 됨). 자동차 성능에 대한 기존 데이터 소스를 찾을 수 있습니다. 일부 성능 데이터는 쉽게 얻을 수 있습니다. 예를 들어 자동차에 들어갈 수있는 사람의 수는 자동차 내부를보고 결정할 수 있습니다. 다른 정보는 직접 수집하기가 어려우므로 다른 외부 소스에 의존해야합니다. 예를 들어, 충돌 안전 데이터는 고속도로 안전 보험 협회 (IIHS)에서 획득해야합니다. 일단 모든 측정이 완료되고 데이터가 수집되면 평가 과정에서 가장 흥미로운 단계가 시작됩니다.

합성 과정은 식별 된 기준, 결정된 성능 기준 및 수집 된 측정치를 취하여 최종 평가 결론 또는 판단을 내리는 곳입니다. 자동차 예에서 이것은 각 자동차에 대해 수집 한 데이터를 식별 한 성능 표준과 비교하고 해당 기준에서 얼마나 잘 수행했는지에 대한 점수를 할당한다는 것을 의미합니다. 예를 들어, 40 MPG (100 점 중 40 점), 허용 가능한 것으로 보이는 차량 (100 점에서 50 점을 얻음), 안전 충돌 테스트 (100 점에서 80 점), 매우 비쌉니다 (100 점 중 10 점). 그 차에 대한 총 점수는 가능한 400 점 중 180 점입니다. 다른 차량은 측정 과정에서 얼마나 잘 작동했는지에 따라 400 점에서 300 점, 400 점에서 50 점의 점수를 얻을 수 있습니다. 일단 포인트 배분을 보면 “최고의”차로 간주되는 것을 쉽게 파악할 수 있습니다.

이 과정의 일환으로이 차가 가장 중요하거나 중요한 기준 (예 : 충돌 테스트 안전)을 통과했는지 확인해야한다는 것을 기억하는 것도 중요합니다. 따라서 자동차가 다른 모든 기준 (가격 100 점, 미학에서 100 점, MPG에서 100 점)에서 잘 수행되지만 안전성 테스트가 실패하면 차를 고려에서 제외하고 “실패한”것으로 판단해야합니다. 차.

이 그림은 평가 접근의 논리가 추상적 개념을보다 명확하고 체계적으로 만들 수있는 방법에 대한 통찰력을 제공하기를 바랍니다. 평가 접근의 논리는 학생 유지 노력, 임신 예방 이니셔티브, 마약 재활 중재와 같은 프로그램의 평가와 같은 많은 다른 상황에서 사용될 수 있습니다. 또한 우리 삶에 영향을 미치는 다양한 정책 평가에 사용될 수 있으며, 예를 들어 설명 된대로 정기적 인 의사 결정 프로세스에 사용될 수 있습니다. 그러나 학교 프로그램을 평가할 때 학교장의 평가 기준이 학부모가 생각하는 것과 매우 다를 수 있으며 이러한 차이점을 협상하는 과정에서 신뢰성에 영향을 미칠 수 있다는 점 등 향후 기사에서 다루게 될이 과정에 복잡성이 추가됩니다 최종 평가 판단의 유용성. 우리는 다음 단원에서 이러한 복잡성과 의사 결정에서 평가의 역할을 탐구 할 것입니다.

참고 문헌

Scriven, Michael, “평가의 논리”(2007). OSSA 회의 자료실 . 138. https://scholar.uwindsor.ca/ossaarchive/OSSA7/papersandcommentaries/138