Що таке - рейтинг - і як побудувати рейтингову систему оцінок використання бально-рейтингової

Що таке "рейтинг" і як побудувати рейтингову систему оцінок?

Так що ж таке "рейтинг", і які загальні принципи побудови рейтингових систем оцінювання?

Слово "рейтинг" походить від англійського "to rate" (оцінювати) і "rating" (оцінка, оцінювання). Рейтинг - оцінка, деяка чисельна характеристика якої-небудь якісного поняття або вибудовування об'єктів в ряд по будь-якою ознакою, "накопичена оцінка" або "оцінка, що враховує передісторію". Рейтингова система розуміється:

1) як форма інтегрального контролю якості навчально-пізнавальної діяльності, спрямованої на стимулювання активної і зацікавленої роботи учнів;

2) як метод кількісної характеристики якості знань;

3) як діагностично-діяльний контроль якості навчання [7, с. 63].

Рейтингова технологія оцінювання результатів навчання учнів (студентів, школярів) за деякою дисципліни в найзагальнішому вигляді заснована на обліку накопичуваних ними оцінок в балах за виконання поточних робіт (лабораторних, контрольних, колоквіумів, рефератів, тестів та ін.) Або регулярно проведених контрольних заходів. На відміну від традиційного способу оцінювання, рейтингова технологія передбачає послідовне підсумовування оцінок учня з даної дисципліни протягом деякого періоду часу. Поточна рейтингова оцінка з дисципліни складається з оцінок всіх без винятку видів навчальної роботи і контролю знань, в тому числі не тільки роботи за навчальним планом, але також такої додаткової діяльності, як участь в олімпіадах, конкурсах, виступи на наукових товариствах, робота з відстаючими школярами і т.д. Метою введення бально-рейтингової технології оцінки успішності є:

ь комплексна оцінка якості навчальної роботи учнів при освоєнні ними навчальної програми;

ь стимулювання пізнавальної діяльності старшокласників та підвищення якості освітніх результатів в цілому;

ь підвищення рівня організації освітнього процесу.

Розглянемо педагогічні можливості рейтингової системи. Що дає вона учневі, які нові можливості надає вчителю? Основні переваги даної системи оцінювання і для учнів, і для вчителів представимо для наочності у вигляді таблиці:

Таблиця 3 Переваги рейтингової системи оцінювання

· Можливість точно і об'єктивно визначати підсумкову оцінку по предмету

Основні принципи рейтингової системи сформулюємо так:

1) оцінка не залежить від характеру міжособистісних відносин учителя й учня;

2) критерії оцінювання обговорюються заздалегідь;

3) учень сам може вибирати стратегію діяльності;

4) незнання не карається, стимулюється прогрес пізнання [5, с.36].

Залежно від педагогічної мети розрізняють види рейтингу:

ь рейтинг по предмету або по ряду предметів;

ь рейтинг по предмету загальний або окремо по теоретичним питанням, окремо щодо вирішення завдань і за додатковими балами;

ь рейтинг тимчасової - за деякий проміжок часу (чверть, півріччя, рік) або тематичний - з окремих розділів (тем).

Розглянемо властивості рейтингової системи оцінювання: відкритість, стимулювання, гнучкість. Одним з обов'язкових властивостей системи є відкритість - учні повинні знати "правила гри": знати "вартість" будь-якої діяльності, знати, як можна отримати бали і як їх втратити. Для виконання цієї властивості "таблиця вартості", або рейтинговий регламент повинні бути доступні учням. Можна уявити їх у вигляді плаката і повісити в кабінеті, можна зробити роздруківки таблиці для кожного учня. "Таблицю вартості" можна варіювати. Так, наприклад, якщо вчитель вважає, що учням варто більше уваги приділяти вирішенню завдань, бали за дану діяльність можна збільшити. Центральним принципом рейтингу виступає стимулювання. Необхідно використовувати стимулюючу роль додаткових балів. Всі зазначені додаткові бали приблизні і можуть змінюватися в залежності від активності учнів. При поуровневом підході до оцінки знань одні і ті ж дії, виконані на різних рівнях, оцінюються різною кількістю балів. Гнучкість рейтингової системи означає, що і вчитель, і учень можуть коригувати свою діяльність в будь-який момент в потрібному напрямку.

Важливою проблемою, яка потребує уваги педагога, є проблема методично грамотного складання рейтингу. Наведемо основні етапи складання рейтингу, представлені в навчально-методичному посібнику для вчителів Даутова О.Б. і Крилової О.Н .:

1) розділити матеріал на структурно-логічні самостійні модулі (або логічні блоки). Модулем може бути:

- окрема тема або розділ;

- самостійний цикл лабораторних робіт;

- індивідуальні домашні завдання;

- індивідуальна самостійна робота за вибором учнів;

- розділи, виділені для самостійного вивчення.

2) визначити нормативні бали на всі завдання і завдання навчального предмета (або правила нарахування балів);

3) встановити мінімальну кількість балів по кожному виду навчальної діяльності, яку повинен набрати учень в ході навчання;

4) скласти звід правил і положень, на основі яких буде проводитися оцінювання - рейтинговий регламент;

5) на основі програмних засобів організувати облік успішності учнів і розрахунок їх рейтингів;

6) в кінці чверті виставити загальну оцінку за роботу, яка була суму рейтингових оцінок за окремі модулі [5, с. 38].

Перш ніж представити загальну схему організації рейтингової системи, варто сказати, що рейтингова шкала значно більш чутлива, ніж бальна (наприклад, п'ятибальна), вона являє собою окремий випадок рангової шкали (див. Рис.1). Це дозволяє використовувати її для організаційних і управлінських рішень. Наприклад, в одній з недержавних шкіл було прийнято рішення про диференціацію оплати за навчання дітей в залежності від їх успіхів, які висловлюються рейтингами. В результаті одні батьки найбільш здібних дітей були звільнені від оплати зовсім, а батькам дітей, що створюють найбільші проблеми і потребують особливої ​​посиленої уваги, довелося доплачувати. В іншій недержавної школі вирішили щорічно відраховувати 10 учнів з 300 учнів, що займають нижні рядки рейтингового списку, а на їх місця приймати 10 новачків "з вулиці", надаючи останнім щасливий шанс [4, с. 47].

Рейтингова система по ряду ознак має велику схожість з кількісної шкалою, але, що важливо, такою не є. Рейтинг - це дійсне число. Але виходить воно або шляхом опитування суб'єктивних думок експертів, як рейтинги політичних діячів, або шляхом набору очок (пунктів, балів).

Рейтингова система володіє ні з чим незрівнянну гнучкістю. Можна, наприклад, мати її окремо по кожному предмету, а можна загальну. У список оцінюваних досягнень можуть бути включені і ненавчальних - важливі на даний період для статусу або розвитку школи.

Розглянемо більш детально, як будується рейтингова система, але спочатку необхідно ознайомитися з технікою побудови рейтингових шкал. Нехай потрібно ранжувати m об'єктів E1. E2. ..., Em і для цього залучені n експертів. Це означає, що кожен експерт повинен видати упорядковану послідовність даних об'єктів за ступенем вираженості оцінюється властивості, присвоїти кожному з об'єктів ранг від 1 до m. Позначимо r1к ранг, який присвоює першому об'єкту k-тий експерт, r2к - ранг, який цей же експерт присвоює другому об'єкту, і так далі. Наприклад, запис r23 = 1 означає, що другому об'єкту третій експерт присвоїв ранг 1. в результаті опитування експертів виходить матриця з m рядків і n стовпців (див. Таблицю).

Виберемо серед цих сум найбільшу Rmax і найменшу Rmin. Обчислимо розмах: # 63; R = Rmax - Rmin. Узгодженість експертних оцінок вважається досить високою, якщо # 63; R = m>. В іншому випадку потрібно більш точна і трудомістка додаткова перевірка по дисперсії. З імовірністю 90% між експертними оцінками є достатня узгодженість, якщо

де = - середнє арифметичне, а D = - дисперсія.

Формула застосовна для кількості оцінюваних об'єктів від трьох до двадцяти.

Якщо узгодженість експертів досягнута, то подальша процедура проста: об'єкту з найменшою сумою рангів присвоюється ранг 1, наступного - ранг 2 і т.д. Об'єкт з найменшою сумою рангів отримує підсумковий ранг m.

Розглянемо це в конкретних числах. Припустимо, що в конкурсі на оригінальне рішення логічних задач претендують на перемогу 4 учні: А, Б, В, Г. Журі з п'яти вчителів-математиків має присудити їм місця і нагороди. Для цього кожен член журі вказує місце, яке він вважає за потрібне присудити кожному з переможців. В результаті отримані наступні оцінки:

Якщо експертні оцінки в групі не узгоджені (не виконується критерій по дисперсії), то слід переформувати групу експертів і повторити процедуру. При цьому може змінюватися число експертів. Зауважимо, що критерій за розмахом дуже жорсткий. Наприклад, якщо 3 експерта по 4 об'єктах дали однакові оцінки, то Rmax = 12, Rmin = 3, # 63; R = 9 і умова 9> не виконується, тобто оцінки не узгоджені. Але якщо те ж саме зробили 4 експерта, то Rmax = 16, Rmin = 4, # 63; R = 12 і 12>, отже, їх оцінки узгоджені [3, с. 43].

Повернемося до рейтинговою системою. Незалежно від того, який варіант визначено - загальна шкала або попредметно, необхідно скласти список всіх оцінюваних навчальних дій, тобто від того, за рахунок чого учень зможе набирати очки. Завдання складання такого списку не так проста, як може здатися на перший погляд. Її можна поєднати з процедурою ранжирування, коли кожен експерт наводить оцінювані дії вже впорядкованим списком, але в даному випадку буде занадто багато елементів списку, які не мають повного комплекту оцінок. В результаті неможливо застосувати процедури перевірки на узгодженість. Тому спочатку треба отримати максимально повний список, опитавши вчителів і додавши нові пропозиції до вже наявних. Потім слід ранжувати отриманий список, застосовуючи отриману вище процедуру. Для цього створюється експертна група з найбільш професійно компетентних, досвідчених вчителів. У разі, якщо не вдається домогтися узгодженості оцінок, можна змінити її склад або виключити зі списку оцінюваних дій ті, за якими розкид експертних оцінок занадто великий.

Припустимо, що ми отримали будь-якої ранжируваних список навчальної діяльності. Щоб перетворити цей список в рейтингову шкалу, необхідно домовитися, скільки балів буде присуджуватися за кожен вид роботи. Можна, зокрема, залишити в якості ціни кожної роботи її номер в списку. З іншого боку, багато вчителів воліли б закласти в шкалу ще і якість виконаної роботи. Тоді ціна кожного виду діяльності може наростати з деяким кроком. Обидва випадки ілюструють рівномірну шкалу. Але можна використовувати в деяких випадках і нерівномірну шкалу. Відповідно черговий крок побудови рейтингової системи полягає в оцінці всіх елементів списку, розстановці вагових коефіцієнтів.

Тепер розглянемо приклад побудови бально-рейтингової системи для оціночної шкали. Для складання вихідного списку видів діяльності експертна група з 16 осіб була досить довільно розділена на 4 рівні підгрупи, кожна з яких склала свій варіант списку. З цих варіантів був складений зведений список, але після обговорення і коригування він придбав такий вигляд:

1. Твір, есе.

2. Реферат, виклад, огляд.

3. Додавання, репліка.

4. Постановка питання, завдання.

5. Відповідь на питання.

6. Рецензія на виступ.

7. Виступ з вирішенням завдання.

8. Виготовлення наочного матеріалу.

9. Виконання домашнього завдання.

10. Виступ з обов'язкової літературі.

11. Виступ по додатковій літературі.

12. Письмове рішення задачі в класі.

13. Участь в конкурсі з предмету.

14. Перемога в конкурсі з предмету.

15. Асистування вчителю.

Потім кожен з 16 експертів ранжирував цей список відповідно до своїх уявлень про цінності (див. Додаток 1). Застосувавши алгоритм, знаходимо середній ранг кожного виду діяльності. У першому стовпці матриці - номери видів діяльності згідно списку, наведеного вище. Перевірка за критерієм на розмах (# 63; R = 214-57 = 157; 157>) дозволяє визнати ці експертні оцінки узгодженими, незважаючи на очевидний розкид думок експертів за вагою тих чи інших параметрів. В результаті виходить ранжируваних список видів діяльності:

1. Перемога в конкурсі з предмету.

2. Твір, есе.

3. Виступ по додатковій літературі.

4. Реферат, виклад, огляд.

5. Письмове рішення задачі в класі.

6. Виступ з вирішенням завдання.

7. Виступ з обов'язкової літературі.

8. Рецензія на виступ.

9. Асистування вчителю.

10. Постановка питання.

11. Відповідь на питання.

12. Виконання домашнього завдання.

13. Виготовлення наочного матеріалу.

14. Участь в конкурсі з предмету.

15. Додавання, доповнення, репліка.

Отриманий список вже можна вважати оціночної шкалою. Однак очевидно, що ця рівномірна шкала недостатньо стимулює учня на діяльність вищого порядку. Тому кожному виду діяльності можна привласнити рейтингове число, сукупність яких і робить шкалу нерівномірною, але більш раціональною. Відповідність видів діяльності (параметрів) і їх рейтингових чисел (балів) наведено в таблиці нижче:

При використанні цієї шкали на практиці даний набір рейтингових чисел може бути значно змінений. Може він змінюватися і на певний час для заохочення необхідних на цей час видів діяльності. Для таких змін не потрібно повторення всієї процедури побудови шкали.

Як можна підводити підсумки рейтингу? Можна розділити всі дії учнів на основні (оціночні) і додаткові. Тоді при підведенні підсумків можливі наступні варіанти:

а) в рівній мірі враховувати і оціночні бали, і додаткові (але в цьому випадку є можливість за рахунок неучбовому дій отримувати завищені оцінки, які не відповідають дійсним знанням і вмінням учня);

б) можна враховувати лише оціночні бали, а додаткові - тільки при спірною позначці (але в цьому випадку в учнів немає ніякого стимулу отримувати додаткові бали в великій кількості);

в) враховувати оціночні бали і додаткові, але обмежити максимум останніх;

г) враховувати оціночні бали і додаткові, але ввести при цьому коефіцієнт відповідності. Наприклад, при виставленні підсумкової позначки додавати до оціночних 10% додаткових балів, тобто коефіцієнт відповідності дорівнює 0,1 [5, с. 40].

Необхідно відзначити, що при всіх своїх плюсах впровадження рейтингової системи пов'язане з низкою ризиків психологічного та організаційного характеру.

По-перше, сама ідея ранжирування дітей є досить спірною в педагогіці - чи не вийде так, що від введення рейтингу виграють тільки ті, хто займає в ньому верхні рядки, а іншим рейтинг завдасть психологічну травму? Однак практика і опитування учасників освітнього процесу показують, що в більшості випадків це не так. Різні рейтинги стали невід'ємною частиною нашого життя і не викликають різкого відторгнення. Крім того, рейтинг - інструмент не покарання, а заохочення і стимулювання, як вже зазначалося вище. Проте, вводити рейтингову систему має сенс тільки для старшокласників, які вже здатні до адекватної самооцінки і до цілеспрямованої роботи по саморозвитку.

По-друге, існує ризик необ'єктивної оцінки. Але він виявляється набагато меншим, ніж у звичайній п'ятибальною системою, тому що рейтинг враховує різні види досягнень. Як правило, рейтингова таблиця відображає реальний статус учня в колективі.

По-третє, індивідуалізація може перетворитися в індивідуалізм: кожен зацікавлений тільки в особистому зростанні і готовий на цьому шляху "ставити палки в колеса" найближчим товаришам. Але це можна запобігти, поставивши персональні досягнення в залежність від підсумків командних виступів і рівня згуртованості класу.