Резюме. Материалът съдържа общи указания за оценяване и един от разсекретените текстове, използвани в международното изследване PIRLS 2011, заедно със задачите към него и ръководството за оценяването им. Текстът е подходящ за външно оценяване на ученици от 4. клас. TIMSS и PIRLS са търговски марки на Международната асоциация за оценяване на постиженията в образованието (IEA). Отпечатаните материали са адаптирани на български език от Марина Мавродиева, главен експерт в Центъра за контрол и оценка на качеството на училищното образование, Национален координатор на PIRLS 2011 за България. Източник: PIRLS 2011 Assessment. Авторски права © 2013 International Association for the Evaluation of Educational Achievement (IEA). Издател: TIMSS & PIRLS International Study Center, Lynch School of Education, Boston College, Chestnut Hill, MA and International Association for the Evaluation of Educational Achievement (IEA), IEA Secretariat, Amsterdam, the Netherlands.

Ключови думи: PIRLS 2011, international study, assessment, scoring guides

PIRLS 2011

Международното изследване на уменията за четене PIRLS 2011 измерва способностите на учениците от 4. клас да разбират съдържанието на различни текстове, като използват набор от мисловни процеси. То се фокусира върху две от основните цели при четенето на учениците във и извън училище:

– четене с разбиране;

– извличане и използване на информация;

Тези цели определят избора на текстовете, които са включени в изследването, като всеки има характеристиките на типичен текст за четене за една от двете цели. За всяка цел има определени четири различни мисловни процеса:

– търсене и извличане на определена информация;

– извеждане на преки заключения;

– интерпретиране и обобщаване на идеи и информация;

– анализ и оценка на съдържанието, езика и структурата на текста.

Всеки въпрос за разбиране е изготвен да извлича и оценява един от тези мисловни процеси.

В PIRLS всеки ученик работи върху една тестова книжка, съдържаща два блока. Времето, предвидено за работа върху всеки блок, е 40 минути и включва прочитане на текста и отговаряне на въпросите след него. Използват се два различни формата за въпросите – с многовариантен избор (с четири възможности за отговор, от които само един е правилен) и със свободен отговор. Отговорите на въпросите със свободен отговор се оценяват от обучени оценители, които използват специално разработени критерии за оценяване, според които за всеки отговор се дава определен код.

Общи указания за оценяване

Целта на ръководството за оценяване на въпросите със свободен отговор е да даде насоките и критериите, необходими на оценителите да кодират надеждно и валидно отговорите на учениците. Всеки въпрос може да носи максимум 1, 2 или 3 точки, като това е отбелязано в полето за отговор до въпроса. В зависимост от нивото на разбиране или от обхвата на информацията от текста, необходима за правилното отговаряне на въпроса, отговорът на ученика може да бъде кодиран с 1, 2 или 3 точки.

Критериите за оценяване, изготвени за всеки въпрос със свободен отговор, описват специфичните аспекти на отговорите, като ги причисляват към определено ниво на разбиране. Те ясно определят рамките между отделните нива на разбиране и се опитват да обхванат всички възможни отговори на учениците, като целят:

– да бъдат максимално конкретни, за да може отговорите на учениците да са сравними сред всички участващи страни;

– да се предложат достатъчно и подходящи примери, които включват ученически отговори за всяко ниво на разбиране.

Всички въпроси изискват поставянето на код 0 при неправилно разбиране на аспектите от текста, които въпросът измерва. Отговорите, по-лучили код 0, показват неразбиране на текста или въпроса или включват информация, която е твърде обща, неправилна или недостатъчна, за да се даде по-висок код.

Следните таблици обобщават оценяването на въпросите със свободен отговор, като описват степента и същността на разбирането, свързани с всяко ниво.

Общи въпроси и процедури

От изключителна важност за надеждността на изследването е отговорите на учениците да бъдат оценени съгласувано, независимо от оценителя, който ги е оценявал. Това означава, че всички оценители трябва да оценяват отговорите по един и същи начин, съгласно ръководството за оценяване. Напълно е възможно в процеса на оценяване да възникнат двусмислени интерпретации. В такива случаи, моля, обърнете се за съвет.

Всеки оценител трябва да има предвид, че PIRLS изследва само грамотността при четене и не се интересува от уменията за писмено изразяване. Напълно е възможно ученик да получи пълен брой точки за отговора си на някой въпрос, въпреки че изборът му на думи, пунктуацията и правописът му са некоректни.

Понякога учениците посочват отговори, които са верни по принцип, но не са свързани с текста и следователно не отговарят на критериите за правилен отговор. Отговори, които са интуитивни и оригинални и несвързани с текста, не трябва да се оценяват като правилни.

Когато един оценител оценява всички отговори на един ученик, е важно да се внимава оценката на даден въпрос да не се влияе от другите отговори на ученика. Оценителите трябва да оценяват всеки отговор независимо от останалите отговори на ученика, като се опитват да не си създават представа за способностите на ученика. Този проблем може да се избегне, когато книжките се оценяват въпрос по въпрос.

Много често отговорите на учениците съдържат освен напълно коректна информация и такава, която е недопустима (съгласно критериите) или несвързана с текста. Общото правило в такъв случай е частта от отговора, съдържаща недопустима информация, да бъде игнорирана и да се оцени само тази част, коятосъдържа допустима информация. Изключение от това общо правило има, когато:

– Двете части (с допустимата и с недопустимата информация) ясно си противоречат. В случаи, когато е ясно, че ученикът не е бил сигурен как да отговори и е посочил разнообразни или противоречиви отговори, отговорът трябва да се счита за неправилен.

– Отговорът изисква посочването на точно определени неща от текста – допустими думи или изрази, изредени в специален списък в критериите за оценяване.

Оценяването на отговорите на ученици от 4. клас върху въпроси, свързани с разбирането на текст, е голямо предизвикателство за всеки. Много често учениците интерпретират нещата, които са прочели, по необичаен и изненадващ начин, което води до срещането на много неочаквани и невключени в критериите за оценяване отговори. Въпреки това критериите за оценяване винаги трябва да бъдат основата за поставянето на оценка на отговорите на учениците, а оценителите не трябва да се опитват да допускат какво може би е имал предвид ученикът, когато е отговорил по необичаен начин.

Вражески сладкиш

Лятото бе прекрасно, докато Джереми Рос не се премести точно до моя най-добър приятел Стенли. Не харесвах Джереми. Организира парти, а аз дори не бях поканен. Но най-добрият ми приятел Стенли беше сред поканените. Никога преди не бях имал враг, докато Джереми не се премести в квартала. Татко ми каза, че когато бил на моята възраст, той също имал врагове. Но знаел начин да се отърве от тях. Татко измъкна овехтял лист хартия от една готварска книга.

– Вражески сладкиш – рече доволно той. Може би се чудите какво точно има във Вражеския сладкиш. По думите на татко рецептата била толкова тайна, че дори на мен не можел да каже. Умолявах го да ми каже нещичко – каквото и да е.

– Ще ти кажа следното, Том – рече ми той. – Вражеският сладкиш е най-бързият известен начин да се отървеш от враговете си.

Това ме накара да се замисля. Какви ли отвратителни неща трябваше да сложа във Вражеския сладкиш? Занесох на татко земни червеи и камъни, но той ми ги върна.

Излязох навън да играя. През цялото време чувах шумовете, които татко вдигаше в кухнята. В крайна сметка лятото можеше и да бъде прекрасно. Опитах се да си представя колко ли ужасно щеше да мирише Вражеският сладкиш. Но до мен достигна доста приятен мирис. Щом разбрах, че идваше от нашата кухня, се озадачих.

Влязох вътре да попитам татко какво се беше объркало. Вражеският сладкиш не би трябвало да мирише хубаво. Но татко беше хитър.

– Ако мирише лошо, врагът ти никога няма да го изяде – каза ми той. Виждаше се, че вече е приготвял този сладкиш.

Таймерът на фурната иззвъня. Татко си сложи кухненските ръкавици и извади сладкиша. Изглеждаше доста апетитен! Започвах да разбирам. Но все пак не бях сигурен как действаше този Вражески сладкиш.

Какво точно правеше с враговете? Може би от него косата им окапваше или пък дъхът им започваше да мирише. Попитах татко, но без резултат.

Докато сладкишът се охлаждаше, татко ме инструктира какво да правя.

– За да се получи – прошепна ми той, – трябва да прекараш един ден с врага си. Дори още по-лошо – трябва да бъдеш мил с него. Не е лесно. Но само така Вражеският сладкиш ще подейства. Сигурен ли си, че искаш да го направиш?

Разбира се, че бях сигурен.

Просто трябваше да прекарам един ден с Джереми и после той щеше да изчезне от живота ми. Отидох с колелото до къщата му и почуках на вратата.

Когато отвори, Джереми изглеждаше изненадан.

– Ще излезеш ли да си играем? – попитах.

Изглеждаше объркан.

– Ще ида да питам мама – отвърна той. Върна се с обувките си в ръка.

Покарахме малко колела, после обядвахме. След обяда отидохме вкъщи.

Странно, но ми беше забавно с моя враг. Не можех да го кажа на татко, тъй като толкова се беше постарал да приготви сладкиша.

Играхме си, докато татко ни извика да вечеряме.

Беше приготвил любимата ми храна. Оказа се, че е любима и на Джереми! Може би в крайна сметка Джереми не беше толкова лош. Започвах да си мисля, че щеше да е добре да забравим за Вражеския сладкиш.

– Татко – рекох. – Толкова е хубаво да имаш нов приятел. – Опитвах се да му подскажа, че Джереми вече не ми беше враг. Но татко само се усмихна и кимна. Сигурно си мислеше, че просто се преструвам.

След вечерята татко донесе сладкиша. Сложи по едно парче в три чинии и подаде една на мен и една – на Джереми.

– Ах! – възкликна Джереми, гледайки сладкиша.

Изпаднах в паника. Не исках Джереми да яде Вражеския сладкиш! Той ми беше приятел!

– Не го яж! – извиках. – Не е хубав!

Вилицата на Джереми спря във въздуха, преди да достигне до устата му. Погледна ме странно. Изпитах облекчение. Бях му спасил живота.

– Ако не е хубав – каза Джереми, – защо баща ти вече изяде половината?

И наистина – татко ядеше Вражеския сладкиш.

– Вкусно – измърмори татко. Седях там и ги гледах как ядат. И косъм не падаше от главите им! Изглеждаше безопасно, така че опитах хапчица. Беше изключително вкусен!

След десерта Джереми ме покани да отида у тях на следващата сутрин.

Колкото до Вражеския сладкиш, още не знам как се приготвя. Продължавам да се чудя дали враговете наистина го мразят, дали косата им окапва или пък дъхът им започва да мирише лошо. Но не знам дали някога ще получа отговор, тъй като просто загубих най-големия си враг.

Въпроси

1. Кой разказва историята?

А) Джереми

Б) Бащата

В) Стенли

Г) Том

2. Защо в началото на историята Том мисли Джереми за враг?

3. Напишете една съставка, която според Том би трябвало да има във Вражеския сладкиш.

4. Намерете частта от историята до картинката на парче сладкиш: Защо Том мисли, че в крайна сметка лятото може и да бъде прекрасно?

А) На него му харесва да играе навън.

Б) Той е развълнуван от плана на баща си.

В) Намерил си е нов приятел.

Г) Той иска да опита Вражеския сладкиш.

5. Как се чувства Том, когато за първи път помирисва Вражеския сладкиш? Обяснете защо се чувства така.

6. Какво според Том може да се случи, когато неговият враг опита Вражеския сладкиш?

Напишете едно нещо.

7. Кои са двете неща, които бащата на Том му казва да направи, за да по-действа Вражеският сладкиш?

8. Защо Том отива в къщата на Джереми?

А) за да покани Джереми на вечеря

Б) за да помоли Джереми да остави Стенли на мира

В) за да покани Джереми да си играят

Г) за да помоли Джереми да бъдат приятели

9. Кое изненадва Том в деня, прекаран с Джереми?

10. Защо по време на вечерята Том започва да си мисли, че с баща му трябва да забравят за Вражеския сладкиш?

А) Том не иска да дели десерта си с Джереми.

Б) Том не мисли, че Вражеският сладкиш ще подейства.

В) Том започва да харесва Джереми.

Г) Том иска да запази Вражеския сладкиш в тайна.

11. Как се чувства Том, когато баща му подава на Джереми парче от Вражеския сладкиш?

А) уплашен

Б) доволен

В) изненадан

Г) объркан

12. Каква тайна за Вражеския сладкиш запазва бащата на Том?

А) че това е обикновен сладкиш

Б) че вкусът му е отвратителен

В) че е любимата му храна

Г) че сладкишът е отровен

13. Прочетете следното изречение от края на разказа: „След десерта Джереми ме покани да отида у тях на следващата сутрин.“

Какво подсказва то за момчетата?

А) Те все още са врагове.

Б) Те не обичат да играят в къщата на Том.

В) Те искат да хапнат още Вражески сладкиш.

Г) Те може да станат приятели в бъдеще.

14. Използвайте прочетеното, за да обясните защо всъщност бащата на Том е приготвил Вражеския сладкиш.

15. Какъв човек е бащата на Том? Дайте пример от нещата, които прави в разказа, за да го докажете.

16. Каква поука можете да извлечете от разказа?

ВРАЖЕСКИ СЛАДКИШ

РЪКОВОДСТВО ЗА ОЦЕНЯВАНЕ НА ВЪПРОСИТЕ СЪС СВОБОДЕН ОТГОВОР

Вражески сладкиш, Въпрос 2

2. Защо в началото на историята Том мисли Джереми за враг?

Цел: Четене с разбиране

Процес: Извеждане на преки заключения

Вражески сладкиш, Въпрос 3

3. Напишете една съставка, която според Том би трябвало да има във Вражеския сладкиш.

Цел: Четене с разбиране

Процес: Търсене и извличане на определена информация

Вражески сладкиш, Въпрос 5

5. Как се чувства Том, когато за първи път помирисва Вражеския сладкиш? Обяснете защо се чувства така.

Цел: Четене с разбиране

Процес: Извеждане на преки заключения

Вражески сладкиш, Въпрос 6

6. Какво според Том може да се случи, когато неговият враг опита Вражеския сладкиш? Напишете едно нещо.

Цел: Четене с разбиране

Процес: Търсене и извличане на определена информация

Вражески сладкиш, Въпрос 7

7. Кои са двете неща, които бащата на Том му казва да направи, за да подейства Вражеският сладкиш?

Цел: Четене с разбиране

Процес: Търсене и извличане на определена информация

Вражески сладкиш, Въпрос 9

9. Кое изненадва Том в деня, прекаран с Джереми?

Цел: Четене с разбиране

Процес: Извеждане на преки заключения

Вражески сладкиш, Въпрос 14

14. Използвайте прочетеното, за да обясните защо всъщност бащата на Том е приготвил Вражеския сладкиш.

Цел: Четене с разбиране

Процес: Интерпретиране и обобщаване на идеи и информация

Вражески сладкиш, Въпрос 15

15. Какъв човек е бащата на Том? Дайте пример от нещата, които прави в разказа, за да го докажете.

Цел: Четене с разбиране

Процес: Интерпретиране и обобщаване на идеи и информация

Вражески сладкиш, Въпрос 16

16. Каква поука можете да извлечете от разказа?

Цел: Четене с разбиране

Процес: Анализ и оценка на съдържанието, езика и структурата на текста