'

Достижение максимального влияния: руководство для менеджеров национальных систем оценивания

Понравилась презентация – покажи это...





Слайд 0

Учебный курс «Информирование различных целевых групп о результатах оценки учебных достижений школьников» 27-30 сентября 2011 года, г. Москва Достижение максимального влияния: руководство для менеджеров национальных систем оценивания Скотт Мюррей, DataAngel Policy Research Inc. Telephone: (613) 240-8433 e-mail address: dataangel@mac.com


Слайд 1

1/16/2015 2 Цель курса: Обеспечение руководителей национальных исследований методикой для получения максимальной отдачи от результатов оценки


Слайд 2

1/16/2015 3 Методология включает в себя: Преставление о том, кто будет пользователями данных оценки и их особенностях Понимание областей применения этих данных пользователями и последствий этого использования для статистических свойств данных


Слайд 3

1/16/2015 4 Учет ваших информационных активов (ресурсов) Планирование набора продуктов и услуг, которые отвечают широкому спектру пользователей и вариантов использования


Слайд 4

1/16/2015 5 Стратегические цели: Достижение максимального влияния включает в себя максимальную социальную отдачу от государственных, бюрократических и политических вложений, которые были осуществлены для проведения оценивания


Слайд 5

1/16/2015 6 Тактические цели: Предоставление полезных продуктов и услуг в распоряжение ваших сторонников Предвидение и учет вопросов, поднятых вашими критиками Проведение не менее трех (3) циклов оценки с тем, чтобы обеспечить возможность оценки


Слайд 6

1/16/2015 7 Пользователи и их технические компетенции: Отдельные учащиеся Учителя Родители


Слайд 7

1/16/2015 8 Руководители системы образования Руководители отделов образования и директора школ Руководители и специалисты школьных советов Старшие администраторы Профессиональные объединения (учителей, директоров школ)


Слайд 8

1/16/2015 9 Представители общественности Преподаватели системы образования Общественные организации, научно-исследовательские институты и общественные деятели


Слайд 9

1/16/2015 10 Политические деятели и лица, определяющие политику: Все министры и Министерства Труда Культуры Здравоохранения По делам налогообложения Социального развития Сельского хозяйства Промышленности


Слайд 10

1/16/2015 11 Средства массовой информации


Слайд 11

1/16/2015 12 Задание 1: Пользователи Командам дается 30 минут на то, чтобы: Подготовить подробный список тех, кто использует данные национального оценивания Задание 1 подразумевает, что каждая команда заполнит в Excel таблицу, где в отдельных колонках будут определены следующие элементы: каждый из потенциальных пользователей данных национального оценивания в их стране, уровень технической квалификации в использовании результатов список ключевых лиц и их институциональная принадлежность с указанием: - их предрасположенность к данным оценивания - относительной важности по 10-ти бальной шкале Каждой команде дается 15 минут на презентацию


Слайд 12

1/16/2015 13 Виды использования: Административного характера • развитие/образование • сертификация Неадминистративного характера • формирование знаний • разработка стратегий и программ • мониторинг • оценка


Слайд 13

1/16/2015 14 Выработка политики – комплексный процесс : Выработка политики включает переговоры, компромисс, и ответ на давление от разного рода источников.


Слайд 14

1/16/2015 15 Контекст имеет значение: Элементы выработки политики в образовании Точка зрения политиков, идеологические позиции, Доступный бюджет, Точка зрения и интересы заинтересованных лиц ( stakeholders ) и групп, Традиционные подходы и новомодные веяния. Объективные факты, включая результаты национального оценивания


Слайд 15

1/16/2015 16 Привлечение к работе ваших критиков: Чтобы сделать влияние на выработку политики максимальным рассмотрите Привлечение к работе ключевых заинтересованных лиц (stakeholders) на ранней стадии разработки Включение в опросники для учителей, директоров школ и др. некоторых вопросов, которые вызывают их озабоченность Влияет ли размер класса на успеваемость учащихся? Дает ли система образования равные возможности? Представление интересов заинтересованных лиц (stakeholders) в управляющем комитете по проведению оценки


Слайд 16

1/16/2015 17 Количественные аспекты: • Получение численных данных • Взаимозависимости на данном отрезке времени • Взаимозависимости в динамике по времени • причинно-следственные связи • обусловленные вероятности


Слайд 17

1/16/2015 18 Неколичественные аспекты: • стилизация фактической информации • субъективные интерпретации


Слайд 18

1/16/2015 19 Задание 2: Пользователи Участники должны составить список для каждого пользователя возможных, с их точки зрения, применений полученных данных. Нет необходимости на данной стадии ограничивать перечень применений, которые данное оценивание может поддержать с технической точки зрения. Участникам дается примерно 30 минут для того, чтобы расширить их таблицу, внося новые ряды для каждого пользователя по каждому из применений. По завершении данной работы участники должны подготовить 15–ти минутную презентацию своей матрицы применений и пользователей, фокусируя внимание на том, где они предполагают встретить трудности в осуществлении задуманного из-за технических возможностей пользователей или из-за того, что требует данное применение с точки зрения технического оснащения оценивания.


Слайд 19

1/16/2015 20 Информационные активы: Спецификации Банки заданий Оценка достижений Характеристика выборки исследования


Слайд 20

1/16/2015 21 Взаимосвязь достижений и характеристик выборки исследования: в целом и для отдельно взятых подгрупп популяции Примеры ошибок в заданиях теста Стандарты достижений Данные оценки


Слайд 21

1/16/2015 22 Спецификации: Цели Факторы, вызывающие трудности Диапазоны Продолжительность Набор заданий Свидетельства валидности, надежности, сопоставимости


Слайд 22

1/16/2015 23 Банки заданий: Природа теста Производное применение


Слайд 23

1/16/2015 24 Оценка достижений


Слайд 24

1/16/2015 25 Оценка достижений (продолжение) Распределение баллов по грамотности


Слайд 25

1/16/2015 26 Источник: Программа Международной Оценки Учащихся, 2000. Показатели Канады по грамотности чтения близки к наивысшим Оценка достижений


Слайд 26

1/16/2015 27 Оценка достижений Сравнительное распределение по уровням грамотности


Слайд 27

1/16/2015 28 Оценка достижений Профиль школьных достижений по языку, по типу школы, в регионе


Слайд 28

1/16/2015 29 Государственные чиновники Семейные условиям учащихся Образовательная среда учителя Интересы, увлечения и навыки Учебный план и педагогический менеджмент Качество школьного обучения Управление учреждением Политика и институциональный менеджмент Директор Множественные/многоуровневые зависимости


Слайд 29

1/16/2015 30 Множественные/многоуровневые зависимости Для каждой комплексной проблемы есть ответ, который очевиден, прост и неверен” Mencken Расхождение при комплексной выборке


Слайд 30

1/16/2015 31 Множественные/многоуровневые зависимости Должен я использовать воспроизводимые веса?


Слайд 31

1/16/2015 32 Различия в уровне успеваемости по чтению больше внутри школ, чем между школами Различия в уровне успеваемости между школами Различия в уровне успеваемости внутри школ Вариации объясняются различиями в институциональных структурах Множественные/многоуровневые зависимости


Слайд 32

1/16/2015 33 Множественные/многоуровневые зависимости


Слайд 33

1/16/2015 34 Множественные/многоуровневые зависимости Ближайший-----------------------Конечный -20 -15 -10 -5 0 5 10 15 20 Расхождение в успеваемости по чтению по провинциям NF NB NS ON QU AB BC MB SK AB BC QU SK ON MB NS NF PE PE Скорректировано для ОИВ и Семейного Окружения (СО) NB Скорректировано для ОИВ, СО и Школьного Контекста (ШК) Скорректировано для ОИВ, СО, ШК, и Процесса Обучения (ПО) Скорректировано для Ошибки Измерения и Выборки (ОИВ)


Слайд 34

1/16/2015 35 Примеры ошибок в заданиях тестов: Сравнения с учебным планом и спецификацией


Слайд 35

1/16/2015 36 Стандарты достижений: Четко сформулированные стандарты Предполагаемые стандарты


Слайд 36

1/16/2015 37 Продукты для родителей, учителей, директоров школ, школьных округов:


Слайд 37

1/16/2015 38 Отчеты об учебной успеваемости в Катаре:


Слайд 38

1/16/2015 39


Слайд 39

1/16/2015 40 Примеры ошибок в заданиях:


Слайд 40

1/16/2015 41 Данные оценивания: Микро-данные Инструменты составления таблиц


Слайд 41

1/16/2015 42 Задание 3: Основные продукты и услуги Участникам дается 60 минут на то, чтобы добавить в их развернутую таблицу перечень продуктов и услуг Для каждого продукта они должны создать новую закладку со спецификацией данного продукта, используя шаблон Каждой команде предоставляется 10 минут для презентации своего плана


Слайд 42

1/16/2015 43 Ошибки и погрешности в системах оценивания: Несовершенная теория Несовершенное измерение Выборка Подсчёт баллов Проведение Оценка достижений Анализ Отчетность


Слайд 43

1/16/2015 44 Множественные сравнения профессионального уровня грамотности


Слайд 44

1/16/2015 45 Задание 4: Ошибки и погрешности Участникам дается 30 минут для того, чтобы представить процедуры, которые они использовали для определения ошибок и погрешностей в: Несовершенном измерении Ошибках в выборке Ошибках в выставлении баллов Ошибках в проведении Ошибках в оценке достижений Ошибках в анализе Ошибках в отчетности Участники также должны классифицировать каждую ошибку по одной из следующих категорий: Важный источник ошибки, важная погрешность Важный источник ошибки, незначительная погрешность Важный источник ошибки, неискаженный результат Незначительный источник ошибки, незначительная погрешность Незначительный источник ошибки, неискаженный результат Не источник ошибки


Слайд 45

1/16/2015 46 Национальные доклады Цели Что измерялось Процесс разработки Почему это важно Как и когда собирались данные Как описывались достижения Источники ошибок Основное распределение по ключевым группам Факторы Тренды Последствия для политики Подробные таблицы данных


Слайд 46

1/16/2015 47 Сюжетные линии национального доклада : Предполагаемая аудитория Ключевые сообщения Виды воздействий: • Универсальные • Целевые • направленные на учебные достижения • вязанные с социально-экономическим статусом (СЭС) учащихся • компенсирующие или уравнивающие вмешательства • ковлекающие вмешательства


Слайд 47

1/16/2015 48 Практическое осуществление: роли Менеджер проекта Аналитик по работе с данными Научный ассистент Редактор Литературный редактор Специалист по производству


Слайд 48

1/16/2015 49 Тематические отчеты: По проблематике: Справедливость Эффективность По отдельным подгруппам выборки: Со специальными потребностями Языковые меньшинства Иммигранты Учащиеся из сельской местности Школы с хорошими показателями


Слайд 49

1/16/2015 50 Задание 5: Национальные доклады Участники должны определить следующее: Кто является предполагаемой аудиторией для национального доклада Каковы ключевые мысли, которые они хотят донести в национальном докладе Подробная схема национального доклада включает в себя: Краткое изложение стиля, который будет использоваться Размер всех разделов доклада и коммуникативная цель для каждого раздела Три позиции доклада, которые скорее всего будут подвергнуты критике, вероятная природа данной критики и как структура и содержание национального доклада попытаются ответить на данную критику Участники затем выступят перед группой с 15-ти минутной презентацией своего плана, уделяя особое внимание главной линии доклада, типам данных и форме представления данных.


Слайд 50

1/16/2015 51 Практическое осуществление : Инструменты Программное обеспечение для базового анализа Программное обеспечение для комплексного анализа Программное обеспечение для набора текста Программное обеспечение для подготовки оригинал-макета Оценка изменений Программное обеспечение для составления таблиц


Слайд 51

1/16/2015 52 Задание 6: График создания, ресурсы и бюджет Участникам будет дано примерно 30 минут для написания проекта детального графика создания своего национального доклада и его оценочной стоимости, а также любых иных запланированных докладов. Там, где возможно, они определят конкретных людей, которые будут ответственны за каждый вид деятельности. Затем участники представят свой план, уделяя особое внимание определению следующих позиций: Предположения, которые они сделали относительно временных и стоимостных затрат, связанных с ключевыми действиями Любые пробелы, которые у них имеются в специальных знаниях, и как они намерены их устранять


Слайд 52

1/16/2015 53 Стратегии диссеминации: Первичные и вторичные способы распространения Ценообразование Маркетинг


Слайд 53

1/16/2015 54 Первичные способы распространения: Печатный вариант Электронный документ (доступный для скачивания) Электронный документ (на носителе) Телевидение Радио Мультимедийные средства


Слайд 54

1/16/2015 55 Вторичные способы распространения: Реклама Внутренние брифинги Внешние брифинги Пресс релизы, конференции, наборы материалов для прессы Интервью Публицистические статьи Новостные письма Конференции и симпозиумы


Слайд 55

1/16/2015 56 Ценообразование: Низкие цены или бесплатно!!!


Слайд 56

1/16/2015 57 Задание 7: Способы распространения и маркетинг Участникам дается 30 минут на то, чтобы: составить перечень и описать основные каналы, по которым они будут распространять доклад и каким образом они обеспечат на рынке наличие своего продукта для ключевой аудитории.


Слайд 57

1/16/2015 58 Коммуникационные стратегии: Ключевые сообщения Вопросы и ответы Журналисты и заинтересованные группы Мониторинг, корректировка и отклики: Общественность Частные лица


Слайд 58

1/16/2015 59 Задание 8: Коммуникативный план На эту работу участникам будет выделено 60 минут. Коммуникационный план должен содержать: Ключевые мысли, которые будут постоянно озвучиваться официальными представителями организаций Общие вопросы и стандартные ответы на них Как журналисты и заинтересованные группы попытаются исказить ключевые мысли Стратегия того, как иметь дело с искажениями Механизмы мониторинга освещения результатов в государственных и частных средствах печати и радио, корректировка основных посылов, где необходимо, и ответ на неправильное использование результатов, где необходимо, в реальном времени Каждой команде будет дано 15 минут для презентации плана и ответа на вопросы.


Слайд 59

1/16/2015 60 Задание 9: написание проекта пресс релиза Участники напишу проект пресс-релиза, который будет сопровождать их национальный доклад. Каждой команде дается 60 минут для подготовки проекта. Каждая команда должна зачитать свой пресс-релиз и ответить на вопросы и предложения. На это каждой команде дается 15 минут.


Слайд 60

1/16/2015 61 Задание 10: Мониторинг откликов Участники должны выработать механизм для мониторинга освещения результатов в государственных средствах информации и соответствующей корректировки коммуникационной стратегии. Команды также составят перечь лиц или организаций, мониторинг которых необходимо проводить неофициально. На этот вид деятельности дается 15 минут. Каждой команде затем выделяется 15 минут на презентацию своего плана и ответа на вопросы и предложения.


×

HTML:





Ссылка: