Отчет о проведении тестирования по материалам аст-центра ( по состоянию на 30. 12. 2009) Впериод 05. 11. 2009 по 30. 12. 2009 проведено тестирование студентов гу-вшэ и филиалов icon

Отчет о проведении тестирования по материалам аст-центра ( по состоянию на 30. 12. 2009) Впериод 05. 11. 2009 по 30. 12. 2009 проведено тестирование студентов гу-вшэ и филиалов


Смотрите также:
Отчет о финансовом положении по состоянию на 31декабря 2009 года 3 (в тысячах рублей) 3...
Отчет о финансовом положении по состоянию на 31 декабря 2009 года 3 Отчет о прибыли и убытках за...
Анализ результатов егэ по истории в 2010 год...
Отчет о финансовом положении по состоянию за 31 декабря 2009 года 5 Отчет о совокупном доходе за...
Конкурс проводится с января 2009 г по октябрь 2009 г в два этапа: 1-й этап региональный (январь...
Отчет о финансовом положении по состоянию за 31 декабря 2009 года 5 Отчет о прибылях и убытках...
«Тестирование прошёл(ла)»...
Отчёт ревизионной комиссии за 2009 г. Оразмере, сроках и форма выплаты дивидендов за 2009 г...
О высшем и послевузовском профессиональном образовании...
Решение задач В4 по теме «Алгебра логики»...
Отчёт гоу школы №336 за 2009-2010 учебный год. Обращение к читателю...
Аналитический отчёт за 1,2 кв. 2009 уч г. п. Бузим 2009 г...



Загрузка...
скачать
Отчет о проведении тестирования по материалам АСТ-центра ( по состоянию на 30.12.2009)

В период 05.11.2009 по 30.12.2009 проведено тестирование студентов ГУ-ВШЭ и филиалов.

В соответствии с планом тестирования в январе, феврале 2010 года проходят тестирование факультеты психологии, менеджмента, отделения деловой и политической журналистики, отделения программной инженерии.


По заявкам факультетов в ноябре и декабре 2009 г. было проведено тестирование на факультетах экономики, отделении статистики, анализа данных и демографии; отделении прикладной математики и информатики; факультете философии; МИЭФ; а также в филиалах ГУ-ВШЭ.

По состоянию на 30 декабря 2009г.:

В тестировании участвовало всего ^ 989 студентов, в том числе : 403 (ГУ-ВШЭ, Москва), 586 студентов в филиалах . Заявлено к тестированию 1519 (по проведенным срезам).

Проведено 57 сеансов тестирования, в том числе 33 интернет- срезов тестирования с филиалами (без учета Пермского филиала), по 45 дисциплинам.


Сводные данные отражены в Таблице 1«Результаты внутреннего тестирования по материалам АСТ по состоянию на 09.12.2009»


^ Таблица 1

Результаты внутреннего тестирования по материалам АСТ по состоянию на 30.12.2009



Факультеты/
филиалы


Количество образовательных программ, представленных к тестированию

на указанный период

Количество дисциплин тестирования

^ Абсолютное число студентов, прошедших тестирование

(сумма по всем срезам)

Количество студентов по спискам

тестирования

(сумма по всем срезам)

Доля студентов, прошедших тестирование от численности заявленных списков(%)

^ Количество проведенных тестовых срезов

(сеансов тестирования)

Доля студентов, показавших положительный результат

(уд., хор., отл.)

в %

ГУ-ВШЭ (Москва)

МИЭФ

1

2

38

175

21,7

4

Микроэкономика -72,08

Макроэкономика - 69.1


Факультет экономики

1

4

216

349

61,9

13

Экономика фирмы -42,3

Эконометрика -60,11

Статистика (февраль)

Бухгалтерский учет (февраль)

Отделение статистики

1

1

54

В составе факультета

1

Факультет философии

1

2

36

60

60

4

Концепции современного естествознания - 46,4

Экономическая

теория - 28,3

Отделение прикладной математики и информатики

1

2

59

58

99

2

Базы данных – 39,47

Итого
(на 30.12.09):

3*

11

403

643

60

24





Филиалы

Нижегородский филиал

3

15

173

361

47,92

16

**

Пермский филиал

5

6

108

130

83,85

10

****

Санкт-Петербургский филиал

10

13

305

385

79,2

17

***

Итого по филиалам

14 (за вычетом повторяющихся)

34

586

876

66,8

33

****

Всего по ГУ-ВШЭ

15

45

989

1519

65,1

57





*Программа 080100.62 Экономика обследовалась на трех факультетах.

** Результаты приведены в таблице 2

*** Результаты приведены в таблицах 3

**** Результаты приведены в таблице 4.


Таблица 2


^ Результаты внутреннего тестирования Нижегородского филиала ГУ-ВШЭ

по тестовым материалам АСТ-Центра



Дата тестирования

Подразделение/

Специальность/

направление

Цикл

Дисциплина

Курс

Число студентов, прошедших тестирование/Количество студентов по спискам

тестирования


Доля студентов, прошедших тестирование от численности заявленных списков %

Результат:

Доля студентов, показавших положительный результат

(уд., хор., отл.)

в %

20.11.2009

^ НН/

Логистика и управление цепями поставок

ГСЭ

Отечественная история

2

17/18

94,4

70,58

ЕН

Математика

4

11/17

64

54,55

21.11.2009

БИ

ОПД

Базы данных

4

8/13

61,5

100

БИ

ГСЭ

Общая психология

4

6/13

46

83,3

БИ+ПМИ

ГСЭ

Иностранный язык

4

9/19

47

88,88

23.11.2009

БИ

ОПД

Теория вероятностей и математическая статистика

3

8/17

47

87,5

ПМИ

ОПД

Дискретная математика

2

11/36

30,55

27,27

02.12.2009

^ НН/

Логистика и управление цепями поставок




Маркетинг

(Питерская база)

4

7/16

43,75

57,14

05.12.2009

БИ




Операционные системы

3

6/17

35,3

100

ПМИ




Макроэкономика

3

5/15

33,3

100

ПМИ




Микроэкономика (без учета гр. Программная инженерия)

2

14/18

77,77

78,57

ПМИ




Ин. яз.

2

10/36

27,77

90

08.12.2009

^ НН/

Логистика и управление цепями поставок




Социология

3

17/17

100

35,29

14.12.2009

^ ПМИ (гр. Программная инженерия)




Культурология

2

16/18

88

93,75

18.12.2009

^ НН/

Логистика и управление цепями поставок




Экономическая теория

По Питерской базе

2

17/18

94,4

100




Бух. учет

4

11/17

64,71

81,81


Комментарий:

При успешной организации тестирования к недостаткам следует отнести

1. Недостаточную явку на тестовые срезы (основная причина – большое количество болевших в связи с эпидемией гриппа);

2. Из-за эпидемии гриппа и отмены занятий график тестирования несколько раз корректировался.

3. Самовольное вмешательство в работу программы (производилась настройка программы в Сормовском филиале НФ) без предупреждения и согласования с ОМСУП МУ ГУ-ВШЭ, в результате чего в период проведения планового тестирования в Пермском филиале к программе не смогли своевременно подключиться 15 студентов (работы были приостановлены в течение 5 мин после звонка из ГУ-ВШЭ).

4. По специальности «Логистика» в учебном плане предусмотрена дисциплина «Международный маркетинг», а тестирование проводилось по дисциплине «Маркетинг» - поэтому многие разделы были не изучены.


Для специальности «Логистика» дисциплина «Социология» читается по авторской программе доцента кафедры социально-гуманитарных наук, к.и.н Распопова Н.П.


Выявленные пробелы в настоящее время ликвидируются при помощи дополнительных занятий.


5. База, по которой проводилось тестирование по дисциплине «Дискретная математика» (для направлений «Прикладная математика и информатика» и «Бизнес-информатика»), соответствует программе технических специальностей (230100 «Информатика и вычислительная техника»). По тем разделам, которые соответствуют нашей программе знания вполне удовлетворительные.

Таблица 3


^ Результаты внутреннего тестирования Пермского филиала ГУ-ВШЭ, по тестовым материалам АСТ-Центра


Дата тестирования

Специальность/

направление

Цикл

Дисциплина

Курс

Число студентов, прошедших тестирование/ Количество студентов по спискам

тестирования


^ Доля студентов, прошедших тестирование от численности заявленных списков %

Результат:

Доля студентов, показавших положительный результат

(уд., хор., отл.)

в %

07.12.2009

Пермский филиал ГУ-ВШЭ


080100.62 - «Экономика»

ДН

Экономика фирмы

3

30/14

46,7*

100,00

08.12.2009

Пермский филиал ГУ-ВШЭ


080105.65 - «Финансы и кредит»

СД

Инвестиции

5

24/25

96,0

12,5

09.12.2009

Пермский филиал ГУ-ВШЭ

080500.62


«Менеджмент»

ДН

Маркетинг

4

18/20

90,0

22,2

10.12.2009

Пермский филиал ГУ-ВШЭ

^

080507.62 - «Менеджмент организации»





ОПД

Теория организации

5

14/15

93,3

7,1

15.12.2009

Пермский филиал ГУ-ВШЭ


080105.65 - «Финансы и кредит»

ОПД

Статистика

5

23/25

92,0

95,6

18.12.2009

Пермский филиал ГУ-ВШЭ


080109.65 - «Бухгалтерский учет, анализ и аудит»

СД

Бухгалтерский финансовый учет

3

15/15

100,0

86,7



Комментарий:

По дисциплинам «Маркетинг» и «Теория организации» студенты не набрали 50% освоенных ДЕ. Ниже привожу служебную записку от заведующего кафедрой.

Низкий процент ответивших по дисциплине «Экономика фирмы» - 46,7% объясняется тем, что в период времени, назначенного Пермскому филиалу для проведения тестирования, филиал Нижнего Новгорода использовал 16 единиц доступа для установления программы АСТ на свои компьютеры. В результате в Перми получили доступ только для 14 тестируемых.

По дисциплине «Эконометрика» после проведения пробного тестирования зав. кафедрой отказался от проведения тестирования. В приложении приведены служебные записки с анализом качества тестовых материалов.


^ Таблица 4


Результаты тестирования образовательных программ Санкт-Петербургского филиала ГУ-ВШЭ


по тестовым материалам АСТ-Центра

(С-Пб :Ул. Седова 55/2, Ауд. 201,301; Промышленная ул.17, Ауд. 403; ул. Союза Печатников,16, Ауд. 204,308)



Дата тестирования

Специальность/

направление

Цикл

Дисциплина

Курс

Число студентов, прошедших тестирование/ Количество студентов по спискам

тестирования


^ Доля студентов, прошедших тестирование от численности заявленных списков (%)

Результат:

Доля студентов, показавших положительный результат

(уд., хор., отл.)

в %

10.11.2009

030301.65

Психология

ОПД

Клиническая психология

5

13/14

90

34,77

12.11.2009

080500.62

Менеджмент

ОПД

Маркетинг

4

/15

0

Не состоялось

16.11.2009

ГСЭ

Философия

3


55/60


91,6


40,22

16.11.2009

080507.65

Менеджмент

организации

ГСЭ

Философия

16.11.2009

080504.65

ГМУ

ГСЭ

Философия

3

10.11.2009

17.11.2009

24.11.2009

06.11.2009

080100.62

Экономика

ОПД

Эконометрика

4

62/77

80


47,7

05.11.2009

080105.65

Финансы и кредит

ОПД

Финансы

4

34/42

80

35,91

12.11.2009

СД

Инвестиции

5

16/16

100

42,71

12.11.2009

СД

Финансовый

менеджмент

5

15/16

90


50

10.11.2009

СД

Бухгалтерский

учет

3

15/22/

68

27,8

17.11.2009

080109.65

Бухгалтерский

учет, анализ и аудит


СД

Бухгалтерский

управленческий учет

5

9/11

60

46,44

19.11.2009

080502.65

Экономика
и управление на предприятии (по отраслям)


ЕН

Математика

3

18/23

78

32,11

12.11.2009

030501.65

Юриспруденция

ОПД

Теория государства и

права

2

13/16

80


66,77

19.11.2009

ОПД

Трудовое право

3

18/18

100

48,22

11.11.2009

040200.62

Социология

ГСЭ

Философия

2

17/19

90

34,48

09.11.2009

ГСЭ

Социология

3

11/18

47

28,09

11.11.2009

ГСЭ

Русский язык и

культура речи

3

9/18

39

**

** По дисциплине русский язык и культура речи, факультет социологии (явка 40%), тестирование проводилось в режиме «обучение», т.е. многократное прохождение тестов (в мягком режиме результаты не сохраняются в программе)


Комментарий:


Согласно распоряжения от 06.10.2009 №214.15-11/37.

Были получены заявки от следующих подразделений:

- факультет юриспруденции,

- факультет менеджмента,

- факультет экономики,

- факультет социологии,

- отделение психологии


Тестирование проведено по согласованному графику в указанные сроки: 05.11.2009 – 24.11.2009,

протестировано 13 дисциплин,

проведено 17 сеансов явка студентов составила в среднем 80%

Соответствующими подразделениями была обеспечена явка студентов в основном около 80%, что показывает высокую степень организованности. Кроме факультета социологии (явка в среднем 60%). По дисциплине русский язык и культура речи, факультет социологии (явка 40%), в мягком режиме результаты не сохраняются в программе. Факультет менеджмент 12.11.2009 самовольно нарушил график тестирования, не согласовав с ОР и ККО и компьютерным центром, что привело к потере результатов. Факультету было предложено назначить другое время для тестирования, для этого нужно было подать служебную записку на имя заместителя директора. Факультет менеджмента этим правом не воспользовался.


На основании проведенного тестирования можно сделать некоторые выводы:

Тестирование остаточных знаний студентов эффективный способ контроля образовательного процесса и стимулирующий механизм учебной активности студентов (и преподавателей). При некоторых издержках тестовые срезы дают достаточно объективную картину освоения дисциплины и отдельных тем по дисциплинам.

1.При существующей организации тестирования подстройка расписания возможна только в режиме реального времени;

2.Студенты считают тестирование добровольным и явку можно обеспечить только в том случае, если тестирование как форма контроля (учебное занятие, вид диагностики и пр.) будет внесена в учебное расписание. (См. служебную записку Замкова О.О.).

3. Работа программы вызывает замечания: сбиваются настройки: установка названия тестируемых дисциплин и времени начала тестирования иногда не сохраняется и процесс нуждается в постоянном сопровождении и контроле. .

4. Качество тестовых заданий вызывает существенные замечания, например, дисциплина эконометрика включает тестовые задания с пропущенными фрагментами текста (без начала и конца), некоторые задания в базах других дисциплин некорректны.

В связи с низкими показателями тестирования в Пермском филиале была проделана работа по анализу тестовых заданий Баз АСТ-Центра по дисциплинам тестирования «Маркетинг» и «Теория организации» в Приложении 1, 2 приведены данные анализа.

Целесообразно для решения этой проблемы предоставить возможность преподавателям самостоятельно разработать тесты и ввести их программу АСТ.

Но поскольку, во-первых, необходимо технически редактировать тестовые задания в едином формате,

во-вторых, обучить преподавателей пользоваться программой -Конструктором,

при этом разработанные тесты не отчуждаются в пользу университета,

целесообразно ввести в Методическое управление штатную единицу оператора, для заведения (ввода) преподавательских тестовых заданий в программу в необходимом формате,

организовать сбор тестовых материалов от преподавателей и

создать собственную Базу тестовых материалов по образовательным программам университета.

Программу АСТ можно использовать для внутреннего тестирования и апробации тестовых материалов.


Приложение 1


Кафедра общего менеджмента

Зав. кафедрой

Шафранская Ирина Николаевна





^ СЛУЖЕБНАЯ ЗАПИСКА

17.12.2009г.

О результатах тестирования

по дисциплинам кафедры по материалам АСТ


9 – 10 декабря 2009 г. студенты 4 и 5-го курсов факультета Менеджмент проходили тестирование по дисциплинам «Маркетинг» и «Теория организации». Необходимый уровень в 50% правильных ответов не был набран ни в одной из групп.


Причины низких результатов тестирования заключаются в следующем:

  1. ^ Качество тестовых заданий.

Качество представленных тестов вызывает ряд вопросов. В ходе последовавшего за выполнением анализа тестовых вопросов было выявлено, что большинство заданий теста можно отнесено к одной из следующих групп:

  • Задания с некорректно сформулированным вопросом:

Например,

^ Предметом теории организации являются … (открытый вопрос)

Комментарий: Предмет теории организации формулируется разными авторами по-разному или с использованием разной лексики, хотя по сути, речь идет об одних и тех же вещах. Кроме того, как правило, формулировки предмета теории организации достаточно развернуты по форме. Какой именно ответ ожидается в тесте?


Создать…. – это значит закрепить в сознании широкого круга людей положительный образ товара или предприятия и сформировать потребность в данном товаре (открытый вопрос)

Комментарий: утверждение носит частный характер, не является устойчивым, и в равной мере может относиться и к бренду, и к торговой марке и т.п. Анализ литературы показал, что речь идет об имидж-рекламе (именно в таком написании), однако в таком виде тезис представляет спорным. Отдельно важно упомянуть о том, что в отсутствии правил написания ответов, не совсем понятно, будут ли приняты ответы типа «имиджевая реклама», «реклама» и т.д.


  • Задания с некорректными вариантами выбора правильных ответов:

Например,

^ Конечным критерием эффективности организационной системы является (один правильный ответ):

- выживаемость организации

- достижение целей организации

- прибыльность организации

- устойчивое положение организации

Комментарий: В данном вопросе имеется два правильных ответа в зависимости от выбранной модели: в рамках естественной модели организации – конечным критерием эффективности является ее выживаемость, в рамках искуственной модели организации – достижение целей. Модель выбирается в зависимости от характеристик внешней среды организации (Щербина В.В, 2003).


^ В основе моделирования покупательского поведения лежит (несколько правильных ответов):

- выявление мнений покупателей о ценах и товарах

- влияние коммуникативного воздействия на потребителя

- сегментация потребителей по какому-либо признаку

- выявление зависимости поведения покупателей от различных факторов

Комментарий: В данном вопросе возможен только один правильный вариант ответ: модель поведения потребителей базируется на выявлении зависимости поведения от групп факторов (обычно этих групп 4). Все остальные ответы не имеют отношения к указываемой модели (Котлер, 2007).


  • Задания, относящиеся к другим предметным областям

Например,

^ Эффективное … нового возможно при наличии у человека большого объема информации по данной тематике. (открытый вопрос)

Комментарий: Данный вопрос относится к философии или теории познания, но не к теории организации. Кроме того, представляет сложности открытый характер вопроса, так как ответом на поставленный вопрос может служить целый синонимический ряд.


… - это познание реальности через внемыслительные аспекты духовной жизни человека: волю, интуицию, воображение.

Комментарий: Данный вопрос относится к философии или теории познания, но не к теории организации.


  • Вопросы, которые не рассматриваются в рамках предмета «Теория организации» в Высшей школе экономики, где «организация» понимается как «фирма», «предприятие», а не как «процесс» или «система».

Например,

^ В соответствии с классификацией К. Боулдинга уровней сложности систем РАСТЕНИЯ являются (1 правильный ответ)

- организмами с низкой способностью воспринимать информацию

- кибернетическими системами

- простыми динамическими структурами

- системами с самосознанием

Комментарий: Данная классификация не изучается в рамках предмета «теория организации» в ПФ ГУ ВШЭ, кроме того, способность классифицировать растения не отражает понимания сути фирмы или предприятия.


^ Основными составляющими внешней микросреды маркетинга является: (множественный выбор, количество правильных ответов не известно, в самом вопросе присутствует несогласованность)

- кредитная политика

- информационные технологии

- контактные аудитории

- смежники

Комментарий: Некоторые используемые в ответах термины не являются терминами теории маркетинга («смежники»), они не присутствуют в базовых учебниках, используемых в ПФ ГУ-ВШЭ и ГУ-ВШЭ.


  • Вопросы с орфографическими, стилистическими ошибками.




Общая доля некорректных вопросов составляет до от 15% до 40% в каждом из проанализированы вариантов.


  1. Значительная напряженность тестирования – студентами был отмечено, что 60 минут для ответа на 60 вопросов, предусматривающих разные типы ответов, не достаточно.




  1. ^ Отсутствие мотивации у студентов на предварительную подготовку. В обеих группах студентов были проведены консультации с разбором тестовых материалов, выданы варианты для самостоятельного решения, а также «решебники» – наборы аналогичных тестов с правильными ответами. Каждый студент имел возможность пройти пробное тестирование в назначенное внеучебное время (но никто из студентов на него не явился).

В качестве решения данной проблемы (предполагая неизбежность тестирования) можно предложить разработку «решебников» - сборников ответов на тестовые задания, сформированный силами преподавателей кафедры. Очевидно, что создание такого сборника потребует обращения к разработчикам тестов с целью прояснения источников тестовых заданий. Одновременно хотелось бы отметить, что даже в случае наличия у студента такого сборника, отсутствие мотивации довольно серьезно влияет на отношение и результаты тестирования.


Приложение 2

служебную записку от 14.12.2009.

Кафедра ПМиМСС

Зав.кафедрой

Потапов Дмитрий Борисович

Начальнику отдела внутреннего аудита качества

Букиной Татьяне Витальевне


^ СЛУЖЕБНАЯ ЗАПИСКА

14.12.2009г.

О качестве тестов АСТ по Эконометрике


Довожу до вашего сведения следующую информацию:

  1. 8.12.2009 студенты 4-го курса бакалавриата Экономики пробное проходили пробное тестирование по дисциплине «Эконометрика».

  2. Студентами было пройдено от начала до конца 10 тестов. После прохождения тестирования преподавателями кафедры был проведен анализ на предмет качества вопросов 4 случайно выбранных тестов на основе скрин-шотов экранов тестирования. Количество «спорных» вопросов представлено в таблице:




№ испытуемого

Общее число вопросов

Число «спорных» вопросов

Не вошедшие на экран*

«Некорректные»**

«Не по теме»***

Всего

8

60

7

8

7

22

15

60

4

6

4

14

17

60

4

5

6

15

22

60

10

7

6

23

* - вопросы, по которым часть задания не видна на экране (пробовали при разных разрешениях монитора), см. пример в приложении 1;

** - вопросы, по которые требуют дополнительной информации для правильного ответа или для ответа на которые необходимо точно знать учебник, по которому составлен вопрос, см. пример в приложении 2;

*** - вопросы, для правильного ответа на которые необходимы знания, не входящие в курс Эконометрики, см. пример в приложении 3.

Из таблицы видно, что качество тестов является крайне низким, т.к. до трети вопросов в тесте являются «спорными».

  1. Обращаю Ваше внимание на то, что при предыдущем тестировании по тестам АСТ их качество было таким же низким, о чем было представлена служебная записка.

В связи с вышесказанным прошу Вас отказаться от тестирования АСТ по дисциплине Эконометрика, которое было запланировано на 14.12.2009г.


Пример 1.




Комментарий:

на экран не вошла часть формулы

Пример 2.




Комментарий:

Для ответа на вопрос необходимо знать учебник, откуда предлагается брать схему построения модели. Таких схем может быть множество, они могут содержать разные этапы и при этом быть правильными.


Пример 3.




Комментарий:

Не понятно, какая модель предполагается в данном вопросе (необходимо приводить здесь модель полностью, т.к. в рамках курса ее изучение не требуется).









Скачать 277,91 Kb.
оставить комментарий
Дата03.10.2011
Размер277,91 Kb.
ТипОтчет, Образовательные материалы
Добавить документ в свой блог или на сайт

Ваша оценка этого документа будет первой.
Ваша оценка:
Разместите кнопку на своём сайте или блоге:
rudocs.exdat.com

Загрузка...
База данных защищена авторским правом ©exdat 2000-2017
При копировании материала укажите ссылку
обратиться к администрации
Анализ
Справочники
Сценарии
Рефераты
Курсовые работы
Авторефераты
Программы
Методички
Документы
Понятия

опубликовать
Загрузка...
Документы

Рейтинг@Mail.ru
наверх