Modern problems of science and educationrae.ru
Scientific journal

Modern problems of science and education

ISSN 2070-7428VAK ListRSCI IF = 0,936

THE DEVELOPMENT OF TOOLS FOR ASSESSING THE COGNITIVE-CONTENT READINESS OF PRE-SERVICE TEACHERS TO TEACH A SPECIALIZED SUBJECT IN A MULTILINGUAL ENVIRONMENT

Babich I.M. 1
1Pavlodar Pedagogical University

Одним из ключевых аспектов модернизации казахстанской системы образования стало внедрение полиязычия как неотъемлемого компонента профессиональной деятельности и развития специалистов. Казахстан, как страна – участница Болонского процесса, приняла на себя обязательства по выполнению основных параметров Европейского пространства высшего образования, в том числе обеспечение качества образования, академической мобильности студентов, создание единого исследовательского пространства и т.д. [1]. Все это предполагает владение студентами одним или несколькими иностранными языками.

В связи с внедрением полиязычия в систему среднего образования страны, большое внимание уделяется совершенствованию навыков преподавания на иностранном языке у студентов – будущих учителей естественнонаучных дисциплин [2]. Это связано с постепенным переходом к изучению химии, биологии, физики, информатики в старших классах общеобразовательных школ на английском языке. Поэтому в настоящее время в высших учебных заведениях Казахстана увеличивается количество образовательных программ, академический контент которых преподается на целевом языке, демонстрируя процесс успешной интеграции содержания и языка на основе применения предметно-языкового интегрированного обучения (Content and Language Integrated Learning).

Большой потенциал CLIL (Content and Language Integrated Learning) описали Д. Койл, П. Худ, Д. Марш [3]. Одно из важных преимуществ этого подхода связано с повышением мотивации студентов к изучению второго языка. Он увеличивает когнитивную и коммуникативную активность обучающихся, благодаря четырем принципам: активное изучение содержания, связь познания (мыслительных процессов) с контентом и развитием языковых навыков, коммуникация с целью развития языка обучения (language of learning), языка для обучения (language for learning) и языка через обучение (language through learning), обеспечивающего своевременное реагирование будущих учителей на вопросы учащихся и предоставление им обратной связи, культура (социальное осознание себя и других).

Предложенная Д. Койлом [4] 4С Модель, целостная концептуальная основа для CLIL, позволяет поддерживать начинающих учителей CLIL в организации и планировании уроков на языке CLIL, развитии их собственных коммуникативных и когнитивных навыков на основе предметного содержания.

Внедрение двух- и полиязычных образовательных программ в Казахстане, построенных на основе CLIL-подхода, требует сосредоточения внимания на анализе их эффективности, которую можно определить с помощью специально разработанных инструментов оценивания сформированности предметных, языковых знаний, когнитивных навыков будущих учителей. Э. Лаборда и Е. Пеналвер считают, что «оценивание можно рассматривать как ключевой аспект для продолжения правильного выполнения двуязычных программ…» [5]. По мнению П. Каньядо [6], важность оценки в новой программе объясняется в том числе и необходимостью понимания, как студенты реагируют на незнакомые обстоятельства.

Однако вопрос оценки обучения студентов в CLIL остается недостаточно изученным и спорным. Наибольшее количество споров возникает при попытке определить природу оценки в CLIL-программах, уровень интеграции контента и языка. По мнению Д. Койла, П. Худа, Д. Марша [3], основными вопросами, которые следует решить для успешного внедрения двуязычных (полиязычных) образовательных программ, являются вопросы оценки языка или содержания и выбор методов получения достоверной информации об уровне их развития. М.Г. Сергеева [7], М.Н. Скачкова, Е.Ю. Чайка [8] полагают, что в «мягкой» модели CLIL, которую реализует чаще всего педагог-лингвист, целесообразно оценивать прогресс студента в языковой сфере, а в «жесткой» модели CLIL, в которой делается акцент на предметной составляющей, педагог-предметник, владеющий иностранным языком и методикой CLIL, будет оценивать предметные знания и навыки.

Т.В. Николаева полагает [9], что оценка будет зависеть от того, на каких навыках делается акцент: развитие базовых навыков мышления смещает оценку в сторону языка, развитие навыков мышления высокого порядка предполагает оценивание и языка, и предмета.

Однако согласно определению CLIL, данному Д. Койлом, П. Худом, Д. Маршем [3], при разработке инструмента оценивания важно учитывать, что английский язык используется для изучения и преподавания как содержания, так и языка. Поэтому разработанные инструменты оценивания должны иметь интегративный характер, позволяющий измерить уровень сформированности языковых и предметных знаний студента [10–12]. Это позволит определять готовность (мотивационную, когнитивно-содержательную, праксиологическую) [13] будущих учителей к преподаванию профильных предметов на английском языке в комплексе.

Целью нашего исследования стала разработка инструмента оценивания когнитивно-содержательного компонента готовности будущих учителей химии к преподаванию на английском языке, обеспечивающего измерение уровня усвоения программы элективного курса «Learning and Teaching Chemistry in English», построенного на применении CLIL-подхода. Были сформулированы следующие задачи: разработать содержание тестов по общей, неорганической, органической химии, охватывающих программу элективного курса; установить содержательную, эмпирическую валидность и надежность-согласованность тестов.

Материалы и методы исследования

Контрольно-измерительные материалы к элективному курсу «Learning and Teaching Chemistry in English» построены на основе матрицы CLIL, предложенной Д. Койлом, П. Худом, Д. Маршем [3] и модифицированной нами [14]. Матрица позволяет разработать инструмент оценивания, который даст возможность определить уровень развития языковых и предметных знаний и навыков будущего педагога. Понимание уровня сформированности когнитивно-содержательной готовности студентов к преподаванию предмета на английском языке можно использовать для создания персонализированных маршрутов развития оцениваемых навыков студентов и построения индивидуальной траектории поддержки будущих учителей в продвижении к выполнению заданий на более высоком языковом и когнитивном уровнях (рисунок).

Матрица составления заданий для измерения уровня языковых и предметных знаний

В основе модифицированной матрицы Д. Койла, П. Худа, Д. Марша авторов [3] находится таксономия Блума – система образовательных целей в когнитивной сфере, направленных на развитие навыков мышления различного уровня.

Тесты по шестнадцати темам курса органической, неорганической и общей химии были разработаны совместно с CLIL – учителями химии и учителями английского языка. Содержание всех тестов представлено по ссылке https://cloud.mail.ru/public/o7qq/v6sUExpDS .

Содержательная валидность разноуровневых интегрированных тестовых заданий определялась методом экспертных оценок двумя CLIL – учителями химии и учителем английского языка по предложенной спецификации тестов (табл. 1) и следующим вопросам:

1) содержание вопроса соответствует указанной теме;

2) содержание вопроса соответствует указанному когнитивному уровню предметных знаний;

3) содержание вопроса соответствует указанному уровню языковых знаний;

4) выдержаны все требования к формулировке тестового задания;

5) дистракторы (правильный и неправильные ответы) однозначны по содержанию, структуре и правдоподобны;

6) содержание и структура теста соответствует спецификации.

Таблица 1

Спецификация теста по теме «Atomic structure»

Тема

Цели обучения

Уровень когнитивных навыков

Номер вопросов

Тип вопроса

Балл/общий балл

Предметная область

Языковая область

«Atomic structure»

Знать строение атома, его электронной оболочки

Понимание темы и знание тематической лексики

Знание и понимание (предмет и язык)

1–6

Вопросы с выбором одного правильного ответа

2/12

Предсказывать появление неспаренных электронов

Знание и понимание (язык)

Навыки высокого мышления (предмет)

7–10

Вопросы с выбором нескольких правильных ответа

 

3/12

Уметь описывать строение и электронной оболочки, и форму электронных облаков с помощью квантовых чисел

Причастие, пассивный залог, общая лексика, части речи, порядок слов

Знание, понимание, применение (предмет)

Навыки высокого мышления (язык)

11–14

3/12

Интерпретировать масс-спектры для определения атомной (молекулярной) массы

Навыки высокого мышления (предмет и язык)

15–16

4/8

Экспертиза тестовых заданий осуществлялась по трёхбалльной шкале:

3 – не соответствует; 2 – частично соответствует; 1 – полностью соответствует.

Эмпирическая валидность тестов, построенных на основе матрицы Койла, устанавливалась путем сравнения результатов, полученных при тестировании студентов с помощью разработанных тестов и стандартных разноуровневых тематических тестов по химии и английскому языку отдельно. Тестовые задания по английскому языку не содержали химический контент. Диагностируемые тесты и стандартные разноуровневые тематические тесты находятся в смысловом соответствии друг с другом и включают задания, проверяющие одни и те же понятия и правила на различном когнитивном уровне. В качестве коэффициента корреляции был использован корреляционный коэффициент Пирсона.

Надежность-согласованность тестов определялась с помощью восьмидесяти семи респондентов – будущих учителей химии третьего курса, обучающихся по образовательной программе 6В01507 «Химия» Павлодарского педагогического университета (Казахстан), и студентов второго курса Омского государственного педагогического университета, изучающих программу «44.03.05 Педагогическое образование (с двумя профилями подготовки). Направленность (профиль): «Биология и Химия»». Репрезентативность выборки обеспечивалась участием в исследовании большинства студентов второго и третьего курсов педагогических университетов. Число респондентов соответствует правилу эмпирического определения объема выборки, в котором рекомендуется иметь в пять раз больше испытуемых, чем вопросов в тесте. Расщепление тестов осуществлялось с учетом уровней входящих в него заданий так, чтобы каждая часть была эквивалентной и содержала равное количество вопросов четырех разделов (табл. 1).

Для определения надежности-согласованности тестов использовался коэффициент Пирсона, измеренный с помощью программы IBM SPSS Statistic 26.

Результаты исследования и их обсуждение

Экспертный анализ тестовых заданий по шестнадцати темам элективного курса «Learning and Teaching Chemistry in English» показал их валидность (1 ≤ М <1,5) для определения содержательно-когнитивного компонента готовности будущих учителей к преподаванию химии на английском языке. Учет рекомендаций экспертов по внесению корректировок в дистракторы нескольких заданий позволил повысить их однородность и однозначность. В табл. 2 представлены результаты экспертного анализа трех тестовых заданий первого-третьего квадрантов инструмента оценивания когнитивно-содержательного компонента готовности по теме «Atomic structure».

Таблица 2

Результаты экспертизы тестовых заданий I–III квадрантов по теме «Atomic structure»

Тестовые задания по теме «Atomic structure»

Эксперты

Σ

М

Первый

Второй

Третий

1

2

3

4

5

6

1

2

3

4

5

6

1

2

3

4

5

6

1.The number of electrons in an atom of an element is equal to its

A) Atomic weight

B) Equivalent weight

C) Electron affinity

D) Atomic number

1

1

1

1

1

1

1

1

1

1

2

1

1

1

1

1

2

1

20

1,11

13. Two unpaired electrons are present in the orbital diagram of which of the following elements? A)6C B)10Ne C)12Mg D)22Ti E)19K

1

1

1

1

1

1

1

1

1

1

1

1

1

1

1

1

1

1

18

1

23.Read the summary and fill in the gaps.

Starting from the second one, the … quantum shells…into subshells each of which is possessing their own atomic orbitals. The subshells are… as s, p or d according to the number of orbitals they possess. A) principle; are turned; determined. B) principal; are divided; defined. C) principal; are split; identified.

1

1

1

1

1

2

1

1

1

1

2

1

1

1

1

1

2

1

21

1,16

 

Однократное проведение тестирования в группе из 87 студентов второго и третьего курсов показало достаточно высокую внутреннюю согласованность тестов: коэффициент Пирсона больше 0,7 [15] (табл. 3)

Таблица 3

Результаты проверки тестов на надежность-согласованность

Название теста

Корреляция Пирсона/ Значимость (двухсторонняя)

Название теста

Корреляция Пирсона Значимость (двухсторонняя)

Alcohols

0,731*/0,000

Halogenoalkanes

0,732*/0,000

Alkenes

0,743*/0,000

Halogens

0,794*/0,000

Analytical techniques

0,751*/0,000

Introduction to organic Chemistry

0,726*/0,000

Atomic Structure

0,744*/0,000

Kinetics

0,760*/0,000

Bonding

0,734*/0,000

Periodicity

0,745*/0,000

Chemical calculations

0,723*/0,000

The Alkaline Earth Elements

0,785*/0,000

Energetics

0,732*/0,000

The Redox reactions

0,727*/0,000

Equilibrium

0,787*/0,000

Thermodynamics

0,743*/0,000

*Корреляция значима на уровне 0,01 (двухсторонняя).

Результаты проверки эмпирической валидности инструментов оценки когнитивно-содержательного компонента готовности будущих учителей к преподаванию химии на английском языке показали статистическую значимость линейного коэффициента корреляции Пирсона. Согласно полученным результатам, существуют положительно высокие связи (коэффициент корреляции выше 0,6) между разработанными инструментами оценивания и стандартными тематическими тестами по химии и положительно средние связи (коэффициент корреляции от 0,3 до 0,5) между проверяемыми тестами и стандартными тематическими тестами по английскому языку. Таким образом, результаты корреляционного анализа подтверждают валидность разработанных тестов для одновременной проверки знаний студентов в области химии и английского языка.

Заключение

Анализ литературы показал актуальность решения вопроса разработки инструментов оценивания, позволяющих установить уровень предметных и языковых навыков будущих учителей при внедрении программ, построенных на основе CLIL-подхода. В ходе исследования были разработаны и стандартизированы тесты, включающие химический и языковой контент по курсу «Learning and Teaching Chemistry in English», для оценки когнитивно-содержательной готовности студентов к преподаванию профильного предмета на английском языке. Валидность и надежность разработанных инструментов оценивания на основе матрицы Койла и таксономии Блума подтверждена статистическими методами анализа. Предложенные методы разработки и проверки измерителей для оценки предметных и языковых знаний студентов на различном когнитивном уровне могут быть использованы преподавателями университетов стран СНГ для разработки оценочных инструментов усвоения содержания интегрированных программ изучения предметов в условиях полиязычия.


Bibliographic Reference

Babich I.M. THE DEVELOPMENT OF TOOLS FOR ASSESSING THE COGNITIVE-CONTENT READINESS OF PRE-SERVICE TEACHERS TO TEACH A SPECIALIZED SUBJECT IN A MULTILINGUAL ENVIRONMENT // Modern problems of science and education. 2021. No. 3. pp. 94-94;
URL: https://www.science-education.ru/en/article/view?id=30948 (accessed: 23/08/2026).
DOI: https://doi.org/10.17513/spno.30948