Краткая информация о результатах международного исследования TIMSS-2007 качества математического и естественнонаучного образования

Краткая информация о результатах международного исследования TIMSS-2007 Российские школьники еще раз подтвердили, что р...

Author: Центр оценки качества образования ИСМО РАО

6 downloads 173 Views 439KB Size Report

This content was uploaded by our users and we assume good faith they have the permission to share this book. If you own the copyright to this book and it is wrongfully on our website, we offer a simple DMCA procedure to remove your content from our site. Start by pressing the button below!
Report copyright / DMCA form

DOWNLOAD PDF

Краткая информация о результатах международного исследования TIMSS-2007

Российские школьники еще раз подтвердили, что результаты их выполнения международных тестов TIMSS превышают средние международные показатели По качеству математического и естественнонаучного образования российские школьники 4 и 8 классов находятся среди 10 стран из 59, продемонстрировавших наилучшие результаты, уступая только группе лидирующих стран. Международное сравнительное мониторинговое исследование качества математического и естественнонаучного образования TIMSS (TIMSS – Trends in Mathematics and Science Study) является одним из самых представительных исследований по средней школе, в нем приняли участие 425000 учащихся из 59 стран. Россию в исследовании представляли учащиеся 58 регионов страны: 4464 выпускников начальной школы из 206 образовательных учреждений и 4472 учащихся 8 класса из 210 общеобразовательных учреждений. Для России исследование TIMSS является первым мониторинговым исследованием в области общего образования, которое позволяет проследить тенденции развития математического и естественнонаучного общего образования с 1995 года в соответствии с международными приоритетами в образовании. Общие результаты В 2007 году результаты российских школьников превысили средние международные показатели: по математике 4 класс – 544 балла, 6 место по рейтингу среди 36 стран; 8 класс – 512 баллов, 8 место среди 49 стран; по естествознанию 4 класс – 546 баллов, 5 место среди 36 стран; 8 класс – 530 баллов, 10 место среди 49 стран. Значительно опередили российских учащихся начальной школы по математике учащиеся 4 стран: Гонконга, Сингапура, Тайваня и Японии, а учащихся основной школы – учащиеся 5 стран (четыре перечисленные выше и Республика Корея). По естествознанию опередили российских учащихся начальной школы учащиеся только двух стран (Сингапура и Тайваня), а учащихся основной школы – учащиеся 6 стран (Сингапура, Тайваня, Японии, Кореи, Англии и Чешской Республики). С небольшим числом стран

результаты российских школьников не имеют значимых различий по математике (4 страны – 4 класс и 5 стран – 8 класс) и по естествознанию (8 стран – 4 класс и 3 страны – 8 класс). По сравнению с большинством стран, участвовавших в исследовании TIMSS в 2007 году, результаты российских учащихся значительно выше как по математике (27 стран – 4 класс и 38 стран – 8 класс), так и по естествознанию (25 стран – 4 класс и 39 стран – 8 класс). Результаты стран представлены в таблицах 1-4. Тенденции По сравнению с предыдущими этапами исследования TIMSS результаты российских восьмиклассников в 2007 году: по математике статистически не отличаются от результатов 1995 и 2003 годов (524 и 508 баллов соответственно). по естествознанию стали статистически значимо выше, чем в 2003 году; по сравнению с 1995 также отмечается повышение результатов, но оно статистически незначимо. Таким образом, в результатах российских учащихся основной школы по естествознанию наметилась позитивная тенденция. Результаты российских выпускников начальной школы по математике практически не изменились, а по естествознанию стали значимо выше по сравнению с 2003 годом. Следует отметить, что в связи с изменением состава стран прямое сравнение рейтинга стран в различные годы затруднено. Целесообразно сравнивать результаты стран по увеличению или уменьшению среднего балла страны по сравнению со средним международным баллом TIMSS, который не зависит от состава стран (см. таблицы 5-6). Так, результаты российских четвероклассников по математике превышали средний международный балл TIMSS в 2003 году на 32 балла, а в 2007 году – на 44 балла; по естествознанию в 2003 году на 26 баллов, а в 2007 году – на 46 баллов. Анализ данных, представленных в таблицах 5-6, также показывает изменение положения российских учащихся на международной шкале TIMSS через 4 года при переходе обследуемой совокупности учащихся из начальной школы в основную. Обследуемая совокупность учащихся 4 классов в 2003 году продемонстрировала результаты по математике, превышающие средний международный балл на 32 балла, а по естествознанию – на 26 баллов. Через 4 года результаты той же обследуемой совокупности учащихся, которая в 2007 году оказалась в 8 классе, по международной шкале: по математике превысили средний международный балл на 12 баллов, по естествознанию – на 30 баллов. Таким образом, при переходе одной и той же совокупности детей из начальной школы в основную было зафиксировано относительное снижение результатов учащихся по математике (на 20 баллов) и незначительное увеличение 2

результатов по естествознанию (на 4 балла). Данные факты требуют дополнительного анализа. Уровни образовательных достижений Среди российских учащихся 4 класса, принимавших участие в исследовании, 16% учащихся овладели знаниями и умениями самого высокого (продвинутого) уровня (625 баллов и выше) и по математике, и по естествознанию. Результаты стран по уровням образовательных достижений представлены в таблицах 7-10. Среди российских учащихся 8 класса овладели продвинутым уровнем подготовки 8% учащихся по математике и 11% по естествознанию. Не освоили знания низкого уровня (ниже 400 баллов), т.е. освоили только небольшое число отдельных знаний и умений, 5% четвероклассников по математике и 4% по естествознанию, а также 9% восьмиклассников по математике и 5% по естествознанию. В основной школе процент учащихся, имеющих продвинутый и высокий уровни образовательных достижений, ниже, чем в начальной школе. В лидирующих странах процент учащихся 4 и 8 классов, достигших продвинутого уровня подготовки, выше, чем в России – 40-45% по математике и 32-36% по естествознанию. По сравнению с 2003 годом увеличилось число российских учащихся, достигших продвинутого уровня подготовки и по математике (с 11% до 16% в 4 классе и с 6% до 8% в 8 классе), и по естествознанию (с 11% до 16% в 4 классе и с 6% до 11% в 8 классе). Гендерные различия Гендерные различия по математике проявились только в результатах российских учащихся 4 классов – средние результаты девочек (548 баллов) оказались значимо выше средних результатов мальчиков (540 баллов). По естествознанию, в отличие от многих стран, в средних результатах российских школьников 4 и 8 классов гендерные различия не проявились. Их можно зафиксировать только на уровне выполнения отдельных заданий. Особенности выполнения международного теста по математике Программа российской начальной школы обеспечивает выполнение менее половины заданий международных тестов в исследовании TIMSS2007, остальные задания составлены на внепрограммном материале. Обязательный минимум содержания российского начального общего образования не содержит ряд вопросов, важность которых для развития учащихся признается на международном уровне. Учащиеся 4 класса продемонстрировали достаточно высокие результаты изучения отдельных вопросов арифметики и геометрии. С 3

заданиями программного характера, представленными в традиционной форме, справились от 75% до 96% учащихся. Четвероклассники показали хороший уровень выполнения отдельных заданий, выходящих за рамки программы (от 50% до 80%). Значительная часть этих заданий была представлена в непривычной для четвероклассников текстовой форме, которая часто сопровождалась рисунком, схемой, таблицей, в форме игры с описанием её правил. Однако почти все дети (кроме 2%-6%) приступали к их решению, опираясь на здравый смысл, на знания из окружающего мира. Это говорит об активной познавательной деятельности, высокой информированности и значительном интеллектуальном потенциале выпускников российской начальной школы. Очевидно, что содержание и результаты международной оценки выпускников российской начальной школы целесообразно учитывать при разработке нового поколения стандарта начального математического образования. Материалы международного исследования TIMSS 2007 года, как и проводимых ранее исследований, подтверждают целесообразность и возможность включения в содержание математической подготовки учащихся начальной школы ряда вопросов, которые не входят в действующий стандарт начального математического образования или им не уделяется соответствующее внимание (например, доли, числовые и знаковые последовательности; округление и прикидка результатов вычислений; интенсивное развитие пространственных представлений и воображения, практическая работа с геометрическими объектами (конструирование геометрических объектов, изображение, построение)). Особое внимание следует обратить на раздел «Работа с данными», который в отличие от большинства других стран не включен в программу российской начальной школы. Достаточно высокие результаты выполнения многих заданий в 2007 году показывают, что этот важный для функционирования в повседневной жизни материал доступен учащимся российской начальной школы. Это подтверждает целесообразность его включения в стандарт второго поколения для выпускников начальной школы, проведя необходимую работу по отбору соответствующего содержания и установления разумных требований к подготовке учащихся. Программа российской основной школы обеспечивает учащихся знаниями, необходимыми для выполнения международных тестов в исследовании TIMSS-2007. В то же время международные тесты не затрагивают всех ключевых вопросов курсов геометрии и алгебры основной школы, изученных учащимися к моменту проведения исследования. Таким образом, результаты исследования TIMSS-2007 не позволяют составить полное представление о геометрической подготовке российских восьмиклассников, хотя позволяют оценить их геометрическую подготовку с точки зрения приоритетов, 4

принятых международными экспертами стран-участниц исследования TIMSS. Российские восьмиклассники показывают хорошие результаты при выполнении заданий по алгебре и геометрии по вопросам, традиционным для нашей основной школы. В то же время невысоки результаты при выполнении заданий, составленных на материале курса математики 5-6 классов российской школы. Это связано с тем, что отсутствует преемственность между курсами математики 7-9 классов и 5-6 классов, и соответствующие знания не только не развиваются, но и не актуализируются. Российские восьмиклассники не умеют эффективно применять полученные знания при выполнении нестандартных заданий по алгебре, связанных с выявлением закономерностей, разрешением проблем, возникающих в реальной ситуация, описанной в условии задачи. Это связано с тем, что обучение решению задач фактически завершается в 5-6 классах, а в курсе алгебры не поддерживается систематическим повторением и учащимся не предлагаются задачи практического содержания. Разделяя международные приоритеты, считаем, что при разработке новых стандартов следует учесть указанные недочеты в подготовке учащихся по курсу алгебры основной школы. Основное отличие российской школы в изучении геометрии от зарубежной школы заключается в том, что зарубежная школа делает акцент на развитие пространственных представлений и воображения учащихся, изучение геометрических свойств окружающего мира, а российская школа – на развитие логического мышления учащихся, умения аргументировать свои суждения и фиксировать их на бумаге. В итоге российские учащиеся явно недостаточно овладевают знаниями и навыками, необходимыми для успешного функционирования в современном мире. Очевидно, что для изменения этого противопоставления необходимо при разработке стандартов нового поколения найти разумный баланс между российскими и международными требованиями к геометрической подготовке выпускников основной школы. Результаты выполнения заданий, составленных на материале новой темы для российской школы «Вероятность. Статистика» в целом невысокие. Восьмиклассники успешно справляются только с самыми простыми заданиями, хотя программа российской основной школы обеспечивает возможность выполнения подавляющего большинства заданий международных тестов по этой теме. Изучение опыта российской школы по преподаванию темы «Вероятность. Статистика» позволяет высказать обоснованное предположение о том, что учителя, видимо, ещё не приобрели опыт преподавания, а учащиеся – опыт применения материала, изученного в рамках этой темы. Скорее всего, это объясняется тем, что обязательное изучение этой темы рекомендовано Министерством образования и науки, начиная с 2004 г. 5

Особенности выполнения международного теста по естествознанию Анализ результатов выполнения естественнонаучной части международных тестов российскими учащимися 4 и 8 классов позволяет сделать следующие выводы. Как и по математике, содержание программы по курсу «Окружающий мир» российской начальной школы обеспечивает выполнение менее половины заданий естественнонаучной части международного теста. Несмотря на это, российские школьники продемонстрировали достаточно высокие результаты, что еще раз доказывает тезис о значительном интеллектуальном потенциале выпускников российской начальной школы, их информированности и достаточно высоком уровне познавательной деятельности. Самые высокие результаты продемонстрировали российские четвероклассники при выполнении заданий на материал из физики и химии. Содержание более 70% заданий из области физических наук выходило за рамки программы. Это говорит о наличии у российских учащихся 4 классов начальных представлений и знаний в области физики и химии, полученных ими вне школы, а также некоторого жизненного опыта. Анализ содержания международного теста для учащихся 8 класса показал, что содержание более 60% заданий соответствует отечественным школьным программам по предметам естественнонаучного цикла на момент окончания 8 класса. Из внепрограммных заданий большая часть – это вопросы экологического содержания, вопросы по общей биологии и др. Достаточно высокие результаты российских восьмиклассников отмечаются для заданий, проверяющих знание фактического материала, а также применения изученных элементов при сравнении объектов по их свойствам, проведении простейших расчетов. По сравнению с результатами предыдущих циклов исследования TIMSS наблюдается повышение результатов выполнения заданий, оценивающих понимание основных естественнонаучных понятий и применение основных закономерностей. Однако на прежнем уровне остаются результаты выполнения заданий, в которых требуется объяснить протекание тех или иных реальных явлений или процессов из окружающей жизни. Низкие результаты получены при выполнении заданий на проведение мысленных экспериментов с типичным лабораторным оборудованием, которое они должны были использовать на уроках, например, химии или физики. Проблемными были задания, в которых надо было проанализировать проблему с целью определения этапов ее решения, найти способы ее решения и объяснить или обосновать эти решения. Это говорит или об отсутствии опыта проведения экспериментальных работ в связи с возможным отсутствием оборудования, или о неосознанности выполнения этих работ. 6

Сравнение результатов российских выпускников начальной школы и учащихся 8 классов свидетельствует о том, что по большинству показателей результаты учащихся начальной школы лучше, чем результаты учащихся основной школы (8 класс). Этот факт заслуживает пристального внимания в связи с тем, что доля естественнонаучных предметов в учебном плане начальной школы существенно ниже (5%), чем в основной школе (в 8 классе – 25%). Следует также отметить, что проблемы, выявленные на начальной ступени обучения (затруднения при интеграции и применении знаний; неумение изложить свои мысли в письменной форме; сложности при работе с материалом, представленным в непривычной форме), остаются и на другой, более высокой ступени обучения, в основной школе. Особенности общеобразовательных учреждений и учебного процесса Среди факторов, характеризующих особенности образовательных учреждений следует выделить те, которые тем или иным образом связаны с эффективностью обучения. Исследование косвенным образом подтвердило улучшение общего экономического состояния российских семей. По данным анкетирования директоров общеобразовательных учреждений в среднем по России на 10% по сравнению с 2003 годом увеличилось число школ, в которых большинство обучающихся из экономически благополучных семей. По сравнению с 2003 годом улучшилась в среднем образовательная среда в российских школах. Значительно выросло число школ, ответы директоров которых свидетельствовали о хорошем уровне материальнотехнического оснащения кабинетов естественнонаучных предметов (на 32%). Значительно больше учащихся 4 и 8 классов чувствуют себя в безопасности в школе (на 11% и 12% соответственно). Отмечено в среднем повышение степени удовлетворенности как директоров, так и учителей своей работой в школе. Наблюдается тенденция – чем выше уровень удовлетворенности учителей своей работой, тем выше средний балл их учащихся. Для выявления ресурсов повышения эффективности математического и естественнонаучного образования в российской школе был проведен анализ особенностей организации учебного процесса по математике и естественнонаучным предметам в разных странах. Он показал, что по сравнению с другими странами российские учителя уделяют довольно много времени контролю знаний учащихся (около 15% времени по естествознанию, и около 20% – по математике). Кроме того, значительная часть времени на уроке (до 10%-15%) отводится на проверку домашних заданий. Как результат – снижается доля времени, отводимая на организацию различной познавательной деятельности учащихся. Так, в России она не превышает 35% всего учебного времени на уроке, в то время как, например, в англоязычных странах она составляет не менее 45%. Практически все российские учителя (97%) задают домашнее задание 7

на каждом или почти на каждом уроке. Это значение выше, чем в других странах, и вдвое превышает среднее международное (43%). Для сравнения, в Японии и Республике Корея учителей, часто задающих домашнее задание, менее 5%. Проведенный первичный анализ данных исследования TIMSS позволил выявить ряд положительных тенденций в системе российского общего образования, а также определить направления дальнейшего совершенствования процесса обучения математике и естественнонаучным предметам. Результаты международного исследования TIMSS-2007 представлены на сайтах: Центра оценки качества образования ИСМО РАО - http://www.centeroko.ru Международного координационного центра -

http://timssandpirls.bc.edu

Контактные телефоны: +7-495-246-2421 – Ковалева Галина Сергеевна – национальный координатор России +1-617-552-1600 – Ina V.S. Millis, Michael O. Martin – международные координаторы

8

Страна

**

** ** ** ** **

**

**

Распределение результатов по математике

Гонконг Сингапур Тайвань Япония Казахстан Российская Федерация Англия Латвия Нидерланды Литва США Германия Дания Австралия Венгрия Италия Австрия Швеция Словения Сред. международное Армения Словацкая Республика Шотландия Новая Зеландия Чешская Республика Норвегия Украина Грузия Иран Алжир Колумбия Марокко Сальвадор Тунис Кувейт Катар Йемен

Средний балл

h h h h h h h h h h h h h h h h h

i i i i i i i i i i i i i i i 0

100

200

300

400

500

600

700

Распределение результатов (процентили)

5-й

25-й

75-й

4 4 4 4 4 4 5 4 4 4 4 4 4 4 4 4 4 4 4 4 4 5 4,5 - 5,5 4 4 4 4 4 4 4 4 4 4 4 4 4

Средний возраст

Индекс развития

10,2 10,4 10,2 10,5 10,6 10,8 10,2 11,0 10,2 10,8 10,3 10,4 11,0 9,9 10,7 9,8 10,3 10,8 9,8 10,6 10,4 9,8 10,0 10,3 9,8 10,3 10,1 10,2 10,2 10,4 10,6 11,0 10,2 10,2 9,7 11,2

0,937 0,922 0,932 0,953 0,794 0,813 0,946 0,855 0,953 0,862 0,951 0,935 0,949 0,962 0,874 0,941 0,948 0,956 0,917 0 0,775 0,863 0,946 0,943 0,891 0,968 0,788 0,754 0,759 0,733 0,791 0,646 0,735 0,766 0,891 0,875 0,508

800

h

Средний балл страны статистически значимо выше среднего международного балла

i

Средний балл страны статистически значимо ниже среднего международного балла

95-й

Средний балл и доверительный интервал при уровне достоверности 95% (±2SE)

607 (3,6) 599 (3,7) 576 (1,7) 568 (2,1) 549 (7,1) 544 (4,9) 541 (2,9) 537 (2,3) 535 (2,1) 530 (2,4) 529 (2,4) 525 (2,3) 523 (2,4) 516 (3,5) 510 (3,5) 507 (3,1) 505 (2,0) 503 (2,5) 502 (1,8) 500 500 (4,3) 496 (4,5) 494 (2,2) 492 (2,3) 486 (2,8) 473 (2,5) 469 (2,9) 438 (4,2) 402 (4,1) 378 (5,2) 355 (5,0) 341 (4,7) 330 (4,1) 327 (4,5) 316 (3,6) 296 (1,0) 224 (6,0)

Число лет обучения в школе

* Индекс развития включает в себя три составляющие: ожидаемая продолжительность жизни, уровень образования и ВВП на душу населения. Источник: United Nations Development Programme’s Human Development Report 2007/2008 , p.229-232 ** Страны, не выполнившие некоторые обязательные требования к формированию выборки ( ) В скобках указана стандартная ошибка измерения

9

Источник: IEA's Trends in International Mathematics and Science Study (TIMSS) 2007

Приложение Таблица 1 Основные результаты учащихся 4 классов по математике TIMSS-2007

Таблица 2

Страна

Распределение результатов по математике

Тайвань Республика Корея Сингапур ** Гонконг Япония Венгрия ** Англия Российская Федерация ** США ** Литва Чешская Республика Словения ## Сред. международное Армения Австралия Швеция Мальта ** Шотландия ** Сербия Италия Малайзия Норвегия Кипр Болгария ** Израиль Украина Румыния Босния и Герцеговина Ливан Таиланд Турция Иордания Тунис ** Грузия Иран Бахрейн Индонезия Сирия Египет Алжир Колумбия Оман Палестина Ботсвана Кувейт Сальвадор Саудовская Аравия Гана Катар ** Марокко

Средний балл

h h h h h h h h h h

i i i i i i i i i i i i i i i i i i i i i i i i i i i i i i i i i i i 0

100

200

300

400

500

600

700


5-й

25-й

75-й

95-й


598 597 593 572 570 517 513 512 508 506 504 501 500 499 496 491 488 487 486 480 474 469 465 464 463 462 461 456 449 441 432 427 420 410 403 398 397 395 391 387 380 372 367 364 354 340 329 309 307 381

Число лет обучения в школе

(4,5) (2,7) (3,8) (5,8) (2,4) (3,5) (4,8) (4,1) (2,8) (2,3) (2,4) (2,1)

8 8 8 8 8 8 9 7 или 8 8 8 8 7 или 8

(3,5) (3,9) (2,3) (1,2) (3,7) (3,3) (3,0) (5,0) (2,0) (1,6) (5,0) (3,9) (3,6) (4,1) (2,7) (4,0) (5,0) (4,8) (4,1) (2,4) (5,9) (4,1) (1,6) (3,8) (3,8) (3,6) (2,1) (3,6) (3,4) (3,5) (2,3) (2,3) (2,8) (2,9) (4,4) (1,4) (3,0)

8 8 8 9 9 8 8 8 8 8 8 8 8 8 8 или 9 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8

Средний возраст


14,2 14,3 14,4 14,4 14,5 14,6 14,2 14,6 14,3 14,9 14,4 13,8 14,9 13,9 14,8 14,0 13,7 14,9 13,9 14,3 13,8 13,8 14,9 14,0 14,2 15,0 14,7 14,4 14,3 14,0 14,0 14,5 14,2 14,2 14,1 14,3 13,9 14,1 14,5 14,5 14,3 14,0 14,9 14,4 15,0 14,4 15,8 13,9 14,8

0,932 0,921 0,922 0,937 0,953 0,874 0,946 0,802 0,951 0,862 0,891 0,917 0 0,775 0,962 0,956 0,878 0,946 0,810 0,941 0,811 0,968 0,903 0,824 0,932 0,788 0,813 0,803 0,772 0,781 0,775 0,773 0,766 0,754 0,759 0,866 0,728 0,724 0,708 0,733 0,791 0,814 0,731 0,654 0,891 0,735 0,812 0,553 0,875 0,646

800

h


i Средний балл страны статистически значимо ниже среднего международного балла


10


Основные результаты учащихся 8 классов по математике TIMSS-2007

Таблица 3 Основные результаты учащихся 4 классов по естествознанию TIMSS-2007 Средний балл

Сингапур Тайвань Гонконг Япония Российская Федерация ** Латвия Англия ** США Венгрия Италия ** Казахстан Германия Австралия Словацкая Республика Австрия Швеция ** Нидерланды Словения ** Дания Чешская Республика ** Литва Новая Зеландия ** Шотландия ## Сред. международное Армения Норвегия Украина Иран ** Грузия Колумбия Сальвадор Алжир Кувейт Тунис Марокко Катар Йемен

h h h h h h h h h h h h h h h h h h h h h

i i i i i i i i i i i i i 0

100

200

300

400

500

600

700


5-й

25-й

75-й

95-й


587 557 554 548 546 542 542 539 536 535 533 528 527 526 526 525 523 518 517 515 514 504 500 500 484 477 474 436 418 400 390 354 348 318 297 294 197

Число лет Средний обучения в возраст школе

(4,1) (2,0) (3,5) (2,1) (4,8) (2,3) (2,9) (2,7) (3,3) (3,2) (5,6) (2,4) (3,3) (4,8) (2,5) (2,9) (2,6) (1,9) (2,9) (3,1) (2,4) (2,6) (2,3)

4 4 4 4 4 4 5 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4.5 - 5.5 5

(5,7) (3,5) (3,1) (4,3) (4,6) (5,4) (3,4) (6,0) (4,4) (5,9) (5,9) (2,6) (7,2)

4 4 4 4 4 4 4 4 4 4 4 4 4

10,4 10,2 10,2 10,5 10,8 11,0 10,2 10,3 10,7 9,8 10,6 10,4 9,9 10,4 10,3 10,8 10,2 9,8 11,0 10,3 10,8 10,0 9,8 10,6 9,8 10,3 10,2 10,1 10,4 11,0 10,2 10,2 10,2 10,6 9,7 11,2

Индекс развития *

0,922 0,932 0,937 0,953 0,813 0,855 0,946 0,951 0,874 0,941 0,794 0,935 0,962 0,863 0,948 0,956 0,953 0,917 0,949 0,891 0,862 0,943 0,946 0,775 0,968 0,788 0,759 0,754 0,791 0,735 0,733 0,891 0,766 0,646 0,875 0,508

800

h


i



11


Распределение результатов по естествознанию

Страна

Таблица 4 Основные результаты учащихся 8 классов по естествознанию TIMSS-2007 Средний балл

Сингапур Тайвань Япония Республика Корея ** Англия Чешская Республика Венгрия Словения ** Гонконг Российская Федерация ** США ** Литва Автралия Швеция ## Сред. международное ** Шотландия Италия Армения Норвегия Украина Иордания Малайзия Таиланд ** Сербия ** Болгария ** Израиль Бахрейн Босния и Герцеговина Румыния Иран Мальта Турция Сирия Кипр Тунис Индонезия Оман ** Грузия ** Кувейт Колумбия Ливан Египет Алжир Палестина Саудовская Аравия Сальвадор Ботсвана Катар Гана ** Марокко

h h h h h h h h h h h h h h

i i i i i i i i i i i i i i i i i i i i i i i i i i i i i i i i i 0

100

200

300

400

500

600

700


5-й

25-й

75-й

8 8 8 8 9 8 8 7 или 8 8 7 или 8 8 8 8 8 9 8 8 8 8 8 8 8 8 8 8 8 8 или 9 8 8 9 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8 8

14,4 14,2 14,5 14,3 14,2 14,6 14,4 13,8 14,4 14,6 14,3 14,9 13,9 14,8 13,7 13,9 14,9 13,8 14,2 14,0 14,3 14,3 14,9 14,9 14,0 14,1 14,7 15,0 14,2 14,0 14,0 13,9 13,8 14,5 14,3 14,3 14,2 14,4 14,5 14,4 14,1 14,5 14,0 14,4 15,0 14,9 13,9 15,8 14,8


0,922 0,932 0,953 0,921 0,946 0,874 0,891 0,917 0,937 0,802 0,951 0,862 0,962 0,956 0,946 0,941 0,775 0,968 0,788 0,773 0,811 0,781 0,810 0,824 0,932 0,866 0,803 0,813 0,759 0,878 0,775 0,724 0,903 0,766 0,728 0,814 0,754 0,891 0,791 0,772 0,708 0,733 0,731 0,812 0,735 0,654 0,875 0,553 0,646

800

h


i


95-й


567 (4,4) 561 (3,7) 554 (1,9) 553 (2,0) 542 (4,5) 539 (2,9) 539 (1,9) 538 (2,2) 530 (4,9) 530 (3,9) 520 (2,9) 519 (2,5) 515 (3,6) 511 (2,6) 500 496 (3,4) 495 (2,8) 488 (5,8) 487 (2,2) 485 (3,5) 482 (4,0) 471 (6,0) 471 (4,3) 470 (3,2) 470 (5,9) 468 (4,3) 467 (1,7) 466 (2,8) 462 (3,9) 459 (3,6) 457 (1,4) 454 (3,7) 452 (2,9) 452 (2,0) 445 (2,1) 427 (3,4) 423 (3,0) 421 (4,8) 418 (2,8) 417 (3,5) 414 (5,9) 408 (3,6) 408 (1,7) 404 (3,5) 403 (2,4) 387 (2,9) 355 (3,1) 319 (1,7) 303 (5,4) 402 (2,9)

Число лет Средний обучения в возраст школе


12


Распределение результатов по естествознанию

Страна

Таблица 5 Сравнение результатов исследования TIMSS 2003 и 2007 годов по математике 2003 - 4 класс

Сингапур Гонконг Япония Тайвань Литва Российская Федерация Англия Венгрия США Италия Австралия Шотландия Словения Армения Норвегия Иран Тунис Средний международный балл (по шкале TIMSS)

Страна

Гонконг Сингапур Тайвань Япония Российская Федерация Англия Литва США Австралия Венгрия Италия Словения Армения Шотландия Норвегия Иран Тунис Средний международный балл (по шкале TIMSS)

500 (0,0)

Сингапур Гонконг Тайвань Япония Венгрия Российская Федерация Австралия США Литва Англия Шотландия Словения Италия Армения Норвегия Иран Тунис Средний международный балл (по шкале TIMSS)

500 (0,0)

2007 - 8 класс

2003 - 8 класс Страна

Разность между средним баллом страны и средним международным баллом 107 (3,6) h 99 (3,7) h 76 (1,7) h 68 (2,1) h 44 (4,9) h 41 (2,9) h 30 (2,4) h 29 (2,4) h 16 (3,5) h 10 (3,5) h 7 (3,1) h 2 (1,8) 0 (4,3) -6 (2,2) i -27 (2,5) i -98 (4,1) i -173 (4,5) i

Разность между средним баллом страны и средним международным баллом 105 (3,6) h 86 (3,3) h 85 (4,6) h 70 (2,1) h 29 (3,2) h 8 (3,7) h 5 (4,6) 4 (3,3) 2 (2,5) -2 (4,7) -2 (3,7) -7 (2,2) i -16 (3,2) i -22 (3,0) i -39 (2,5) i -89 (2,4) i -90 (2,2) i

Страна

Тайвань Сингапур Гонконг Япония Венгрия Англия Российская Федерация США Литва Словения Армения Австралия Шотландия Италия Норвегия Тунис Иран Средний международный балл (по шкале TIMSS)

500 (0,0)

Разность между средним баллом страны и средним международным баллом 98 (4,5) h 93 (3,8) h 72 (5,8) h 70 (2,4) h 17 (3,5) h 13 (4,8) h 12 (4,1) h 8 (2,8) h 6 (2,3) h 1 (2,1) -1 (3,5) -4 (3,9) -13 (3,7) i -20 (3,0) i -31 (2,0) i -80 (2,4) i -97 (4,1) i 500 (0,0)

h Средний балл страны статистически значимо выше среднего международного балла i Средний балл страны статистически значимо ниже среднего международного балла

13


Страна

2007 - 4 класс

Разность между средним баллом страны и средним международным баллом 94 (5,6) h 75 (3,2) h 65 (1,6) h 64 (1,8) h 34 (2,8) h 32 (4,7) h 31 (3,7) h 29 (3,1) h 18 (2,4) h 3 (3,7) -1 (3,9) -10 (3,3) i -21 (2,6) i -44 (3,5) i -49 (2,3) i -111 (4,2) i -161 (4,7) i

Таблица 6 Сравнение результатов исследования TIMSS 2003 и 2007 годов по естествознанию 2003 - 4 класс

Сингапур Тайвань Япония Гонконг Англия США Венгрия Российская Федерация Австралия Италия Литва Шотландия Словения Норвегия Армения Иран Тунис Средний международный балл (по шкале TIMSS)

Страна

Сингапур Тайвань Гонконг Япония Российская Федерация Англия США Венгрия Италия Австралия Словения Литва Шотландия Армения Норвегия Иран Тунис Средний международный балл (по шкале TIMSS)

500 (0,0)

2003 - 8 класс Страна

Сингапур Тайвань Гонконг Япония Англия Венгрия США Австралия Словения Литва Российская Федерация Шотландия Норвегия Италия Армения Иран Тунис Средний международный балл (по шкале TIMSS)

Разность между средним баллом страны и средним международным баллом 87 (4,1) h 57 (2,0) h 54 (3,5) h 48 (2,1) h 46 (4,8) h 42 (2,9) h 39 (2,7) h 36 (3,3) h 35 (3,2) h 27 (3,3) h 18 (1,9) h 14 (2,4) h 0 (2,3) -16 (5,7) i -23 (3,5) i -64 (4,3) i -182 (5,9) i 500 (0,0)

2007 - 8 класс

Разность между средним баллом страны и средним международным баллом 78 (4,3) h 71 (3,5) h 56 (3,0) h 52 (1,7) h 44 (4,1) h 43 (2,8) h 27 (3,1) h 27 (3,8) h 20 (1,8) h 19 (2,1) h 14 (3,7) h 12 (3,4) h -6 (2,2) i -9 (3,1) i -39 (3,5) i -47 (2,3) i -96 (2,1) i

Страна

Сингапур Тайвань Япония Англия Венгрия Словения Гонконг Российская Федерация США Литва Австралия Шотландия Италия Армения Норвегия Иран Тунис Средний международный балл (по шкале TIMSS)

500 (0,0)

Разность между средним баллом страны и средним международным баллом 67 (4,4) h 61 (3,7) h 54 (1,9) h 42 (4,5) h 39 (2,9) h 38 (2,2) h 30 (4,9) h 30 (3,9) h 20 (2,9) h 19 (2,5) h 15 (3,6) h -4 (3,4) -5 (2,8) -12 (5,8) i -13 (2,2) i -41 (3,6) i -55 (2,1) i 500 (0,0)

h Средний балл страны статистически значимо выше среднего международного балла i Средний балл страны статистически значимо ниже среднего международного балла

14


Страна

2007 - 4 класс

Разность между средним баллом страны и средним международным баллом 65 (5,5) h 51 (1,7) h 43 (1,5) h 42 (3,1) h 40 (3,6) h 36 (2,5) h 30 (3,0) h 26 (5,2) h 21 (4,2) h 16 (3,8) h 12 (2,6) h 2 (2,9) -10 (2,5) i -34 (2,6) i -63 (4,3) i -86 (4,1) i -186 (5,7) i

Таблица 7 Распределение учащихся 4 классов, достигших разных уровней подготовки по математике TIMSS-2007

*

* * *

* *

*

*

Продвинутый уровень (625)

Проценты учащихся, достигших разных уровней

Сингапур Гонконг Тайвань Япония Казахстан Англия Российская Федерация Латвия США Литва Венгрия Австралия Армения Дания Нидерланды Германия Италия Новая Зеландия Словацкая Республика Шотландия Словения Австрия Швеция Украина Чешская Республика Норвегия Грузия Колумбия Марокко Иран Алжир Тунис Сальвадор Кувейт Катар Йемен Сред. международное

41 40 24 23 19 16 16 11 10 10 9 9 8 7 7 6 6 5 5 4 3 3 3 2 2 2 1 0 0 0 0 0 0 0 0 0 5 0

Процент учащихся, достигших:

25

продвинутого высокого уровня и уровня и выше (550) выше (625)

50

75

среднего уровня и выше (475)

низкого уровня и выше (400)

* Страны, не выполнившие некоторые обязательные требования к формированию выборки ( ) В скобках указана стандартная ошибка измерения

15

100

(2,1) (2,2) (1,2) (1,2) (2,1) (1,2) (1,8) (0,8) (0,8) (0,7) (0,8) (0,8) (1,5) (0,7) (0,7) (0,5) (0,7) (0,5) (0,7) (0,5) (0,4) (0,3) (0,3) (0,5) (0,4) (0,3) (0,4) (0,1) (0,2) (0,1) (0,1) (0,1) (0,0) (0,0) (0,0) (0,0) (0,0)

Высокий уровень (550)

74 81 66 61 52 48 48 44 40 42 35 35 28 36 42 37 29 26 26 25 25 26 24 17 19 15 10 2 2 3 2 1 1 0 0 0 26

(1,7) (1,6) (1,2) (1,2) (3,5) (1,4) (2,3) (1,5) (1,3) (1,4) (1,4) (1,9) (1,8) (1,5) (1,6) (1,3) (1,6) (1,0) (1,4) (1,1) (1,1) (1,0) (1,4) (1,1) (1,4) (1,0) (1,0) (0,4) (0,8) (0,5) (0,4) (0,2) (0,2) (0,1) (0,1) (0,1) (0,0)

Средний уровень (475)

92 97 92 89 81 79 81 81 77 77 67 71 60 76 84 78 67 61 63 62 67 69 68 50 59 52 35 9 9 20 14 9 6 5 2 1 67

(0,9) (0,5) (0,5) (0,8) (2,9) (1,2) (1,7) (1,2) (1,2) (1,4) (1,7) (1,7) (1,8) (1,2) (1,3) (1,2) (1,6) (1,1) (1,8) (1,4) (0,9) (1,4) (1,4) (1,5) (1,6) (1,6) (1,8) (1,1) (1,1) (1,5) (1,4) (0,7) (0,5) (0,6) (0,2) (0,4) (0,0)

Низкий уровень (400)

98 100 99 98 95 94 95 97 95 94 88 91 87 95 98 96 91 85 88 88 92 93 93 79 88 83 67 31 26 53 41 28 22 21 13 6 90

(0,3) (0,1) (0,2) (0,4) (1,5) (0,7) (0,7) (0,5) (0,5) (0,7) (1,2) (1,0) (1,2) (0,8) (0,4) (0,5) (1,0) (1,0) (1,5) (0,9) (0,6) (0,8) (0,7) (1,2) (1,1) (1,1) (2,0) (2,0) (2,0) (2,0) (2,2) (1,6) (1,6) (1,2) (0,4) (0,8)


Страна

Таблица 8

Страна

*

* * *

*

* *

*

*

Продвинутый уровень (625)


Тайвань Республика Корея Сингапур Гонконг Япония Венгрия Англия Российская Федерация Литва США Австралия Армения Чешская Республика Турция Сербия Мальта Болгария Словения Израиль Румыния Шотландия Таиланд Украина Италия Малайзия Кипр Швеция Иордания Босния и Герцеговина Иран Ливан Грузия Египет Индонезия Норвегия Палестина Колумбия Бахрейн Сирия Тунис Оман Катар Кувейт Вотсвана Сальвадор Гана Алжир Саудовская Аравия Марокко Сред. международное

45 40 40 31 26 10 8 8 6 6 6 6 6 5 5 5 4 4 4 4 4 3 3 3 2 2 2 1 1 1 1 1 1 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 2 0


25

продвинутого уровня и выше (625)

50

высокого уровня и выше (550)

75




16

100

(1,9) (1,2) (1,9) (2,1) (1,3) (1,0) (1,5) (0,9) (0,7) (0,6) (1,3) (0,9) (0,7) (0,6) (0,8) (0,4) (0,8) (0,6) (0,5) (0,6) (0,6) (0,8) (0,5) (0,6) (0,5) (0,3) (0,3) (0,2) (0,2) (0,2) (0,2) (0,3) (0,1) (0,2) (0,1) (0,1) (0,0) (0,1) (0,1) (0,1) (0,0) (0,0) (0,0) (0,0) (0,0) (0,0) (0,0) (0,0) (0,1) (0,0)

Высокий уровень (550)

Средний уровень (475)

Низкий уровень (400)

71 71 70 64 61 36 35 33 30 31 24 27 26 15 24 26 20 25 19 20 23 12 15 17 18 17 20 11 10 5 10 7 5 4 11 3 2 3 3 3 2 0 0 1 0 0 0 0 1 15

86 90 88 85 87 69 69 68 65 67 61 63 66 33 57 60 49 65 48 46 57 34 46 54 50 48 60 35 42 20 36 26 21 19 48 15 11 19 17 21 14 4 6 7 3 4 7 3 13 46

95 98 97 94 97 91 90 91 90 92 89 88 92 59 83 83 74 92 75 73 85 66 76 85 82 78 90 61 77 51 74 56 47 48 85 39 39 49 47 61 41 16 29 32 20 17 41 18 41 75

(1,5) (1,1) (2,0) (2,6) (1,2) (1,6) (2,5) (1,8) (1,1) (1,5) (1,8) (1,9) (1,2) (1,3) (1,3) (0,8) (1,5) (1,0) (1,3) (1,3) (1,8) (1,7) (1,1) (1,2) (2,1) (0,8) (1,0) (0,8) (0,7) (0,9) (1,2) (0,8) (0,4) (0,6) (0,7) (0,4) (0,3) (0,3) (0,5) (0,3) (0,3) (0,1) (0,2) (0,1) (0,1) (0,1) (0,1) (0,1) (0,5) (0,0)

(1,2) (0,7) (1,4) (2,1) (0,9) (1,6) (2,3) (2,1) (1,3) (1,4) (1,9) (1,4) (1,4) (1,8) (1,8) (0,6) (1,9) (1,4) (1,7) (1,8) (2,2) (2,2) (1,7) (1,5) (2,7) (0,9) (1,3) (1,7) (1,4) (1,7) (2,4) (1,7) (1,0) (1,4) (1,5) (0,9) (1,1) (0,7) (1,3) (1,2) (1,1) (0,2) (0,5) (0,7) (0,5) (0,7) (0,5) (0,4) (1,1) (0,0)

(0,6) (0,3) (0,6) (1,1) (0,3) (1,0) (1,4) (1,2) (0,8) (0,8) (1,0) (0,8) (0,8) (1,8) (1,2) (0,5) (1,7) (0,8) (1,4) (1,7) (1,3) (2,0) (1,5) (1,1) (1,9) (0,7) (0,9) (1,8) (1,3) (1,9) (2,3) (2,8) (1,5) (1,9) (0,8) (1,4) (2,1) (0,9) (1,9) (1,5) (1,5) (0,5) (1,3) (1,3) (1,2) (1,4) (1,4) (1,1) (2,0)

SOURCE: IEA's Trends in International Mathematics and Science Study (TIMSS) 2007

Распределение учащихся 8 классов, достигших разных уровней подготовки по математике TIMSS-2007

Таблица 9 Распределение учащихся 4 классов, достигших разных уровней подготовки по естествознанию TIMSS-2007

*

* *

* * * *

*

Продвинутый уровень 36 (1,9) 19 (1,0) 16 (1,9) 15 (0,9) 14 (1,2) 14 (1,4) 13 (1,0) 13 (1,0) 12 (1,0) 12 (1,8) 11 (0,8) 10 (0,7) 10 (1,1) 10 (0,7) 10 (1,3) 9 (0,7) 8 (0,6) 8 (0,5) 7 (0,7) 7 (0,8) 6 (0,6) 4 (0,6) 4 (0,8) 3 (0,4) 2 (0,3) 2 (0,3) 1 (0,4) 1 (0,2) 1 (0,2) 0 (0,1) 0 (0,2) 0 (0,2) 0 (0,1) 0 (0,1) 0 (0,0) 0 (0,0) 7 (0,0)


Сингапур Тайвань Российская Федерация США Англия Гонконг Венгрия Италия Япония Армения Словацкая Республика Австралия Латвия Германия Казахстан Австрия Швеция Новая Зеландия Чешская Республика Дания Словения Шотландия Нидерланды Литва Украина Иран Норвегия Колумбия Грузия Сальвадор Кувейт Марокко Алжир Тунис Катар Йемен Сред. международное 0


25

продвинутого высокого уровня и уровня и выше (625) выше (550)

50

75




17

100

Высокий уровень 68 55 49 47 48 55 47 44 51 27 42 41 47 41 44 39 37 32 33 35 36 26 34 30 17 12 17 6 5 4 4 2 2 3 2 0 34

(1,9) (1,2) (2,3) (1,4) (1,6) (2,2) (1,8) (1,6) (1,1) (1,8) (2,0) (2,2) (1,7) (1,3) (3,1) (1,3) (1,6) (1,0) (1,9) (1,5) (1,3) (1,2) (1,8) (1,4) (1,1) (1,0) (1,4) (0,8) (0,8) (0,5) (0,6) (0,5) (0,5) (0,6) (0,2) (0,1) (0,0)

Средний уровень 88 86 82 78 81 88 78 78 86 52 75 76 84 76 79 76 76 65 72 72 74 65 79 74 52 36 54 22 26 18 16 9 11 14 8 2 74

(1,1) (0,7) (1,7) (1,1) (1,1) (1,2) (1,6) (1,3) (1,0) (1,8) (1,8) (1,6) (1,3) (1,2) (2,6) (1,3) (1,5) (1,2) (1,4) (1,5) (1,0) (1,3) (1,4) (1,4) (1,5) (1,7) (2,0) (1,7) (2,0) (1,2) (1,3) (1,4) (1,3) (1,1) (0,3) (0,5) (0,0)

Низкий уровень 96 97 96 94 95 98 93 94 97 77 92 93 98 94 95 93 95 87 93 93 93 90 97 95 82 65 84 51 59 47 37 21 33 32 23 8 93

(0,5) (0,4) (0,9) (0,6) (0,6) (0,4) (0,8) (0,7) (0,4) (1,6) (1,3) (0,8) (0,4) (0,6) (1,0) (0,6) (0,6) (1,0) (0,8) (0,8) (0,6) (0,8) (0,5) (0,6) (1,3) (1,9) (1,4) (2,4) (2,1) (1,5) (1,3) (1,9) (2,1) (1,7) (0,7) (1,1)


Страна

Таблица 10 Распределение учащихся 8 классов, достигших разных уровней подготовки по естествознанию TIMSS-2007

*

* *

*

* * *

*

*

*


Продвинут ый уровень

Сингапур Тайвань Япония Англия Республика Корея Венгрия Чешская Республика Словения Российская Федерация Гонконг США Армения Австралия Литва Швеция Иордания Мальта Болгария Шотландия Израиль Италия Турция Украина Таиланд Малайзия Иран Бахрейн Сербия Румыния Норвегия Босния и Герцеговина Кипр Палестина Ливан Сирия Египет Оман Колумбия Кувейт Грузия Индонезия Тунис Сайдовская Аравия Катар Гана Сальвадор Ботсвана Алжир Марокко Сред. международное

32 25 17 17 17 13 11 11 11 10 10 8 8 8 6 5 5 5 5 5 4 3 3 3 3 2 2 2 2 2 2 1 1 1 1 1 1 1 0 0 0 0 0 0 0 0 0 0 0 3 0


25

продвинутого уровня и выше (625)

высокого уровня и выше (550)

50


75



18

100

(1,6) (1,5) (0,9) (1,6) (0,9) (1,1) (0,9) (0,7) (1,0) (1,0) (0,7) (1,7) (1,4) (0,6) (0,6) (0,6) (0,3) (0,9) (0,6) (0,6) (0,7) (0,5) (0,4) (0,8) (0,7) (0,5) (0,4) (0,3) (0,3) (0,2) (0,3) (0,3) (0,2) (0,4) (0,2) (0,1) (0,2) (0,1) (0,1) (0,1) (0,1) (0,1) (0,0) (0,0) (0,0) (0,1) (0,0) (0,0) (0,1) (0,0)

Высокий уровень 61 60 55 48 54 46 44 45 41 45 38 23 33 36 32 26 21 22 26 21 24 16 22 17 18 14 17 16 16 20 14 12 9 8 9 7 8 4 6 5 4 4 2 2 1 1 2 1 3 17

(2,2) (1,9) (1,1) (2,3) (1,1) (1,6) (1,4) (1,2) (2,1) (2,6) (1,4) (2,0) (1,8) (1,4) (1,2) (1,5) (0,6) (1,8) (1,5) (1,4) (1,3) (1,2) (1,4) (1,9) (2,2) (1,2) (0,8) (1,1) (1,2) (1,0) (1,0) (0,8) (0,6) (1,2) (0,8) (0,6) (0,6) (0,5) (0,7) (0,7) (0,6) (0,5) (0,5) (0,2) (0,3) (0,3) (0,3) (0,2) (0,5) (0,0)

Средний уровень 80 83 85 79 85 80 82 81 76 77 71 55 70 72 69 56 48 51 61 51 62 40 58 48 50 41 49 51 46 58 47 42 28 28 39 27 32 22 28 27 27 31 18 11 6 11 11 14 18 49

(1,8) (1,2) (0,8) (1,9) (0,8) (1,3) (0,8) (1,1) (1,6) (2,2) (1,3) (2,4) (1,7) (1,4) (1,4) (1,8) (0,7) (2,4) (1,8) (1,9) (1,4) (1,7) (1,8) (2,2) (2,7) (1,8) (0,9) (1,6) (1,9) (1,4) (1,7) (1,1) (1,2) (2,1) (1,6) (1,4) (1,2) (1,5) (1,2) (1,9) (1,8) (1,3) (1,0) (0,5) (0,9) (1,0) (0,7) (0,8) (1,4) (0,0)

Низкий уровень 93 95 96 94 97 96 97 97 95 92 92 83 92 93 91 79 71 76 87 75 88 71 85 80 80 76 78 81 77 87 80 74 54 55 76 55 61 59 60 61 65 77 52 29 19 42 35 55 51 78

(1,1) (0,6) (0,4) (0,9) (0,4) (0,7) (0,4) (0,5) (0,7) (1,3) (0,7) (1,3) (0,8) (0,8) (0,8) (1,4) (0,6) (2,1) (1,1) (1,8) (1,0) (1,5) (1,3) (1,5) (2,2) (1,7) (0,7) (1,1) (1,6) (0,9) (1,2) (1,0) (1,5) (2,9) (1,5) (1,6) (1,4) (2,1) (1,4) (2,4) (2,0) (1,2) (1,4) (0,6) (1,6) (1,7) (1,3) (1,2) (2,1)


Страна

Краткая информация о результатах международного исследования TIMSS-2007 качества математического и естественнонаучного образования

Recommend Documents