edpolicyОбразовательная политикаEducational Policy2078-838X2949-0987Российская академия народного хозяйства и государственной службы при Президенте Российской Федерации (РАНХиГС10.22394/2078-838x-2020-3-52-59edpolicy-258Research ArticleСтатьиМЕТОД EVIDENCECENTERED DESIGN Независимая оценка компетенций в цифровом миреРодинаНаталья Викторовна

аналитик, к. э. н., «Университет Национальной технологической инициативы 2035»

ПостоваловаАлина Анатольевна

«Университет Национальной технологической инициативы 2035», руководитель направления независимой оценки компетенций

ДолматовАлександр Владимирович

«Университет Национальной технологической инициативы 2035», руководитель отдела внедрения независимой оценки компетенций

«Университет Национальной технологической инициативы 2035»Russian Federation202122072026035259Copyright © Родина Н.В., Постовалова А.А., Долматов А.В., 20262026Родина Н.В., Постовалова А.А., Долматов А.В.Родина Н.В., Постовалова А.А., Долматов А.В.Данная работа распространяется под лицензией Creative Commons Attribution 4.0.This work is licensed under a Creative Commons Attribution 4.0 License.https://edpolicy.ranepa.ru/jour/article/view/258

В статье рассмотрены основные понятия, этапы и примеры использования метода доказательной аргументации Evidence-Centered Design (далее — ECD) для разработки инструментов оценки компетенций. Актуальность применения метода ECD обусловлена потребностью в развитии у граждан компетенций цифровой экономики и необходимостью наличия у них минимального уровня цифровой грамотности. Компетенции цифровой экономики — сложносоставные и внепредметные. Требуются специальные методы для их оценки. По опыту зарубежных стран, признанным методом оценки таких компетенций является Evidence-Centered Design, или ECD. В статье рассмотрен опыт зарубежных и российских специалистов в применении метода ECD для оценки различных компетенций, отдельно выделены примеры использования метода в рамках игровой оценки (оценки компетенций и усвоения знаний посредством компьютерных игр).

Независимая оценка компетенцийкомпетенции цифровой экономикицифровые компетенцииметод Evidence-Centered Design (ECD)метод доказательной аргументации.ReferencesАвдеева, С. М., Руднев, М. Г., Васин, Г. М., и др. (2017). ОценкаAvdeeva, S. M., Baryshnikova, M. Yu., Kovalenko, S. K., et al. (2009). Aboutинформационно-коммуникационной компетентности учащихся:the experience of implementing the ICT competence assessment model.подходы, инструмент, валидность и надежность результатов.Informatization of Education and Science, 2, 62–71. (In Russian).Вопросы образования, 4, 104–132. Получено из https://vo.hse.ru/Avdeeva, S. M., Rudnev, M. G., Vasin, G. M., et al. (2017). Assessing Informationdata/2017/12/20/1159979685/Avdeeva.pdf.and Communication Technology Competence of Students: Approaches,Авдеева, С. М., Барышникова, М. Ю., Коваленко, С. К., и др. (2009).Tools, Validity and Reliability of Results. Educational Studies Moscow, 4,Об опыте реализации модели оценки ИКТ-компетентности.–132. Retrieved from https://vo.hse.ru/data/2017/12/20/1159979685/Информатизация образования и науки, 2, 62–71.Avdeeva.pdf. (In Russian).Ефремова, Н. Ф. (2018). Проектирование оценочных средств поBehrens, J. T., Mislevy, R. J., Di Cerbo, K. E., et al. (2010). An evidence centeredмодели доказательной аргументации. Педагогические измерения,design for learning and assessment in the digital world. (CRESST ReportПолучено из https://cyberleninka.ru/article/n/proektirovanie-otsenochnyh-sredstv-po-modeli-dokazatelnoy-argumentatsii/viewer.. Los Angeles, CA: University of California, National Center for Research on Evaluation, Standards, and Student Testing (CRESST). RetrievedЕфремова, Н. Ф. (2019a). Концептуальная модель оценки компетенцийfrom https://files.eric.ed.gov/fulltext/ED520431.pdf.студентов. Современные наукоемкие технологии, 7, 169–174.Conrad, Sh., Clarke-Midura, J., & Klopfer, E. (2014). A Framework for StructuringПолучено из https://www.top-technologies.ru/ru/article/view?id=37607.Learning Assessment in a Massively Multiplayer Online Educational Game:Ефремова, Н. Ф. (2019b). Моделирование объективной оценки достижений студентов. Образовательные технологии, 3. Получено из https://cyberleninka.ru/Experiment Centered Design. International Journal of Game-Based Learning. DOI: 10.4018/IJGBL.2014010103. Retrieved fromarticle/n/modelirovanie-obektivnoy-otsenki-dostizheniy-studentov/viewer.https://www.researchgate.net/publication/261960598_A_Framework_for_Угланова, И. Л., Брун, И. В., Васин, Г. М. (2018). МетодологияStructuring_Learning_Assessment_in_a_Massively_Multiplayer_Online_Educational_Game_Experiment_Centered_Design.«Evidence-Centered Design» для измерения комплексныхDichev, C., & Dicheva, D. (2017). Gamifying education: what is known, what isпсихологических конструктов. Современная зарубежная психология,believed and what remains uncertain: a critical review. International Journal of Educational Technology in Higher Education, (14)9. DOI: 10.1186/(3), 18–27. DOI: 10.17759/jmfp.2018070302.s41239-017-0042-5.Угланова, И. Л., Орел, Е. А., Брун, И. В. (2020). Измерение креативностиEfremova, N. F. (2018). Design of evaluation tools based on the model ofи критического мышления в начальной школе. Психологическийevidence-based argumentation. Pedagogicheskie izmereniya, 3. Retrievedжурнал, 41(6), 96–107. DOI: 10.31857/S020595920011124-2.from https://cyberleninka.ru/article/n/proektirovanie-otsenochnyh-sredstv-po-modeli-dokazatelnoy-argumentatsii/viewer. (In Russian).Хлопотов, М. В. (2014). Применение байесовской сети при построенииEfremova, N. F. (2019). Conceptual Model of Evaluation of Competence ofмоделей обучающихся для оценки уровня сформированностиStudents. Modern high-tech Technologies, 7, 169–174. Retrieved fromкомпетенций. Науковедение, 5(24). Получено из https://cyberleninka.ru/article/n/primenenie-bayesovskoy-seti-pri-postroenii-modeley-dlya-otsenki-urovnya-sformirovannosti-kompetentsiy/viewer.www.top-technologies.ru/ru/article/view?id=37607. (In Russian).Худенко, Л. А., Авдеева, С. М. (2014). Исследование информационнокоммуникационной компетентности учащихся 9 классов РеспубликиEfremova, N. F. (2019). Modeling of an objective assessment of students‘Беларусь: цель и основные результаты. ВЕСНIК адукацыi, 1, 3–10.achievements. Obrazovatelnye tekhnologii, 3. Retrieved fromПолучено из https://www.ntf.ru/sites/default/files/%D0%A0%D0%91_%D1%8https://cyberleninka.ru/article/n/modelirovanie-obektivnoy-otsenki-dostizheniy-studentov/viewer. (In Russian).%D1%82%D0%B0%D1%82%D1%8C%D1%8F_%D0%B8%D0%BA%D0%BA.pdf.Groff, J., Clarke-Midura, J., Owen, V. E., et al. (2015). Better Learning inBehrens, J. T., Mislevy, R. J., Di Cerbo, K. E., et al. (2010). An evidenceGames. A Balanced Design Lens for a New Generation of Learning Games.centered design for learning and assessment in the digital world. (CRESSTLearning Games Network, MIT Education Arcade. Retrieved fromReport 778). Los Angeles, CA: University of California, National Centerhttps://education.mit.edu/wp-content/uploads/2018/10/BalancedDesignGuide2015.pdf.for Research on Evaluation, Standards, and Student Testing (CRESST).Khlopotov, M. V. (2014). Bayesian network in student model engineering forRetrieved from https://files.eric.ed.gov/fulltext/ED520431.pdf.competence level evaluation. Naukovedenie, 5(24). Retrieved fromConrad, Sh., Clarke-Midura, J., & Klopfer, E. (2014). A Framework for Structuring Learning Assessment in a Massively Multiplayer Online Educational Game: Experimenthttps://cyberleninka.ru/article/n/primenenie-bayesovskoy-seti-pri-postroenii-modeley-dlya-otsenki-urovnya-sformirovannosti-kompetentsiy/viewer.Centered Design. International Journal of Game-Based Learning. DOI: 10.4018/(In Russian).IJGBL.2014010103. Retrieved from https://www.researchgate.net/publication/261960598_A_Framework_for_Structuring_Learning_Assessment_in_a_Massively_Multiplayer_Online_Educational_Game_Experiment_Centered_Design.Khudenko, L. A., & Avdeeva, S. M. (2014). Research of information and communication competence of 9th grade students of the Republic of Belarus:Dichev, C., & Dicheva, D. (2017). Gamifying education: what is known, what is believedpurpose and main results. Bulletin of Education, 1, 3–10. Retrieved fromand what remains uncertain: a critical review. International Journal of Educationalhttps://www.ntf.ru/sites/default/files/%D0%A0%D0%91_%D1%81%D1%82%Technology in Higher Education, (14)9. DOI: 10.1186/s41239-017-0042-5.D0%B0%D1%82%D1%8C%D1%8F_%D0%B8%D0%BA%D0%BA.pdf.University of the State of New York, State Education Department. (2019).(In Russian).Educator Guide to the Regents Examination Global History and GeographyMislevy, R. J., Almond R. G., & Lukas, J. F. (2003). A brief introduction toII Grade 10. Retrieved from http://www.p12.nysed.gov/assessment/ss/hs/evidence-centered design: Research Report. Princeton, N.J.: Educationalframework/ghg2/educator-guide-ghg2-19.pdf.Testing Service. Retrieved from https://onlinelibrary.wiley.com/doi/Groff, J., Clarke-Midura, J., Owen, V. E., et al. (2015). Better Learning inepdf/10.1002/j.2333-8504.2003.tb01908.x.Games. A Balanced Design Lens for a New Generation of Learning Games.Shute, V. J., Masduki, I., & Donmez, O. (2010). Conceptual Framework for Modeling, Assessing and Supporting Competencies within Game Environments.Learning Games Network, MIT Education Arcade. Retrieved fromTech., Inst., Cognition and Learning, 8, 137–161.https://education.mit.edu/wp-content/uploads/2018/10/BalancedDesignGuide2015.pdf.Uglanova, I. L., Brun, I. V., & Vasin, G. M. (2018). Evidence-Centered DesignMislevy, R. J., Almond, R. G., & Lukas, J. F. (2003). A brief introduction tomethod for measuring complex psychological constructs. Journal ofevidence-centered design: Research Report. Princeton, N.J.: EducationalModern Foreign Psychology, 7(3), 18–27. DOI: 10.17759/jmfp.2018070302.Testing Service. Retrieved from https://onlinelibrary.wiley.com/doi/(In Russian).epdf/10.1002/j.2333-8504.2003.tb01908.x.Uglanova, I. L., Оrel, Е. А., & Brun, I. V. (2020). Measuring creativity and criticalShute, V. J., Masduki, I., & Donmez, O. (2010). Conceptual Framework forthinking in Primary School. Psikhologicheskii Zhurnal, 41(6), 96–107.Modeling, Assessing and Supporting Competencies within Game Environments. Tech., Inst., Cognition and Learning, 8, 137–161.DOI:10.31857/S020595920011124-2. (In Russian).Zieky, M. J. (2014). An introduction to the use of evidence-centered designUniversity of the State of New York, State Education Department. (2019).in test development. Psicología Educativa, 20, 79–87. Retrieved fromEducator Guide to the Regents Examination Global History and Geographyhttps://journals.copmadrid.org/psed/art/j.pse.2014.11.003II Grade 10. Retrieved from www.p12.nysed.gov/assessment/ss/hs/framework/ghg2/educator-guide-ghg2-19.pdf.framework/ghg2/educator-guide-ghg2-19.pdf.Zieky, M. J. (2014). An introduction to the use of evidence-centered design inZieky, M. J. (2014). An introduction to the use of evidence-centered design intest development. Psicología Educativa, 20, 79–87. Retrieved from https://test development. Psicología Educativa, 20, 79–87. Retrieved from https://journals.copmadrid.org/psed/art/j.pse.2014.11.003.journals.copmadrid.org/psed/art/j.pse.2014.11.003.

The authors declare that there are no conflicts of interest present.