<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.3 20210610//EN" "JATS-journalpublishing1-3.dtd">
<article article-type="research-article" dtd-version="1.3" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xml:lang="en"><front><journal-meta><journal-id journal-id-type="publisher-id">donstu</journal-id><journal-title-group><journal-title xml:lang="en">Advanced Engineering Research (Rostov-on-Don)</journal-title><trans-title-group xml:lang="ru"><trans-title>Advanced Engineering Research (Rostov-on-Don)</trans-title></trans-title-group></journal-title-group><issn pub-type="epub">2687-1653</issn><publisher><publisher-name>Don State Technical University</publisher-name></publisher></journal-meta><article-meta><article-id pub-id-type="doi">10.12737/4539</article-id><article-id custom-type="elpub" pub-id-type="custom">donstu-316</article-id><article-categories><subj-group subj-group-type="heading"><subject>Research Article</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="en"><subject>ENGINEERING, TECHNOLOGY AND TECHNICAL SCIENCES</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="ru"><subject>ИНЖЕНЕРНОЕ ДЕЛО, ТЕХНОЛОГИИ И ТЕХНИЧЕСКИЕ НАУКИ</subject></subj-group></article-categories><title-group><article-title>TESTING DESIGN METHODOLOGY BASED ON TWO-LEVEL MULTIFACTOR EXPERIMENT PLANNING AND DATA PROCESSING</article-title><trans-title-group xml:lang="ru"><trans-title>Методология организации тестирования на основе алгоритмов планирования и обработки двухуровневых многофакторных экспериментов</trans-title></trans-title-group></title-group><contrib-group><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Нейдорф</surname><given-names>Рудольф Анатольевич</given-names></name><name name-style="western" xml:lang="en"><surname>Neydorf</surname><given-names>Rudolf Anatolyevich</given-names></name></name-alternatives><email xlink:type="simple">neyruan@yandex.ru</email><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Обухова</surname><given-names>Елена Николаевна</given-names></name><name name-style="western" xml:lang="en"><surname>Obukhova</surname><given-names>Elena Nikolayevna</given-names></name></name-alternatives><email xlink:type="simple">elena21@spark-mail.ru</email><xref ref-type="aff" rid="aff-1"/></contrib></contrib-group><aff-alternatives id="aff-1"><aff xml:lang="ru">Донской государственный технический университет, Россия<country>Россия</country></aff><aff xml:lang="en">Don State Technical University, Russia<country>Russian Federation</country></aff></aff-alternatives><pub-date pub-type="collection"><year>2014</year></pub-date><pub-date pub-type="epub"><day>30</day><month>06</month><year>2014</year></pub-date><volume>14</volume><issue>2</issue><fpage>110</fpage><lpage>120</lpage><permissions><copyright-statement>Copyright &amp;#x00A9; Neydorf R.A., Obukhova E.N., 2014</copyright-statement><copyright-year>2014</copyright-year><copyright-holder xml:lang="ru">Нейдорф Р.А., Обухова Е.Н.</copyright-holder><copyright-holder xml:lang="en">Neydorf R.A., Obukhova E.N.</copyright-holder><license license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>This work is licensed under a Creative Commons Attribution 4.0 License.</license-p></license></permissions><self-uri xlink:href="https://www.vestnik-donstu.ru/jour/article/view/316">https://www.vestnik-donstu.ru/jour/article/view/316</self-uri><abstract><p>The decomposition of knowledge into an array of “micro-knowledge” permitting a single-valued binary test score is studied. In this case, the test task is formulated as a set of micro-knowledge responses jointly revealing the knowledge level of the specific subsection. It allows presenting the development of a set of responses to a test question as the objective of investigating the multifactor dependence. Thus, the development process of a set of responses can be considered from the perspective of planning a multifactor two-level experiment. This approach allows a good formalization of the test construction, and its result estimation which becomes available to the teachers who do not specialize in the test task development. The method is illustrated by an example of the test construction, and application to assess the knowledge level on the automatic control theory. The data statistics has shown the respondents’ knowledge level, as well as the degree of a tester’s belief to the response awareness.</p></abstract><trans-abstract xml:lang="ru"><p>Исследуется декомпозиция знаний на множество «микрознаний», допускающих однозначную двоичную тестовую оценку. В таком случае задание теста формулируется как набор микрознаний ответов, совокупно раскрывающих уровень знания определённого подраздела. Это позволяет представить разработку набора ответов на тестовый вопрос как задачу исследования многофакторной зависимости. Таким образом, процесс разработки набора ответов можно рассматривать с позиций планирования многофакторного двухуровневого эксперимента. При таком подходе создание теста и оценка его результатов хорошо формализуются и становятся доступны преподавателям, не специализирующимся на разработках тестовых заданий. Методика проиллюстрирована примером построения и применения тестов для оценки уровня знаний по теории автоматического управления. Статистическая обработка результатов тестирования показала уровень знаний испытуемых, а также степень доверия тестирующего к осознанности ответа.</p></trans-abstract><kwd-group xml:lang="ru"><kwd>факторы знания</kwd><kwd>планирование эксперимента</kwd><kwd>двухуровневые многофакторные эксперименты</kwd><kwd>варьирование факторов</kwd><kwd>матрица планирования.</kwd></kwd-group><kwd-group xml:lang="en"><kwd>knowledge factors</kwd><kwd>experiment planning</kwd><kwd>two-level multifactor experiments</kwd><kwd>factor variability</kwd><kwd>planning matrix.</kwd></kwd-group><funding-group xml:lang="ru"><funding-statement>Работа выполнена по теме № 2.3.13 «Метод сбалансированной дискретизации для задач имитационного моделирования динамических процессов в распределённых объектах» в рамках выполнения госзадания Минобрнауки России в части НИР</funding-statement></funding-group><funding-group xml:lang="en"><funding-statement>The work is done on 2.3.13 theme “Balanced discretization method for tasks of dynamic process simulation modeling in distributed objects” within the frame of the Ministry of Education and Science of the Russian Federation thematic research plan.</funding-statement></funding-group></article-meta></front><back><ref-list><title>References</title><ref id="cit1"><label>1</label><citation-alternatives><mixed-citation xml:lang="ru">Ефремова, Н. Ф. Тестовый контроль в образовании / Н. Ф. Ефремова. — Москва : Логос : Университетская книга, 2007. — 386 с.</mixed-citation><mixed-citation xml:lang="en">Ефремова, Н. Ф. Тестовый контроль в образовании / Н. Ф. Ефремова. — Москва : Логос : Университетская книга, 2007. — 386 с.</mixed-citation></citation-alternatives></ref><ref id="cit2"><label>2</label><citation-alternatives><mixed-citation xml:lang="ru">Curriculum Frameworks for Mathematics and Science / general editor D. Robitalle // TIMMS Monograph № 1. — Vancouver : Pacific Educational Press, 2003. — 616 p.</mixed-citation><mixed-citation xml:lang="en">Curriculum Frameworks for Mathematics and Science / general editor D. Robitalle // TIMMS Monograph № 1. — Vancouver : Pacific Educational Press, 2003. — 616 p.</mixed-citation></citation-alternatives></ref><ref id="cit3"><label>3</label><citation-alternatives><mixed-citation xml:lang="ru">Measuring student knowledge and skills. A New Framework for Assessment / Organization for Economic Co-operation and Development (OECD). — Paris : OECD Publications Service, 1999. — 84 p.</mixed-citation><mixed-citation xml:lang="en">Measuring student knowledge and skills. A New Framework for Assessment / Organization for Economic Co-operation and Development (OECD). — Paris : OECD Publications Service, 1999. — 84 p.</mixed-citation></citation-alternatives></ref><ref id="cit4"><label>4</label><citation-alternatives><mixed-citation xml:lang="ru">Нейдорф, Р. А. Методология построения тестов на основе алгоритма планирования двух-уровневых многофакторных экспериментов [Электронный ресурс] / Р. А. Нейдорф, Е. Н. Обухова // Информационные технологии в управлении: сб. тр. V Российской междунар. конф. — Санкт-Петербург, 2012. — 1 электрон. опт. диск (CD-ROM).</mixed-citation><mixed-citation xml:lang="en">Нейдорф, Р. А. Методология построения тестов на основе алгоритма планирования двух-уровневых многофакторных экспериментов [Электронный ресурс] / Р. А. Нейдорф, Е. Н. Обухова // Информационные технологии в управлении: сб. тр. V Российской междунар. конф. — Санкт-Петербург, 2012. — 1 электрон. опт. диск (CD-ROM).</mixed-citation></citation-alternatives></ref><ref id="cit5"><label>5</label><citation-alternatives><mixed-citation xml:lang="ru">Нейдорф, Р. А. Методика составления тестовых заданий на основе алгоритма планирова-ния двухуровневых многофакторных экспериментов и анализ их использования в образовательном процессе [Электронный ресурс] / Р. А. Нейдорф, Е. Н. Обухова // Методики и технологии обеспечения и оценки качества образования: сб. мат-лов междунар. науч. конф. (Киев, 26‒28 июня). — Киров : МЦНИП, 2013. — 1 электрон. опт. диск (CD-ROM).</mixed-citation><mixed-citation xml:lang="en">Нейдорф, Р. А. Методика составления тестовых заданий на основе алгоритма планирова-ния двухуровневых многофакторных экспериментов и анализ их использования в образовательном процессе [Электронный ресурс] / Р. А. Нейдорф, Е. Н. Обухова // Методики и технологии обеспечения и оценки качества образования: сб. мат-лов междунар. науч. конф. (Киев, 26‒28 июня). — Киров : МЦНИП, 2013. — 1 электрон. опт. диск (CD-ROM).</mixed-citation></citation-alternatives></ref><ref id="cit6"><label>6</label><citation-alternatives><mixed-citation xml:lang="ru">Чернова, Н. А. Статистические методы планирования экстремальных экспериментов / Н. А. Чернова, В. В. Налимов. — Москва : Наука, 1965. — 340 с.</mixed-citation><mixed-citation xml:lang="en">Чернова, Н. А. Статистические методы планирования экстремальных экспериментов / Н. А. Чернова, В. В. Налимов. — Москва : Наука, 1965. — 340 с.</mixed-citation></citation-alternatives></ref><ref id="cit7"><label>7</label><citation-alternatives><mixed-citation xml:lang="ru">Адлер, Ю. П. Планирование эксперимента при поиске оптимальных условий / Ю. П. Адлер, Е. В. Маркова, Ю. В. Грановский. — Москва : Наука, 1976. — 274 с.</mixed-citation><mixed-citation xml:lang="en">Адлер, Ю. П. Планирование эксперимента при поиске оптимальных условий / Ю. П. Адлер, Е. В. Маркова, Ю. В. Грановский. — Москва : Наука, 1976. — 274 с.</mixed-citation></citation-alternatives></ref><ref id="cit8"><label>8</label><citation-alternatives><mixed-citation xml:lang="ru">Нейдорф, Р. А. Анализ применения трёхфакторных дробных тестов в учебном процессе / Р. А. Нейдорф, Е. Н. Обухова // Математические методы в технике и технологиях — ММТТ-26 : сб. тр. XXVI междунар. науч. конф. / под общ. ред. А. А. Большакова. — Нижний Новгород, 2013. — Т. 9, секция 11. — С. 320‒323.</mixed-citation><mixed-citation xml:lang="en">Нейдорф, Р. А. Анализ применения трёхфакторных дробных тестов в учебном процессе / Р. А. Нейдорф, Е. Н. Обухова // Математические методы в технике и технологиях — ММТТ-26 : сб. тр. XXVI междунар. науч. конф. / под общ. ред. А. А. Большакова. — Нижний Новгород, 2013. — Т. 9, секция 11. — С. 320‒323.</mixed-citation></citation-alternatives></ref><ref id="cit9"><label>9</label><citation-alternatives><mixed-citation xml:lang="ru">Вентцель, Е. С. Теория вероятностей и её инженерные приложения / Е. С. Вентцель, Л. А. Овчаров. — 3-е изд. — Москва : Академия, 2003. — 464 с.</mixed-citation><mixed-citation xml:lang="en">Вентцель, Е. С. Теория вероятностей и её инженерные приложения / Е. С. Вентцель, Л. А. Овчаров. — 3-е изд. — Москва : Академия, 2003. — 464 с.</mixed-citation></citation-alternatives></ref><ref id="cit10"><label>10</label><citation-alternatives><mixed-citation xml:lang="ru">Нейдорф, Р. А. Методика статистического расчёта балла тестируемого с выделением об-ласти неуверенности знаний [Электронный ресурс] / Р. А. Нейдорф, Е. Н. Обухова // Системный ана-лиз, управление и обработка информации : сб. тр. IV Междунар. науч. семинара (п. Дивноморское, 29 сент. — 3 окт. 2013). — 1 электрон. опт. диск (СD-ROM).</mixed-citation><mixed-citation xml:lang="en">Нейдорф, Р. А. Методика статистического расчёта балла тестируемого с выделением об-ласти неуверенности знаний [Электронный ресурс] / Р. А. Нейдорф, Е. Н. Обухова // Системный ана-лиз, управление и обработка информации : сб. тр. IV Междунар. науч. семинара (п. Дивноморское, 29 сент. — 3 окт. 2013). — 1 электрон. опт. диск (СD-ROM).</mixed-citation></citation-alternatives></ref></ref-list><fn-group><fn fn-type="conflict"><p>The authors declare that there are no conflicts of interest present.</p></fn></fn-group></back></article>
