<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Archiving and Interchange DTD with OASIS Tables with MathML3 v1.4 20220324//EN" "JATS-archive-oasis-tables-mathml3.dtd">
<article xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:mml="http://www.w3.org/1998/Math/MathML" xml:lang="en" dtd-version="1.4" article-type="research-article">
  <front>
    <journal-meta>
      <journal-id journal-id-type="eissn">2658-6282</journal-id>
      <journal-title-group>
        <journal-title xml:lang="ru">Мир науки. Педагогика и психология</journal-title>
        <journal-title xml:lang="en">World of Science. Pedagogy and psychology</journal-title>
      </journal-title-group>
      <publisher>
        <publisher-name>ООО «Издательство «Мир науки»</publisher-name>
      </publisher>
    </journal-meta>
    <article-meta>
      <article-id pub-id-type="doi">10.15862/41PDMN123</article-id>
      <article-id pub-id-type="uri">https://mir-nauki.com/41PDMN123.html</article-id>
      <title-group>
        <article-title xml:lang="ru">Применение тестов с заданиями
закрытой формы в обучении иностранному языку: минимизация эффекта угадывания</article-title>
        <trans-title-group xml:lang="en">
          <trans-title>The use of multiple-choice tests in teaching a foreign language: minimizing guessing effects</trans-title>
        </trans-title-group>
      </title-group>
      <contrib-group>
        <contrib contrib-type="author">
          <name name-style="eastern">
            <surname>Лопатинская</surname>
            <given-names>Виктория Валерьевна</given-names>
          </name>
          <name-alternatives>
            <name xml:lang="ru" name-style="eastern">
              <surname>Лопатинская</surname>
              <given-names>Виктория Валерьевна</given-names>
            </name>
            <name xml:lang="en" name-style="western">
              <surname>Lopatinskaya</surname>
              <given-names>Victoria Valerievna</given-names>
            </name>
          </name-alternatives>
          <email>lvv187@mail.ru</email>
          <contrib-id contrib-id-type="orcid">https://orcid.org/0000-0002-9710-5305</contrib-id>
          <xref ref-type="aff" rid="aff1"/>
        </contrib>
        <contrib contrib-type="author">
          <name name-style="eastern">
            <surname>Корольков</surname>
            <given-names>Владимир Анатольевич</given-names>
          </name>
          <name-alternatives>
            <name xml:lang="ru" name-style="eastern">
              <surname>Корольков</surname>
              <given-names>Владимир Анатольевич</given-names>
            </name>
            <name xml:lang="en" name-style="western">
              <surname>Korolkov</surname>
              <given-names>Vladimir Anatolievich</given-names>
            </name>
          </name-alternatives>
          <email>hovrin-v@mail.ru</email>
          <xref ref-type="aff" rid="aff2"/>
        </contrib>
        <aff-alternatives id="aff1">
          <aff>
            <institution xml:lang="ru">ФГБОУ ВО «Российский экономический университет имени Г.В. Плеханова» (Москва, Россия)</institution>
          </aff>
          <aff>
            <institution xml:lang="en">Plekhanov Russian University of Economics (Moscow, Russia)</institution>
          </aff>
        </aff-alternatives>
        <aff-alternatives id="aff2">
          <aff>
            <institution xml:lang="ru">АО «Научно-исследовательский институт железнодорожного транспорта» (Москва, Россия)</institution>
          </aff>
          <aff>
            <institution xml:lang="en">JSC «Railway Research Institute of JSC Russian Railways» (Moscow, Russia)</institution>
          </aff>
        </aff-alternatives>
      </contrib-group>
      <pub-date pub-type="epub" iso-8601-date="2023-04-18">
        <day>18</day>
        <month>04</month>
        <year>2023</year>
      </pub-date>
      <pub-date date-type="collection">
        <year>2023</year>
      </pub-date>
      <volume>11</volume>
      <issue>1</issue>
      <elocation-id>41PDMN123</elocation-id>
      <history>
        <date date-type="received" iso-8601-date="2023-02-27">
          <day>27</day>
          <month>02</month>
          <year>2023</year>
        </date>
        <date date-type="accepted" iso-8601-date="2023-04-11">
          <day>11</day>
          <month>04</month>
          <year>2023</year>
        </date>
      </history>
      <permissions>
        <copyright-year>2023</copyright-year>
        <copyright-holder xml:lang="ru">Лопатинская Виктория Валерьевна, Корольков Владимир Анатольевич</copyright-holder>
        <copyright-holder xml:lang="en">Lopatinskaya Victoria Valerievna, Korolkov Vladimir Anatolievich</copyright-holder>
        <license xlink:href="https://creativecommons.org/licenses/by/4.0/">
          <license-p>CC BY 4.0</license-p>
        </license>
      </permissions>
      <self-uri xlink:type="simple" xlink:href="https://mir-nauki.com/41PDMN123.html">https://mir-nauki.com/41PDMN123.html</self-uri>
      <abstract xml:lang="ru">
        <p>В статье рассматривается особенности применения тестов с заданиями закрытой формы. С ростом цифровизации образования помимо традиционных методов контроля знаний при обучении иностранным языкам все большее значение приобретает тестовый контроль, особенно для контроля текущей успеваемости. С этой целью чаще всего используется тесты закрытой формы. Обладая неоспоримыми преимуществами, такой вид тестирования имеет и ряд недостатков, среди которых авторы выделяют проблему возможности угадывания правильного ответа при выполнении теста. Отмечается, что существующие формулы корректирующей поправки, учитывающие возможность угадывания достаточно сложны и поэтому не всегда подходят для мгновенной оценки при проведении текущего контроля на занятии. Кроме того, большинство рассмотренных методик внесения поправки в результат тестирования с учётом возможного угадывания правильного варианта ответа исходят из предположения, что все тестируемые всегда в той или иной степени пытаются угадыванием компенсировать недостаток знаний. Целью настоящего исследования было предложить доступный метод выявления попыток угадывания правильного ответа в закрытом тесте с выбором одного варианта ответа по дисциплине «иностранный язык» студентами неязыковых факультетов вузов, позволяющий выявить попытки тестируемых угадать правильный ответ и внести соответствующие поправки в итоговый результат без сложной математической обработки. Метод основан на анализе ответов тестируемых при двукратном повторении вопросов. Получаемая при этом дополнительная информация позволила сократить расчётную часть методики определения доли угаданных ответов до одной формулы и в целом упростить методику. В статье описывается эксперимент по применению разработанного метода при тестировании.</p>
      </abstract>
      <trans-abstract xml:lang="en">
        <p>The article discusses the features of using multiple-choice tests. With the growing digitalization of education, in addition to traditional methods of knowledge assessment in teaching foreign languages, tests are becoming increasingly important, especially for monitoring current academic performance. For this purpose, multiple-choice tests are most often used. Having undeniable advantages, this type of tests has a number of disadvantages, among which the authors highlight the problem of guessing the correct answer when performing the test. It is noted that the existing formulas of correction for guessing are quite complex and therefore not always suitable for instant assessment during the current control in the classroom. In addition, most of the considered methods of correcting the test result, taking into account the possible guessing of the correct answer, proceed from the assumption that all test takers always try to compensate for the lack of knowledge by guessing to one degree or another. The purpose of this study was to offer an accessible method for identifying attempts to guess the correct answer in a multiple-choice test with one solution by students of non-linguistic faculties of universities studying English as a foreign language. The method should allow teachers to identify the attempts of test takers to guess the correct answer and make appropriate adjustments to the final result without complex mathematical processing. The method is based on the analysis of the test takers' answers when the questions are repeated twice. The additional information obtained in this case made it possible to reduce the calculations for determining the proportion of guessed answers to a single formula and simplify the methodology as a whole. The article describes an experiment on the application of the developed method in testing.</p>
      </trans-abstract>
      <kwd-group xml:lang="ru">
        <title>Ключевые слова</title>
        <kwd>формы текущего контроля</kwd>
        <kwd>иностранный язык</kwd>
        <kwd>тестирование</kwd>
        <kwd>вероятность угадывания</kwd>
        <kwd>тестовые задания закрытой формы</kwd>
        <kwd>оценивание</kwd>
        <kwd>цифровое тестирование</kwd>
      </kwd-group>
      <kwd-group xml:lang="en">
        <title>Keywords</title>
        <kwd>forms of current control</kwd>
        <kwd>foreign language</kwd>
        <kwd>testing</kwd>
        <kwd>probability of guessing</kwd>
        <kwd>multiple-choice test</kwd>
        <kwd>scoring</kwd>
        <kwd>digital testing</kwd>
      </kwd-group>
    </article-meta>
  </front>
  <back>
    <ref-list>
      <ref id="ref1">
        <label>1</label>
        <mixed-citation xml:lang="ru">Доржиева Э.А. Тестирование как форма контроля при обучении иностранному языку / Э.А. Доржиева // Перспективы науки. — 2022. — № 5(152). — С. 141–143. — URL: https://www.elibrary.ru/item.asp?id=49277672 (дата обращения: 11.01.2023).</mixed-citation>
      </ref>
      <ref id="ref2">
        <label>2</label>
        <mixed-citation xml:lang="ru">Зиньковская А.В., Андресян И.Ф. Особенности компьютерного тестирования как вида контроля качества знаний при обучении иностранному языку / А.В. Зиньковская, И.Ф. Андресян — DOI: 10.26140/bgz3-2019-0802-0058 // Балтийский гуманитарный журнал. — 2019. — Т. 8, № 2(27). — С. 47–49. — URL: https://www.elibrary.ru/item.asp?id=38498814 (дата обращения: 20.01.2023).</mixed-citation>
      </ref>
      <ref id="ref3">
        <label>3</label>
        <mixed-citation xml:lang="ru">Шкиль А.С., Чумаченко С.В., Напрасник С.В., Гаркуша Е.В. Построение тестовых заданий в системе компьютерного тестирования знаний OPENTEST2 / А.С. Шкиль, С.В. Чумаченко, С.В. Напрасник, Е.В. Гаркуша // АСУ и приборы автоматики. 2006. № 137. С. 21–32. — URL: https://cyberleninka.ru/article/n/postroenie-testovyh-zadaniy-v-sisteme-kompyuternogo-testirovaniya-znaniy-opentest2 (дата обращения: 24.12.2022).</mixed-citation>
      </ref>
      <ref id="ref4">
        <label>4</label>
        <mixed-citation xml:lang="ru">Romm A.T., Schoer, V. &amp; Kika, J.C. A test taker’s gamble: The effect of average grade to date on guessing behaviour in a multiple choice test with a negative marking rule / A.T. Romm, V. Schoer, J.C. Kika — DOI: 10.4102/sajems.v22i1.2542 // South African Journal of Economic and Management Sciences. — 2019. — vol. 22, n. 1, P. 1–12. — URL: http://dx.doi.org/10.4102/sajems.v22i1.2542. (дата обращения: 18.01.2023).</mixed-citation>
      </ref>
      <ref id="ref5">
        <label>5</label>
        <mixed-citation xml:lang="ru">Espinosa M.P., &amp; Gardeazabal J. Optimal correction for guessing in multiple-choice tests / M.P. Espinosa, &amp; J. Gardeazabal // Journal of Mathematical Psychology. — 2010. — 54(5). — P. 415–425. — URL: https://www.academia.edu/47344828/Optimal_correction_for_guessing_in_multiple_choice_tests (дата обращения: 15.01.2023).</mixed-citation>
      </ref>
      <ref id="ref6">
        <label>6</label>
        <mixed-citation xml:lang="ru">Buckles S., Siegfried J.J. Using multiple-choice questions to evaluate in-depth learning of economics / S. Buckles, J.J. Siegfried — DOI 10.3200/JECE.37.1.48-57 // Journal of Economic Education. — 2006. — 37(1). — P. 48–57. — URL: https://doi.org/10.3200/JECE.37.1.48-57 (дата обращения: 11.01.2023).</mixed-citation>
      </ref>
      <ref id="ref7">
        <label>7</label>
        <mixed-citation xml:lang="ru">Roediger III, H.L. &amp; Marsh, E.J. The positive and negative consequences of multiple-choice testing / H.L. Roediger III, E.J. Marsh. — DOI: 10.1037/0278-7393.31.5.1155 // Journal of Experimental Psychology: Learning, Memory and Cognition. — 2005. — 31(5), P. 1155–1159. — URL: https://doi.org/10.1037/0278-7393.31.5.1155 (дата обращения: 20.01.2023).</mixed-citation>
      </ref>
      <ref id="ref8">
        <label>8</label>
        <mixed-citation xml:lang="ru">Walstad W., &amp; Becker, W.E. Achievement Differences on Multiple-Choice and Essay Tests in Economics / W. Walstad, W.E. Becker // American Economic Review. — 1994. — 84. — P. 193–96. — URL: https://digitalcommons.unl.edu/cbafacpub/34 (дата обращения: 18.01.2023).</mixed-citation>
      </ref>
      <ref id="ref9">
        <label>9</label>
        <mixed-citation xml:lang="ru">Becker W.E., &amp; Johnston, C. The Relationship between Multiple Choice and Essay Response Questions in Assessing Economics Understanding / W.E. Becker, C. Johnston. — DOI: 10.1111/J.1475-4932.1999.TB02571.X // Economic Record. — 1999. — 75(4). — 348–357. https://doi.org/10.1111/J.1475-4932.1999.TB02571.X (дата обращения: 16.01.2023).</mixed-citation>
      </ref>
      <ref id="ref10">
        <label>10</label>
        <mixed-citation xml:lang="ru">Nicol D. E-assessment by design: Using multiple-choice tests to good effect / D. Nicol / — DOI: 31.10.1080/03098770601167922. // Journal of Further and Higher Education. — 2007. — 31(1). — P. 53–63. URL: https://typeset.io/papers/e-assessment-by-design-using-multiple-choice-tests-to-good-237a4ojomz (дата обращения: 01.02.2023).</mixed-citation>
      </ref>
      <ref id="ref11">
        <label>11</label>
        <mixed-citation xml:lang="ru">Betts L.R., Elder T.J., Hartley J., Trueman M. Does correction for guessing reduce students’ performance on multiple-choice examinations? Yes? No? Sometimes? / L.R. Betts, T.J. Elder, J. Hartley, M. Trueman. DOI: 10.1080/02602930701773091 // Assessment &amp; Evaluation in Higher Education. — 2009. — 34(1). — P. 1–15. URL: https://doi.org/10.1080/02602930701773091 (дата обращения: 01.02.2023).</mixed-citation>
      </ref>
      <ref id="ref12">
        <label>12</label>
        <mixed-citation xml:lang="ru">Brown A.S., Schilling H.E.H., &amp; Hockensmith, M.L. The negative suggestion effect: Pondering incorrect alternatives may be hazardous to your knowledge / A.S. Brown, H.E.H. Schilling, M.L. Hockensmith // Journal of Educational Psychology. — 1999. — 91. — 756–764.</mixed-citation>
      </ref>
      <ref id="ref13">
        <label>13</label>
        <mixed-citation xml:lang="ru">Bush M. A Multiple Choice Test that Rewards Partial Knowledge / M. Bush. — DOI: 10.1080/03098770123674 // Journal of Further and Higher Education. — 2001. — 25(2). — P. 157–163. URL: https://doi.org/10.1080/03098770123674 (дата обращения: 22.01.2023).</mixed-citation>
      </ref>
      <ref id="ref14">
        <label>14</label>
        <mixed-citation xml:lang="ru">Киясова Р.М., Халикбердиева Н.Т. Тестирование как способ измерения иноязычной компетенции при обучении иностранному языку / Р.М. Киясова, Н.Т. Халикбердиева // Academy. — 2020. — № 2(53). — С. 36–38.</mixed-citation>
      </ref>
      <ref id="ref15">
        <label>15</label>
        <mixed-citation xml:lang="ru">Денисенко Л.Г. Тестовые материалы в условиях реализации ФГОС для учреждений профессионального образования (из опыта разработки). Часть 1. — Новосибирск: Новосибирский институт мониторинга и развития образования, 2014. — 110 с.</mixed-citation>
      </ref>
      <ref id="ref16">
        <label>16</label>
        <mixed-citation xml:lang="ru">Kurz T.B. (1999). A review of scoring algorithms for multiple-choice tests / Kurz T.B. — San Antonio, TX, 1999. — 22 p.</mixed-citation>
      </ref>
      <ref id="ref17">
        <label>17</label>
        <mixed-citation xml:lang="ru">Traub R.E., Hambleton R.K., Singh B. Effects of promised reward and threatened penalty on performance of a multiple-choice vocabulary test / R.E. Traub, R.K. Hambleton, B. Singh. — DOI: 10.1177/00131644690290041 // Educational and Psychological Measurement. — 1969. — 29. — PP .847 –861. URL: https://journals.sagepub.com/doi/10.1177/001316446902900410 (дата обращения: 01.02.2023).</mixed-citation>
      </ref>
      <ref id="ref18">
        <label>18</label>
        <mixed-citation xml:lang="ru">Крыжановский Г.А., Купин В.В. Разработка процедуры корректирующей поправки к результатам письменного тестирования. / Г.А. Крыжановский, В.В. Купин // Научный вестник Московского государственного технического университета гражданской авиации. — 2010. — 159. — С. 20–26. URL: https://cyberleninka.ru/article/n/razrabotka-protsedury-korrektiruyuschey-popravki-k-rezultatam-pismennogo-testirovaniyaya/viewer (дата обращения: 16.01.2023).</mixed-citation>
      </ref>
      <ref id="ref19">
        <label>19</label>
        <mixed-citation xml:lang="ru">Нифонтов Н.С., Архипов А.Е. Анализ результатов закрытого теста на основе многопараметрических моделей IRT / Н.С. Нифонтов, А.Е. Архипов // Адаптивнi системи автоматичного управленнiя [Адаптивные системы автоматического управления]. — 2009. — № 14(34). — С. 61–66. — URL: https://www.elibrary.ru/item.asp?edn=txhmcv (дата обращения: 24.12.2022).</mixed-citation>
      </ref>
      <ref id="ref20">
        <label>20</label>
        <mixed-citation xml:lang="ru">Direr A. Efficient Scoring of Multiple-Choice Tests / A. Direr. — DOI: 10.2139/ssrn.3546770 // (July 20, 2020). Available at SSRN: http://dx.doi.org/10.2139/ssrn.3546770 (дата обращения: 05.02.2023).</mixed-citation>
      </ref>
    </ref-list>
  </back>
</article>
