Determining the Level of a Language Test with English Profile: A Forensic Linguistics Case Study.

This article deals with a forensic linguistics case study of the determination of the level of a B1 English multiple-choice test that was challenged in court by numerous candidates on the grounds that it was not of the appropriate level. A control corpus comprising 240 analogous multiple-choice ques...

Descripción completa

Detalles Bibliográficos
Publicado en:Atlantis (0210-6124) Vol. 42; no. 2; pp. 1 - 22
Autores principales: GAVALDÀ, NÚRIA, QUERALT, SHEILA
Formato: Artículo
Publicado: Departament de Llengues i Literatures Modernes i d'Estudis Anglesos Dec2020
Materias:
Acceso en línea:Ver este registro en EBSCOhost
fields @attributes:
  recordID: 1
pdfLink:
plink: https://search.ebscohost.com/login.aspx?direct=true&db=hlh&AN=147763339&site=ehost-live
header:
  @attributes:
    shortDbName: hlh
    uiTerm: 147763339
    longDbName: Humanities International Complete
    uiTag: AN
  controlInfo:
    bkinfo:
    jinfo:
      jid:
        02106124
        VSM
      jtl: Atlantis (0210-6124)
      issn: 02106124
      maglogo: N
    pubinfo:
      dt: Dec2020
      vid: 42
      iid: 2
      pid: 19799
      pub: Departament de Llengues i Literatures Modernes i d'Estudis Anglesos
    artinfo:
      ui:
        147763339
        10.28914/Atlantis-2020-42.2.01
      ppf: 1
      ppct: 21
      formats:
        fmt:
          @attributes:
            type: P
            size: 1.7MB
      tig:
        atl: Determining the Level of a Language Test with English Profile: A Forensic Linguistics Case Study.
      aug:
        au:
          GAVALDÀ, NÚRIA
          QUERALT, SHEILA
        affil:
          Universidad Internacional de La Rioja
          Laboratorio SQ-Lingüistas Forenses
      su:
        Language ability testing
        Forensic linguistics
        Language exams
        Common European Framework of Reference for Languages (Project)
        English language
        Multiple choice examinations
      sug:
        subj:
          Language ability testing
          Forensic linguistics
          Language exams
          Common European Framework of Reference for Languages (Project)
          English language
          Multiple choice examinations
      keyword:
        English Profile
        exámenes de opción múltiple
        forensic linguistics
        language level tests
        Level Appropriateness Threshold
        lingüística forense
        multiple-choice exams
        pruebas de nivel de idioma
        Umbral de Adecuación del Nivel
        exámenes de opción múltiple
        lingüística forense
        pruebas de nivel de idioma
        Umbral de Adecuación del Nivel
      ab:
        This article deals with a forensic linguistics case study of the determination of the level of a B1 English multiple-choice test that was challenged in court by numerous candidates on the grounds that it was not of the appropriate level. A control corpus comprising 240 analogous multiple-choice questions from B1 exams aligned with the Common European Framework of Reference for Languages (CEFR) was compiled in order to establish a threshold for the percentage of questions of a level higher than that being tested which can be expected in such exams. The analysis was carried out following a combination of qualitative and quantitative methods, with the help of the tool English Profile, which provides Reference Level Descriptions (RLDs) for the English language within the CEFR. The results of the analysis of the control corpus established a baseline of 5 to 7% of questions that include key items classified as higher than B1, while the percentage was 68% in the case of the disputed exam. Thus, the present study proposes a further application of the tool English Profile within the field of forensic linguistics and puts forward the concept of Level Appropriateness Threshold (LAT), analogous to other thresholds established in forensic linguistics, which can serve as a baseline for determining the appropriateness of B1 English multiple-choice exams and a model for other levels and skill areas.
        Este artículo trata de un estudio de caso de lingüística forense sobre la determinación del nivel de un examen de opción múltiple de inglés con nivel B1 que fue impugnado por numerosos candidatos que consideraban que su nivel no era el adecuado. Se compiló un corpus de control compuesto por 240 preguntas de opción múltiple similares provenientes de exámenes oficiales de B1 acordes con Marco Común Europeo de Referencia para las Lenguas (MCER), con el fin de establecer un umbral para el porcentaje de preguntas con un nivel superior al del nivel examinado que sería el esperable en dichos exámenes. El análisis se llevó a cabo siguiendo una combinación de métodos cualitativos y cuantitativos, con la ayuda de la herramienta English Profile, que proporciona Descripciones de Niveles de Referencia para el inglés dentro del MCER. Los resultados del análisis del corpus de control establecieron un umbral de adecuación de nivel de entre el 5 y 7% de preguntas clasificadas como superiores a B1, mientras que el porcentaje fue de un 68% en el caso del examen impugnado. Así pues, el presente estudio propone una nueva aplicación de la herramienta English Profile en el campo de la lingüística forense y el concepto de Umbral de Adecuación del Nivel, análogo a otros umbrales establecidos en la lingüística forense, como base para determinar la idoneidad de los exámenes de opción múltiple de inglés con nivel B1 y modelo para otros niveles y competencias.
      pubtype: Academic Journal
      doctype: Article
      src: R
    language: English
    refInfo:
    copyright:
      @attributes:
        flag: Y
      custom: Copyright of Atlantis (0210-6124) is the property of Departament de Llengues i Literatures Modernes i d'Estudis Anglesos and its content may not be copied or emailed to multiple sites without the copyright holder's express written permission. Additionally, content may not be used with any artificial intelligence tools or machine learning technologies. However, users may print, download, or email articles for individual use.
      item: Atlantis (0210-6124)
      holder: Departament de Llengues i Literatures Modernes i d'Estudis Anglesos
      dt:
        @attributes:
          year: 2020
    holdings:
      @attributes:
        islocal: N