Индекс нагрузки задач NASA ( NASA-TLX ) — это широко используемый [1] субъективный многомерный инструмент оценки, который оценивает воспринимаемую рабочую нагрузку для оценки эффективности задачи, системы или команды или других аспектов производительности ( загрузка задач ). Он был разработан группой Human Performance Group в исследовательском центре Эймса NASA в течение трехлетнего цикла разработки, который включал более 40 лабораторных симуляций. [2] [3] Он был процитирован в более чем 4400 исследованиях, [4] подчеркивающих влияние NASA-TLX на исследования человеческого фактора . Он использовался в различных областях, включая авиацию , здравоохранение и другие сложные социально-технические области. [1] Это субъективный набор баллов для самоотчета, и он не является объективной мерой нагрузки задач, которая должна измеряться с использованием объективных метрик, которые исследуют произведение скорости и точности выполнения задач пользователями.
Первоначально NASA-TLX состоял из двух частей: общая рабочая нагрузка делится на шесть субъективных подшкал, которые представлены на одной странице и служат одной частью анкеты:
Для каждой из этих подшкал имеется описание, которое субъект должен прочитать перед оценкой. Они оцениваются для каждой задачи в диапазоне 100 баллов с шагом в 5 баллов. Затем эти оценки объединяются в индекс нагрузки задачи. Можно найти описания для каждого измерения, чтобы помочь участникам ответить точно. [5] Эти описания следующие:
Вторая часть TLX направлена на создание индивидуального веса этих подшкал, позволяя субъектам сравнивать их попарно на основе их воспринимаемой важности. Это требует от пользователя выбора того, какое измерение более релевантно рабочей нагрузке . Количество раз, когда каждый из них выбран, является взвешенным баллом. [6] Это умножается на балл шкалы для каждого измерения, а затем делится на 15, чтобы получить балл рабочей нагрузки от 0 до 100, общий индекс нагрузки задачи. Однако многие исследователи исключают эти попарные сравнения и называют тест «сырым TLX». [7] Были доказательства, оценивающие и поддерживающие эту сокращенную версию по сравнению с полной, поскольку это может повысить экспериментальную валидность. [8]
При использовании «сырого TLX» отдельные подшкалы могут быть опущены, если они менее значимы для задачи. [1] [7]
Официальный NASA-TLX может быть введен с помощью бумажной и карандашной версии или с помощью официального NASA TLX для приложения Apple iOS. [9] Также существует множество неофициальных компьютерных реализаций NASA TLX. Эти неофициальные версии могут собирать персонально идентифицируемую информацию (PII), что является нарушением Руководства NASA по исследованию человека для сбора PII [10] , установленного Независимым наблюдательным советом NASA (IRB). [11]
Если участнику необходимо ответить на вопросы TLX несколько раз, ему нужно ответить на 15 парных сравнений только один раз для каждого типа задачи. [3] Если рабочую нагрузку участника необходимо измерить для принципиально разных задач, то может потребоваться повторное рассмотрение парных сравнений. В каждом случае испытуемый должен ответить на все 6 подшкал субъективных оценок. Именно эти последовательные оценки затем оцениваются с использованием исходных парных вопросов в качестве весовых коэффициентов, что приводит к пониманию общего изменения рабочей нагрузки. [2]
Хотя существует несколько способов проведения NASA-TLX, некоторые из них могут изменить результаты теста. Одно исследование показало, что версия с бумагой и карандашом привела к меньшей когнитивной нагрузке, чем обработка информации на экране компьютера. [12] Однако другие исследования показали, что версии с компьютерным экраном, а также на носимых устройствах, тем не менее, могут стабильно фиксировать относительные изменения рабочей нагрузки. [13] Чтобы преодолеть задержку в проведении теста, официальное приложение NASA TLX Apple iOS [9] может использоваться для сбора как ответов на парные вопросы, так и субъективного ввода субшкалы субъекта, а также для расчета окончательных взвешенных и невзвешенных результатов. Функция, обнаруженная в официальном приложении NASA TLX, представляет собой новую шкалу оценки ответа компьютерного интерфейса, называемую шкалой субъективного аналогового эквивалента (SAER), которая обеспечивает максимально близкий пользовательский опыт к тому, который есть в версии NASA TLX с бумагой и карандашом. Ни одна другая компьютеризированная версия NASA TLX не реализовала этот критически важный элемент для надлежащего сбора субъективного ввода пользователя. [ необходима цитата ] Это можно увидеть во многих неофициальных компьютеризированных (как веб-, так и программных) версиях, которые используют закрепленную или блокируемую шкалу. Это сводит на нет субъективную цель оригинальной бумажной и карандашной реализации NASA TLX.