Протокол громкого мышления

Протокол громкого мышления (англ. think-aloud protocol) — метод сбора данных, используемый при тестировании удобства использования, в проектировании и разработке продуктов, в психологии и ряде социальных наук (например, при исследовании чтения, письма, переводческой деятельности, принятия решений и трассировании процессов).

Описание

Протоколы громкого мышления предполагают, что участники вслух озвучивают свои мысли во время выполнения набора заданных задач. Их просят произносить вслух всё, что приходит им в голову при выполнении задачи. Это может включать то, что они видят, думают, делают и чувствуют. Такой подход даёт наблюдателям представление о когнитивных процессах участника, позволяя сделать процессы мышления максимально явными во время выполнения задачи. В формальном исследовательском протоколе все высказывания участника протоколируются и затем анализируются. В тестировании удобства использования наблюдатели записывают сказанное и сделанное участниками, не стараясь интерпретировать их заявления и действия, особенно отмечая места возникновения затруднений. Сессии тестирования могут проходить как на устройствах самих участников, так и в более контролируемых условиях. Сессии часто записываются на аудио и видео, чтобы разработчики могли впоследствии изучить действия и реакции участников.

История

Метод громкого мышления был введён в область исследования удобства использования Клейтоном Льюисом[1] во время его работы в IBM, и подробно описан в книге «Task-Centered User Interface Design: A Practical Introduction» К. Льюиса и Джона Римана[2]. Метод основывается на техниках протокольного анализа, разработанных К. Эрикссоном и Г. Саймоном[3][4][5]. Однако между предложенными Эрикссоном и Саймоном принципами проведения протоколов и реальной практикой специалистов по удобству использования существуют существенные различия, о чём писали Тед Борен и Джудит Рэйми[6]. Эти расхождения обусловлены специфическими задачами и условиями тестирования на удобство. Практики должны учитывать такие различия и адаптировать метод под свои нужды, сохраняя валидность данных — например, иногда приходится чаще запрашивать дополнительную информацию, чем рекомендовали бы Эрикссон и Саймон, однако важно избегать влияния на мысли и действия участников.

Процесс

Обычная последовательность проведения протоколов громкого мышления включает следующие этапы:

  • Проектирование исследования и составление сценария: Определяется количество и тип участников тестирования. Обычно достаточно пяти человек[7]. Далее пишется инструктивный сценарий с пошаговыми заданиями, предусматривающий напоминания участникам проговаривать мысли вслух.
  • Набор участников: Команда подготавливает скрининговые критерии для отбора. После контакта с потенциальными участниками и согласования деталей предоставляется дополнительная информация для их подготовки.
  • Проведение протокола громкого мышления: После разъяснения целей и получения согласия участнику даются инструкции. Задаются открытые и уточняющие вопросы; избегаются наводящие вопросы и подсказки.
  • Анализ и обобщение выводов: Используются заметки, сделанные во время сессий, для выявления типичных паттернов и формирования итоговых рекомендаций для дальнейшей работы дизайн-команды.

Как отмечают Куусела и Паул[8], различают два типа экспериментальных процедур протокола громкого мышления: «конкурентный» (одновременный) — когда высказывания фиксируются прямо во время выполнения задания, и «ретроспективный» — когда после выполнения задачи участник заново проговаривает свои шаги, часто с помощью видеозаписи своих действий. Каждый подход обладает достоинствами и недостатками: обычно конкурентный протокол более полный, а ретроспективный меньше влияет на выполнение задачи. Тем не менее, некоторые исследования не выявили такого влияния «конкурентных» протоколов, что свидетельствует о возможности оптимизации и полноты, и достоверности вербальных отчётов.

Преимущества

Метод громкого мышления позволяет исследователям узнать, что пользователи действительно думают о предлагаемом решении или дизайне[9].

Родственный метод

Существует родственный, но несколько отличный метод сбора данных — протокол проговаривания вслух. Здесь участники только описывают свои действия, не высказывая размышлений. Такой подход считается более объективным, поскольку фиксируется только порядок выполнения действий без попыток их интерпретации или оправдания.

Примечания

  1. Lewis, C. H. Using the "Thinking Aloud" Method In Cognitive Interface Design (англ.). IBM RC-9265 (1982). Дата обращения: 10 июня 2024.
  2. Клейтон Льюис, Джон Риман. Task-Centered User Interface Design: A Practical Introduction (англ.). Дата обращения: 10 июня 2024.
  3. Ericsson, K., & Simon, H. (май 1980). “Verbal reports as data”. Psychological Review [англ.]. 87 (3): 215—251. DOI:10.1037/0033-295X.87.3.215. Дата обращения 2024-06-10. Проверьте дату в |date= (справка на английском); |access-date= требует |url= (справка)
  4. Ericsson, K., & Simon, H. Verbal reports on thinking // Introspection in Second Language Research : [англ.] / C. Faerch ; G. Kasper. — Кливдон, Эйвон : Multilingual Matters, 1987. — P. 24–54.
  5. Ericsson, K., & Simon, H. Protocol Analysis: Verbal Reports as Data : [англ.]. — 2nd. — Бостон : MIT Press, 1993. — ISBN 0-262-05029-3.
  6. Ted Boren, Judith Ramey. Thinking Aloud: Reconciling Theory and Practice (англ.). Дата обращения: 10 июня 2024.
  7. Nielsen, Jakob Why You Only Need to Test with 5 Users (англ.). Nielsen Norman Group. Дата обращения: 10 июня 2024.
  8. Kuusela, H., & Paul, P. (2000). “A comparison of concurrent and retrospective verbal protocol analysis”. American Journal of Psychology [англ.]. University of Illinois Press. 113 (3): 387—404. DOI:10.2307/1423365. JSTOR 1423365. PMID 10997234. Дата обращения 2024-06-10. |access-date= требует |url= (справка)
  9. Experience, World Leaders in Research-Based User Thinking Aloud: The #1 Usability Tool (англ.). Nielsen Norman Group. Дата обращения: 13 декабря 2021.

Литература

  • Ericsson, K., & Simon, H. Protocol Analysis: Verbal Reports as Data, 2-е издание. MIT Press, 1993. ISBN 0-262-05029-3.

Ссылки