Лучший способ справиться с этой проблемой — не уведомлять пользователей о том, что они выполняют тест; возможно, стоит даже попытаться, когда подвернется удобный случай, понаблюдать за ними, не оповещая их об этом. Если вы попросите пользователей выполнить тест на удобство использования, то, возможно, вы обнаружите, что они будут более внимательными или прикладывать больше, чем обычно, усилий, чтобы понять все, что нужно. При этом, видимо, они предполагают, что устроители теста будут довольны тем, какие же они опытные. Другая крайность может заключаться в том, что случайные тестеры будут намеренно искать ошибки. В любом случае, должно быть очевидно, что тестовые условия не всегда будут идентичны пользовательским условиям.
Очень важная проблема при тестировании — не слишком увлечься. К примеру, если вы просите пользователей оценить, сайт, не нужно быть их проводником по нему. Если вы принимаете участие в пользовательских сеансах просмотра, они обнаружат, лишь то, что хотите вы, и, вероятно, не будут пользоваться сайтом так, как они бы это делали при обычных условиях. Если вы слишком много разговариваете, презентуя функции сайта, то можете просто не дать пользователям шанса высказать то, что они думают. Пользовательское тестирование может оказаться очень трудным делом для тех дизайнеров сайтов, кто хочет выставить свою работу в наилучшем свете, но совсем не желает выслушивать критические отзывы пользователей.
Постарайтесь сделать так, чтобы пользовательский тест проводился человеком, не вовлеченным в процесс проектирования сайта.
Конечно, вы можете подойти к пользовательскому тестированию с крайне научной позиции: применять полупрозрачные зеркала, записывать движения мыши и нажатия клавиш, или даже отслеживать паузы или ошибки, совершаемые пользователем во время выполнения типичной задачи. Некоторые, быть может, пойдут еще дальше: будут следить за выражениями лица или даже следить за кровяным давлением субъекта тестирования. Как бы то ни было, конечный результат зачастую действительно является наиболее важной стороной теста. Помните, что в конечном счете, вероятно, единственное, что имеет серьезный смысл для пользователей, это то, смогли ли они успешно выполнить свою задачу и получили ли удовольствие от посещения сайта. Это не значит, что в изучении удобства использования отсутствуют корректно измеримые параметры; просто предполагается, что, как существа несовершенные, люди могут не всегда действовать логически, а могут даже быстро позабыть о сложности выполнения задачи, если в конце кроется замечательная насада. Читателям, заинтересованным в более глубоком понимании пользовательского тестирования и удобства использования, особенно теории и практики проведения тестов удобства использования, рекомендуется посетить сайты.