Онлайн-опросы: набитые шишки и полученные уроки

Или что может быть полезно исследователю, который решил заменить телефонники онлайн-опросом (например, IT-специалистов) и поставить это "на поток" в своем агентстве.

1."Хорошая программа для онлайн-опросов выполняет часть функций полевого отдела, интервьюера, обработчика данных и ассистента".

Мой опыт: хороших программ для онлайн-опросов, которые подходят под все нужды исследователя, решившего, скажем, провести небольшой U&A, в природе нет :). Вернее есть, но даже в самой лучшей и продвинутой обязательно будет не хватать того, что нужно именно Вам.

В российских программах не хватает понимания нужд исследователя (когда разработчики в ответ на вопрос о возможности ротации вариантов ответа спрашивают: "А что это за болезнь?", бежать от них надо быстро).

А в зарубежных программах всегда есть проблема с кодировками. А если нет проблем с кодировками, то значит эта программа не позволяет делать массовую рассылку. Или не поддерживает возможность включать в текст вопроса предыдущий ответ респондента : "Вы сказали, что чаще всего покупаете бриллианты в магазине "Перекресток". Или не поддерживает еще какую-нибудь важную функцию (например, двойную ротацию).

А если нет двойной ротации (столбцы и строки) то можно сказать "до свидания" нормально заданным вопросам про имидж марок. А если есть двойная ротация, то для программирования анкеты потребуется дополнительный программист, потому что переходы там надо прописывать кодом из 1000 строк.

В общем пока идеальная программа для онлайн-опросов находится в поиске. И я часто вспоминаю совет одного западного коллеги: "Если вы делаете более пяти больших онлайн-опросов в месяц - потратьте деньги, время и напишите свое ПО. Потом эти деньги и время окупятся в двойном размере".

К любой, даже самой хорошей программе для онлайн-опросов требуются, помимо руководителя проекта, как минимум один полевой менеджер, один интервьюер (менеджер), контролирующий ход проекта и отвечающий на вопросы респондентов, один обработчик данных (помимо программиста) и один супер педантичный ассистент для, скажем, контроля рассылки призов (в этом деле ошибаться нельзя ). Причем все эти люди должны в принципе понимать, чем мы тут занимаемся и не падать в обморок при слове "вебмани"

2."Онлайн-анкета должна быть с максимально простым дизайном, похожим на печатную анкету (белый фон, черные буквы)"

Мой опыт: не всегда. Интернет предполагает "пищу для глаз" - яркий дизайн сайтов, картинки, баннеры, реклама. Респонденту может наскучить "белый низ черный верх" уже после третьего вопроса, а анкеты у нас к сожалению (или к счастью) как правило не похожи на приключенческий роман, от которго сложно оторваться. Выход - дизайн присутствовать должен, хотя бы в зачаточном состоянии.

А что нужно для хорошего дизайна? Хорошая идея анкеты. Составление портрета Интернет-пользователя от Masmi - отличный, имхо, вариант. Хотя не всеми воспринимается однозначно. Но при тестировании рекламных концепций эту идею использовать сложно. Так что хорошие идеи тоже находятся в поиске, причем постоянном. А с учетом постоянного цейтнота к предыдущей команде добавляется хотя бы один человек, способный быстро генерировать креативные идеи. А такие люди вообще нужны всем и всегда.

3."Респонденты в онлайн-опросах всегда врут и много сил надо тратить на системы проверки ответов"

Мой опыт: врут не больше, чем мы с Вами. То есть - в зависимости от ситуации. Если ставить человека в заведомо проигрышную ситуацию (черезмерно большая анкета, отсутствие логики вопросов, ошибки и т.д.) то да, будут заполнять неправильно. Но ни один самый злостный шутник не врет так, как врет интервьюер, заполняющий анкету "на коленке".

И чтобы не было таких ситуаций должен быть очень четкий сценарий интервью - почти на уровне сценария классической оперы . Это не только переходы, это еще и то, каким образом, к примеру, будут отсеиваться не прошедшие по фильтру респонденты? Что конкретно им надо будет написать, чтобы не возникло обиды и непонимания? Когда упоминать о вознаграждении - после скринера или до него? Что произойдет, если у респондента прервется связь? Можно ли поставить для тестирования ролик объемом в 3 мегайбайта, смогут ли его загрузить респонденты? Как правило, ролики меньше 2-3 мб. обладают таким качеством, что тестирование теряет смысл. Будем ли мы тестировать звук? Если да, то что делать респондентам, заполняющим анкету из офиса с компьютера без звуковой карты?

Когда у исследователя есть разумные ответы на эти и множество других вопросов ДО начала интервью, то глобальных проблем с враньем и некачественным заполнением анкеты не возникает.

В общем, если Вам все еще хочется заменить стандартный телефонник онлайн-опросом, то хорошенько еще раз подумайте. А если подумали и решили, что хочется, то, если все пойдет хорошо, Вы узнаете, что думают о Вашем умении составлять анкету несколько сотен возмущенных респондентов Причем от реального качества анкеты оценки эти зависят очень слабо.

Ну а про плюсы онлайн-опросов у нас и так пишут везде