Контроль качества собираемых данных

1. Методология и выборка: достоверность информации обеспечивается тщательной проработкой структуры выборки исследования. Принцип ее формирования и репрезентативности. Строгое соблюдение методик исследования закладывает основу высокого качества исследованной информации.

2. Контроль качества при подготовке и в ходе проведения полевых работ. Перед началом полевых работ необходимо проводить обязательный пилотаж анкет, а также инструктаж и тренинги для интервьюеров.

3. Контроль качества по окончанию выполнения работ: после завершения полевых работ проводится визуальная проверка 100% заполненных анкет, проверка маршрутных листов интервьюеров и отчет партнеров. 10% заполненных анкет проверяется посредством повторного интервью (по телефону).

4. Контроль качества на этапе обработки данных: в ходе обработки данных осуществляется проверка первичного массива на полноту и совместимость данных

5. Анализ работы интервьюеров: работа интервьюеров обязательно проверяется на каждом этапе.

Контроль за преднамеренными ошибками интервьюеров осуществляется двумя способами: путем надзора за их работой интервьюеров и путем проверки выполненной работы. Надзор осуществляется, например, путем незамет­ного подключения к телефонной линии, по которой берется интервью. При устном интервьюировании интервьюера может сопровождать прове­ряющее лицо.

Цель проверки проведенного опроса заключается в выявлении слу­чаев обмана и фальсификации со стороны интервьюеров.

Для этого можно установить повторный контакт с рядом ранее оп­рошенных респондентов и узнать, принимали ли они участие в опросе, и проверить выборочно их ответы на вопросы. Кроме того, опытный про­веряющий, просматривая заполненные ответы, может обнаружить какие-то несоответствия.

Уменьшение непреднамеренной ошибки интервьюеров осуществ­ляется путем проведения ориентационных сессий и путем разыгрывания ролей. В первом случае производится ознакомление интервьюеров с це­лями обследования, с вопросником, с инструкцией по его заполнению. Разыгрывание ролей предполагает пробное заполнение анкет, когда одни из участников сессии исполняют роли интервьюеров, а другие — респон­дентов.

Контроль за преднамеренными ошибками респондентов направлен на снижение числа случаев лжи и отказа участвовать в обследовании.

Контроль за непреднамеренными ошибками респондентов осуще­ствляется в различных формах. Необходимо тщательно составлять во­просники и инструкции к ним, использовать разнонаправленные шкалы измерений. Для уменьшения числа ответов-предположений в шкалы вво­дятся такие градации, как «не имею мнения», «не могу вспомнить», «не уверен». Нецелесообразно в шкалах для всех вопросов с одной стороны располагать негативные оценки, а с другой — только положительные. Наконец, в во­просниках для поддержания внимания респондентов и доведения обсле­дования до конца могут использоваться такие фразы, как «Опрос близит­ся к концу», «Вы ответили на самые трудные вопросы».

Можно выделить три типа ошибок, обусловленных нежеланием респондента отвечать на вопросы: из-за отказа вообще принять участие в обследовании, из-за прекращения участия и из-за отказа отвечать на оп­ределенные вопросы.

Перед тем как табулировать и анализировать данные проведенного обследования, целесообразно провести их предварительную проверку и выявить ошибки респондентов.

Для этого прежде всего следует проверить анкеты на полноту и точность их заполнения, выявить возможную ненадежность (разные под­ходы к ответам на подобные вопросы) и односторонность ответов (например, только «да», «нет», «нет мнения»). Осуществляется это на систематической и несистематической основе. В первом случае анкеты выбираются случайным образом, и осуществляется их проверка на основе выборочных процедур; во втором — анкеты для проверки отбираются произвольным образом.

Если такие ошибки являются весьма существенными, то анкеты изымаются из дальнейшего анализа. Если возможно, то производится уточнение ответов. Жестких правил в данной области не существует, и они основаны на традициях, опыте и т.п., т.е. на неформальных подходах к определению, какие анкеты пригодны для последующего анализа, а какие — нет. Поэтому лучше ужесточить контроль сбора данных, умень­шив таким образом проблемы предварительной оценки собранных дан­ных.