7. Оценка качества исследования

7.1. Что такое качество социологического исследования

Качество исследования, его «хорошесть» здесь понимается как мера соответствия полученного знания истинному положению дел, т.е. тем реальным закономерным связям изучаемого явления или прогресса, которые социолог должен обнаружить, «открыть» в социальной действительности. В идеале получаемое в процессе/исследования знание должно быть слепком изучаемого явления, лишенным искажений. Так понимаемое качество результатов социологического исследования описывается с помощью термина достоверность. Следует добавить также, что качество погрешной информации (т.е. той, которая еще не обработана статистически, а лишь присутствует в массивах анкет, интервью, карточек наблюдения) описывается термином надежность. Мы прорим «достоверность выводов», но применительно к средствам сбора информации следует говорить «надежность измерительных процедур» или «надежность инструмента».

Установка на получение достоверного знания принципиальна для количественного подхода. В то же время оценить меру достоверности результата социологического исследования по самому результату практически невозможно. Всем нам знакома ситуация, когда в разгар предвыборной кампании на телеэкране мелькают столбики-рейтинги кандидатов на любые выборные должности, разительно отличающиеся друг от друга; опрашивая одни и те же социальные группы в один и тот же временной период, фирмы, изучающие общественное мнение, порой умудряются выдавать различные результаты.

В самом деле, оценить качество большинства продуктов человеческой деятельности можно только имея базу для сравнения, норму, отклонение от которой и будет свидетельствовать об их качестве. Эта норма может существовать в виде определенных параметров продукта, четко зафиксированных в соответствующих документах: например, конкретные толщина, высота и ширина вытачиваемой механической детали. Нормативными являются и представления, существующие в сознании тех или иных социальных групп, выступающих в качестве «производителей» нормы в обществе: например, качество современного романа может быть оценено критикой с позиции современных требований к .этому литературному жанру.

Для оценки достоверности результата социологического исследования не существует нормативной базы: никто не знает истинного распределения тех или иных социальных признаков или их связей в изучаемой социальной общности до самого исследования.

7.2. Как оценить достоверность результатов исследования

Вместе с тем опосредованно оценить достоверность результатов можно. Дело в том, что социологическое исследование представляет собой специфический вид познавательной деятельности. Из психологии известно, что процессуально любая деятельность может быть представлена тремя своими составляющими, как элементами цепочки: целью, средством и результатом. При таком рассмотрении становится ясно, что качество результата (его достоверность) целиком и полностью определяется качеством цели и, главное, качеством средств, используемых социологом при производстве знания, их надежностью, а также степенью соответствия Целей и средств (что немаловажно). Причем термин «средства» используется здесь в самом широком смысле, как все Познавательные конструкции и организационные процедуры, необходимые для производства социологического знания. Это и методы сбора социологической информации, и теоретическая концепция, лежащая в основе эмпирического изучения, и прежде всего теоретическая гипотеза; это и организация сбора информации, используемые методы анализа данных обоснование выборки исследования; это и интерпретация выводов и т.д.

Собственно говоря, умение создавать надежный инструмент исследования, организовывать сбой первичной информации так, чтобы минимизировать ее искажение, выбирать в каждой конкретной исследовательской ситуации оптимальный способ отбора выборочной совокупности, подбирать методы статистической обработки социологической информации с учетом не только целей и задач исследования, но и природы социальных признаков (качественные они или количественные) — это и многое другое есть основа профессионализма социолога, его ремесла.

Данные обстоятельства означают также; что для оценки достоверности результатов проведенного исследования необходимо по меньшей мере провести экспертизу инструмента сбора информации: опросника, карточки наблюдения, классификатора контент-анализа, Кроме того, необходимо оценить правильность расчета и обоснования выборки исследования, соответствие методов статистической обработки данных исследовательским задачам. Эти средства социологического исследования имеют нормативную базу: целый ряд требований к их конструированию и использованию существует в «метасоциологии» — специальной социологической науке', под названием «Методология и методы социологического исследования». Отсюда вытекает и принципиальная возможность их оценки с точки зрения надежности.

Проблема здесь состоит в том, что оценить саму эту надежность средств исследования, а в конечном итоге и достоверность результатов могут только социологи-профессионалы в рамках экспертизы. В то же время в достоверном социологическом знании нуждаются как конкретные заказчики (это характерно для прикладных исследований), так и общество в целом (при осуществлении фундаментальных исследований). Механизм же обязательной профессиональной экспертизы инструмента сегодня отсутствует, да и вряд ли может существовать вообще.