Недостатки контент-анализа

Как и все техники исследования, контент-анализ имеет ряд ограничений.

Контент-анализ может быть хорошим лишь настолько, насколько хороши документы, над которыми работает исследователь. Рекомендуют оценивать документы в терминах таких критериев, как: аутентичность (действительно ли речь в документе идет о том, о чем заявлено в названии документа); надежность (есть ли основания полагать, что содержание документа было искажено каким-либо образом); и репрезентативность (репрезентирует ли исследуемый документ все возможные релевантные документы, как если бы обобщаемость определенных документов, которые недоступны или больше не существуют, находилась под угрозой). Эти замечания особенно важно иметь в виду, когда контент-анализ применяют для исследования таких документов, как отчеты компаний или внутренние меморандумы.

Почти невозможно составить руководство по кодированию, которое не включало бы определенную долю интерпретацию со стороны кодировщиков. Кодировщики должны опираться на свой повседневный опыт и знания как представители их культуры, чтобы быть способными кодировать материал, с которым они сталкиваются.

Спорным остается вопрос, оправдано ли предположение о существовании согласия между людьми, ответственными за составление анализируемых документов, и людьми, их кодирующими.

Посредством контент-анализа сложно получить ответы на вопрос «почему?». Например, исследователи обнаружили, что на протяжении почти десятилетия, академически-ориентированные статьи на тему организационной культуры постепенно адаптировались и переняли подход практиков. Почему? Хотя авторы предлагают ряд гипотетических ответов на этот вопрос, сам контент-анализ не может предоставить ответ. Как утверждается, «конвергенция — принятие теоретиками более практичного подхода — могла возникнуть из-за того, что они хотели обезопасить ценные ресурсы и сохранить большую аудиторию для своих работ, но, учитывая природу данных, в равной степени возможны и другие объяснения». Следовательно, утверждают теоретики, определение мотивов этой конвергенции потребует проведения интервью с авторами работ «и исследования набора цитат с целью — выяснить, кто же и на кого повлиял».

Исследования, в которых применяют контент-анализ, часто обвиняют в том, что они атеоретичны. Несложно понять, почему мог возникнуть атеоретичный подход. Тот акцент, который в контент-анализе делают на метрике, может легко и непреднамеренно трансформироваться в акцент, который делают на том, что можно измерить, а не на том, что теоретически значимо или важно. Однако контент-анализ не обязательно атеоретичен.

Понимание языковых категорий — это важная составляющая исследований, в особенности во включенном наблюдении. Это важно потому, что знание способов употребления значения специфических слов и специфических терминов в местном жаргоне часто считают решающим фактором для оценки того, как изучаемый социальный мир воспринимают его участники.