Методы анализа документов.
Грамотный перевод первичных и особенно вторичных данных в целевую информацию требует знания методов анализа изучаемых данных. Всю совокупность носителей таких данных и в первую очередь печатных будем называть документами.
Можно выделить два основных типа анализа: традиционный, классический, и формализованный, количественный (контент-анализ) . Существенно различаясь между собой, они не исключают, а взаимно дополняют друг друга, позволяя компенсировать имеющиеся в каждом недостатки, так как оба в конечном счете преследуют одну и ту же цель — получение интересующей маркетолога достоверной и надежной информации.
Анализ документов используется главным образом при работе с вторичными данными и в первую очередь — социально-психологической направленности. Однако возможно его применение и при работе с первичными данными, например при анализе результатов опросов.
Традиционный анализ — это цепочка умственных, логических построений, направленных на выявление сути анализируемого материала с определенной, интересующей исследователя в каждом конкретном случае точки зрения. Интересующая маркетолога информация, заложенная в документе, часто присутствует там в неявном виде, в форме, отвечающей целям, с которыми документ был создан, но далеко не всегда отвечающей целям маркетинговых исследований. Проведение традиционного анализа означает преобразование первоначальной формы этой информации в необходимую исследователю форму. Фактически это не что иное, как интерпретация содержания документа, его толкование.
Традиционный анализ позволяет улавливать основные мысли и идеи, прослеживает генезис этих мыслей и идей, выясняет логику их обоснования, взвешивает вытекающие из них следствия, выявляет логические связи и логические противоречия между ними, оценивает их с точки зрения каких-либо экономических, политических, маркетинговых и иных позиций, выявляет логику самой организации материала и т. д.
Данный вид анализа позволяет охватывать самые глубинные, скрытые стороны содержания документа: этот анализ стремится как бы до конца проникнуть в глубь документа, исчерпать его содержание.
Основным его недостатком является субъективность. Как бы ни был добросовестен исследователь, как бы ни старался он предельно беспристрастно, предельно объективно рассмотреть материал, интерпретация всегда в большей или меньшей степени будет субъективна.
Однако можно выделить некоторые общие требования к проведению традиционного классического анализа в виде формализованного перечня вопросов.
При проведении традиционного анализа маркетолог должен ответить на следующие вопросы.
Что представляет собой документ? (Задаваясь этим вопросом, следует обратить внимание на вид, форму документа, решить, потребует ли его анализ применения каких-либо специальных методов и т. п.)
Каков его контекст? Кто его автор? Каковы цели, с которыми был создан документ? Какова надежность самого документа? Какова достоверность зафиксированных в нем данных? Каково фактическое содержание документа? (В результате ответа на этот вопрос должны быть полностью выяснены все факты, о которых свидетельствует или которые отражает документ.) Каково оценочное содержание документа? (Результатом ответа на этот вопрос должна быть полная ясность относительно того, что именно в документе можно считать выражением оценок, мотивов — вообще ценностных представлений, получивших в нем отражение.) Какие выводы можно сделать о фактах, содержащихся в документе? Какие выводы можно сделать об оценках, содержащихся в документе?
Ответы на эти вопросы являются наиболее ответственным этапом всего анализа, так как в основном именно здесь выкристаллизовывается то «новое знание», которое и составляет результат исследования.
Какие выводы можно сделать относительно автора документа? Этим вопросом задаются далеко не всегда, а лишь в тех случаях, когда получение представления о личности автора, о его личных и групповых интересах является важным для проводимого исследования.
Достаточно ли полны сведения, содержащиеся в проанализированном документе? Ответ на этот вопрос должен откорректировать выводы: насколько эти сведения достаточны для удовлетворения целей исследования, есть ли необходимость привлекать для дальнейшей работы дополнительный материал.
Перечисленные вопросы служат лишь ориентировочными отправными пунктами для постановки более конкретных вопросов. Например, если анализируются публичные выступления, рекламные материалы, то их подлинность почти всегда очевидна; но приобретает большое значение вопрос об их правдивости.
В традиционном анализе различают внешний и внутренний анализ.
Внешний анализ — это анализ контекста документа в собственном смысле этого слова и всех тех обстоятельств, которые сопутствовали его появлению. Цель внешнего анализа — установить вид документа, его форму, время и место появления, кто был его автором и инициатором, какие цели преследовались при его создании, насколько он надежен и достоверен, каков его контекст.
Пренебрежение таким анализом во многих случаях грозит неверным истолкованием содержания документа. Определенная политическая ситуация может способствовать тенденциозному освещению событий в прессе; внутренние трения между членами руководства какой-либо организации могут отразиться на содержании документов, описывающих деятельность этой организации, и т. д.
Внутренний анализ — это исследование содержания документа. По существу, вся работа маркетолога направлена на проведение внутреннего анализа документа, включающего выявление уровня достоверности приводимых фактов и цифр, установление уровня компетенции автора документа, выяснение его личного отношения к описываемым в документе фактам.
Искажения могут возникать не только в результате личной симпатии или антипатии автора; источником искажения выступает и методологическая позиция автора. Так, авторы, придерживающиеся разных теоретических позиций, могут признать существенными в объяснении конкретного явления разные факты.
Отдельные виды документов, в силу своей специфики, требуют специальных методов анализа и привлечения для их выполнения специалистов других областей знаний.
Юридический анализ. Он применяется для всех видов юридических документов. Его специфика заключается прежде всего в том, что в правовой науке разработан свой особый словарь терминов, в котором значение каждого слова строго однозначно определено. Незнание юридического словаря при анализе юридических документов может привести исследователя к грубым ошибкам.
Психологический анализ. Этот вид применяется, как правило, при оценке отношения автора к какому-либо политическому, экономическому или социальному явлению. На основе таких исследований может быть получено представление о формировании общественного мнения, общественных установок и т. п.
Формализованный анализ. Желание избавиться от субъективности традиционного анализа породило разработку принципиально иных, формализованных, или, как часто их называют, количественных методов анализа документов (контент-анализ).
Суть этих методов сводится к тому, чтобы найти такие легко подсчитываемые признаки, черты, свойства документа (например, такой признак, как частота употребления определенных терминов), которые с необходимостью отражали бы определенные существенные стороны содержания. Тогда качественное содержание делается измеримым, становится доступным точным вычислительным операциям. Результаты анализа становятся в достаточной мере объективными. Ограниченность формализованного анализа заключается в том, что далеко не все содержание документа может быть измерено с помощью формальных показателей.
Формализованный, количественный анализ оперирует конкретными, количественно измеряемыми параметрами. Его основным недостатком следует считать неточное, неисчерлывающее раскрытие содержания документа.
Контент-анализ — это техника выведения заключения, производимого благодаря объективному и систематическому выявлению соответствующих задачам исследования характеристик текста. При этом подразумевается, что применение такой техники включает в себя некоторые стандартизованные процедуры, часто предполагающие измерение. Полученные данные должны обладать заданным в исследовании уровнем обобщенности.
В практике работы с контент-анализом определились некоторые общие принципы, когда его применение представляется целесообразным.
Применение метода рекомендуется во всех случаях, когда требуется высокая степень точности или объективности анализа.
Контент-анализ обычно применяется при наличии обширного по объему и несистематизированного материала, когда непосредственное использование последнего затруднено (например, при использовании проекционных (проецирующих) методов).
Контент-анализ полезен в тех случаях, когда категории, важные для целей исследования, характеризуются определенной частотой появления в изучаемых документах, например при работе с ответами на открытые вопросы анкет или глубинных интервью.
Основными направлениями использования контент-анапиза являются: а) выявление и оценка характеристик текста как индикаторов определенных сторон изучаемого объекта; б) выяснение причин, породивших сообщение; в) оценка эффекта воздействия сообщения (например, рекламного).
Исследование характеристик текста проводится с целью проверить гипотезы о фокусе внимания, основных тенденциях или же особенностях различных источников коммуникации (респондентов). Иначе говоря, речь идет о поиске ответа на вопрос: «Что?» (Что хочет подчеркнуть коммуникатор в своем сообщении.) Такой поиск целесообразно проводить при сравнении различных средств массовой коммуникации (например, содержания рекламных радиопередач и материалов прессы) или рекламных сообщений определенных средств массовой информации (СМИ) во времени.
Многое может дать также изучение характеристик содержания различного рода официальных документов. Так, на основании данных о том, какого рода информация передается от одного подразделения организации к другому, можно судить о характере функциональных связей, существующих, скажем, между отделом сбыта и планово-экономическим отделом.
Изучение характеристик текста позволяет выяснить, как содержание сообщения будет меняться в зависимости от аудитории (например, ответить на вопрос, кому адресовано рекламное сообщение).
Важным аспектом изучения характеристик текста является исследование стилистических особенностей тех или иных документов. Это связано с ответом на вопрос, как построено сообщение? Такого рода анализ может дать представление об определенных структурных характеристиках объекта исследования, ибо стилистические особенности текста, адресованного конкретному объекту (группе людей), можно рассматривать как один из показателей состояния данного объекта,
При работе с материалами СМИ можно решать задачу сравнения содержательных и стилистических особенностей сообщений на одну и ту же тему (реклама различных марок зубной пасты), одно из которых оказалось эффективным, а другое — нет.
Постановка задачи исследования причин появления сообщения связана прежде всего с попыткой установить соотношение между фактами содержания и процессами, протекающими в объектах, порождающих сообщение. Речь идет об ответах на вопросы, кто и почему передает сообщение.
Между содержанием сообщения, его отдельными характеристиками и намерениями коммуникатора существует определенная связь. Вопрос заключается в том, каков характер этой связи, т.е. признаками каких состояний или процессов, каких целей и намерений коммуникатора являются те или иные характеристики текстов исследуемых документов.
Установление связи между внутренними характеристиками коммуникатора и формами или словами, в которых эта характеристика проявляется, помогает выявить некоторые словесные показатели определенных состояний объекта исследования. Это в свою очередь дает возможность из словесного поведения, например ответов на открытые вопросы анкет и интервью, получать значительно большую информацию. Для различных источников коммуникации слова могут иметь различный смысл, различные значения. Поэтому выводы относительно причин или побуждений, породивших определенное сообщение, опирающиеся только на данные содержания, нельзя считать обоснованными.
Требование объективности анализа делает необходимым перевод исследуемого материала на язык гипотез в единицах, которые позволяют точно описать характеристики текста. В связи с этим исследователю приходится решать ряд проблем, связанных: а) с выработкой категорий анализа; б) с выделением единиц анализа; в) с выделением единиц счета.
Категории анализа — это понятия, в соответствии с которыми будут сортироваться единицы анализа (единицы содержания); например, потребители с разным уровнем дохода, положительные, нейтральные и отрицательные оценки товара определенной марки.
При разработке категорий важно учитывать, что от их выбора будет в значительной степени зависеть характер полученных результатов. Как правило, исследователь стоит перед необходимостью по несколько раз переходить от теоретической схемы к документальным данным, а от них снова к схеме, чтобы, исходя из выбранной гипотезы, выработать категории, соответствующие задачам исследования.
Категории должны быть исчерпывающими, т.е. охватывать все части содержания, определяемые задачами данного исследования, отвечать требованию взаимоисключаемости (одни и те же части не должны принадлежать различным категориям).
Категории должны отвечать требованию надежности, т.е. их следует сформулировать таким образом, чтобы у различных исследователей была достаточно высокая степень согласия по поводу того, какие части содержания следует отнести к той или иной категории. Чем более четко определены категории, тем менее проблематичным становится отнесение частей содержания к определенным категориям.
Наиболее радикальным способом увеличения степени надежности категории является ее исчерпывающее определение (перечисление всех входящих в нее элементов — частей содержания). Тогда работа того, кто обрабатывает текст, сводится к чисто технической стороне, и ему не приходится принимать решения по собственной инициативе.
При оценке надежности категорий следует помнить, что тонкая градация категорий, когда последние становятся мелкими и дробными, ведет к расхождению в оценке принадлежности того или иного элемента содержания к данной категории. Этот недостаток можно преодолеть укрупнением категорий. Однако укрупнение должно ограничиваться совершенно определенными пределами, заданными целями исследования. Чрезвычайное укрупнение может привести к уменьшению степени дифференциации исследуемого явления, т.е. исследователь не заметит тех различий, которые могут оказаться существенными для целей исследования (см. раздел про шкалы измерений).
При проведении формализованного анализа содержания нужно четко указать признаки, по которым определенные единицы относятся к определенным категориям. Единицей анализа — смысловой или качественной — является та часть содержания, которая выделяется как элемент, подводимый под ту или иную категорию.
В тексте она может быть выражена по-разному: одним словом, некоторым устойчивым сочетанием слов, может вообще не иметь явного терминологического выражения, а преподноситься описательно или скрываться в заголовке абзаца, раздела и т. п. В связи с этим перед исследователем возникает задача выделения признаков (индикаторов), по которым определяется наличие в тексте темы или идеи, значимой с точки зрения целей исследования.
Индикаторы по своему характеру могут быть весьма неоднородными: относящиеся к теме слова и словосочетания, термины, имена людей, названия организаций, географические названия, пути решения экономических проблем и т. п.
При изучении экономических проблем смысловые единицы могут включать внутренние и внешние международные события; лиц и авторов, описывающих эти события или являющихся их инициаторами и пропагандистами; отношение к событиям (оценкам) в терминах: «за — против», «выгодно — невыгодно», «хорошо — плохо», в чьих это интересах, насколько целесообразны действия и т. п.; целевую установку деятельности организаций, лиц; преследуемые интересы (политические, экономические, национальные, личные); адресат деятельности (социальные слои, общественные группы и т. п.).
В исследованиях сообщений средств массовых коммуникаций, где контент-анализ распространен наиболее широко, определились некоторые «стандартные» смысловые единицы:
Понятие, выраженное отдельным словом, термином или сочетанием слов. Применение такой смысловой единицы целесообразно при изучении способов, с помощью которых источник информации организует сообщение, передает свои намерения тем, кому оно направлено.
Тема, выраженная в единичных суждениях, смысловых абзацах, целостных текстах. Тема является важной смысловой единицей при анализе направленности интересов, ценностных ориентации, установок тех, кто передает сообщение. Однако определение темы часто затруднено в связи с ее неясностью в тексте. Тому, кто проводит анализ, приходится определять тему и ее границы внутри текста. Выбор темы в качестве единицы анализа подразумевает также внутреннее разделение текста на определенные части (единицы контекста), внутри которых тема может быть определена.
Имена людей, географические названия, марки продуктов, названия организаций, упоминание какого-либо события. Частота и длительность промежутка времени, с которыми они присутствуют в сообщении, могут послужить показателями их важности, значимости для исследуемого объекта.
Выбрав смысловую единицу и ее индикаторы, исследователь должен определить также и единицу счета, которая станет основанием для количественного анализа материала. Она может совпадать или не совпадать с единицей анализа или ее индикатором. Единицы счета обладают различной степенью точности измерения, различно также время, уходящее на кодировку материала, попавшего в выборку. Обычно чем выше требования к точности, тем выше затраты времени на кодировку; с другой стороны, большая точность приводит к получению более дифференцированных результатов, что позволяет получить большую информацию об объекте. Поэтому, приступая к исследованию, необходимо решить, какая степень тонкости дифференциации нужна для решения поставленных задач и как можно получить ее с минимальными затратами. В ходе практической работы методом контент-анализа были выделены некоторые общие единицы счета, отвечающие различным исследовательским требованиям.
Время — пространство. Подсчет в этой системе пригоден в основном при исследовании сообщений, передаваемых СМИ. За единицы счета здесь принимаются числа строк, абзацев, квадратных сантиметров площади, знаков, колонок в печатных текстах, посвященных тому или иному вопросу, мнению, оценке. Для кино, радио и телевидения единицей счета будет время, отведенное освещению определенного события, или же метраж израсходованной кино- или магнитной пленки. Измеряется, например, частота упоминания тем и размер заголовка, размер рекламного сообщения.
Появление признаков в тексте. Такая система счета подразумевает необходимость отмечать наличие определенной характеристики содержания — в любом ее проявлении (признаке); например, упоминание определенной марки продукта — в каждой из единиц контекстов (т.е. частей, на которые разбит анализируемый текст). В этом случае иногда отмечается лишь появление признака, а повторение данной характеристики внутри единицы контекстов не учитывается.
Например, если за единицу контекста принят абзац, то появление любого признака значимой смысловой единицы засчитывается лишь один раз, независимо от количества повторений ее признаков в данном абзаце.
Такая система счета подразумевает допущение о том, что не существует линейной зависимости между частотой появления в тексте и значимостью смысловой единицы; важно лишь наличие или отсутствие ее в определенных частях текста.
Этот способ счета прост в применении; приходится принимать самое простое решение (наличие — отсутствие), что в свою очередь обеспечивает его достаточно высокую надежность. Такого рода измерение является номинальным, и данные, закодированные подобным образом, могут быть представлены в числовом выражении (например, процентное отношение элементов текста, в которых данная смысловая единица появилась). Эти данные могут быть также подвергнуты некоторым статистическим операциям.
Частота появления. Самым распространенным способом измерения характеристик содержания является подсчет частот их употребления, когда фиксируется каждое появление любого признака данной характеристики. В зависимости от того, какие единицы счета выбираются, частота может использоваться для решения различных задач.
Частота появления темы в том или ином документе может служить показателем ее значимости с точки зрения автора документа. Подсчет оценочных характеристик текста (например, всех «за» и «против» в отношении какого-либо вопроса или события) позволяет подойти к исследованию установок автора сообщения и к выявлению намерений, которыми было продиктовано сообщение.
Учет своеобразия цели исследования является непременным условием определения специфических единиц анализа и единиц счета при разработке конкретных методик контент-анализа.
Например, изучая размещение рекламных сообщений на страницах газет, можно выделить в качестве таких единиц распределение газетной площади по темам рекламных сообщений, а затем измерить количество строк, отведенных под эти темы. Анализируя степень стабильности отводимого количества строк в разных газетах и в разное время, можно сделать выводы о характере рекламных воздействий различных газет на аудиторию. Для этого можно произвести определение процентов по отдельным рекламным темам.
Решение каждой исследовательской задачи требует определения того, какое количество документов нужно изучить, чтобы данные об объекте были достоверными, т.е. возникает вопрос о построении выборки.
При анализе документов, специально составленных для целей маркетингового исследования, анализируются все без исключения документы. Если же речь идет о документах — носителях вторичных данных, то при построении выборки может возникнуть необходимость отбора источника информации и отбора документов.
При планировании анализа содержания документов исследователь прежде всего решает, какие источники наилучшим образом могут представить те характеристики объекта, которые изучаются.
Если считается, что все документальные источники информации одинаково важны для целей исследования, то может быть построена случайная выборка с помощью одного из стандартных методов (см. соответствующий раздел книги).
Часто уже сам отбор источников информации ограничивает количество документов, подлежащих обработке, до приемлемых размеров. Однако и после этого материал может быть достаточно обширным. Тогда следует провести отбор документов.
При разработке программы маркетинговых исследований нужно четко определить, какого рода характеристики объекта подвергаются изучению, и в зависимости от этого оценивать документы с точки зрения их адекватности, надежности, достоверности.
Адекватность документа определяется как степень, в которой он отражает интересующие исследователя характеристики объекта, т.е. насколько он соответствует предмету исследования.
Чтобы прийти к определенным выводам относительно надежности содержания, необходимо сопоставить все данные содержания с какими-то другими данными. Здесь возможно несколько вариантов проверки.
Одна из них — сравнение содержания документов, исходящих из одного источника. Такое сравнение может проводиться: а) во времени, когда сравниваются характеристики сообщений одного и того же источника в различные моменты времени; б) в различных ситуациях, например в условиях разной покупательной способности населения; в) в различных аудиториях.
Другой вариант — метод независимых источников. В этом случае выбираются значимые для целей исследования характеристики из нескольких различных источников информации. Затем различия в характеристиках сравниваются с различиями в содержании сообщений.
Оценку достоверности зафиксированных в документе данных лучше всего производить путем последовательного перебора источников встречающихся в документе ошибок. Источники ошибок можно разделить на две категории: случайные (например, опечатки в статистических отчетах) и систематические (см. соответствующий раздел книги).
Систематические ошибки делятся на сознательные и несознательные. Сознательные ошибки часто определяются теми намерениями, которыми руководствуется автор при составлении документа (например, тенденциозное описание политической или экономической ситуации разными СМИ).
Наиболее серьезную опасность представляют собой несознательные методические ошибки. Для выявления их должна быть тщательно проанализирована методика, по которой составлялся данный документ. Чаще всего такие ошибки можно встретить в статистических документах.
Только после того как последовательно перебраны и проанализированы все пункты, по которым есть основание усомниться в документе, он может быть использован в работе.