совокупность методических приемов и процедур, применяемых для извлечения из документальных источников социологической информации при изучении социальных процессов и явлений для решения определенных исследовательских задач.
Во всех современных обществах одним из важнейших средств оформления, фиксации, сохранения, передачи информации, обмена ею являются документы. Для отдельного человека - это свидетельство о рождении, паспорт, удостоверение личности, аттестат зрелости, диплом о высшем образовании и т.п. Для семьи - это свидетельство о бракосочетании. Для университета или исследовательского института - это его устав. Для политической партии - ее программа и устав, для государства - это Конституция страны и ее законы.
В своем отношении к документам социология исходит из того, что они представляют собой важный источник социальной информации, и вместе с тем результат осмысления и определенного оформления знаний об определенной сфере, социальной структуре или ячейке общества, об их отношениях к другим структурам, сферам и ячейкам. А.Д. позволяет социологу выявить определенные особенности, свойства и взаимосвязи тех или иных социальных явлений и процессов, специфику включения в них различных индивидов, групп и общностей, распознать нормы, ценности, идеалы, которыми руководствуются на различных этапах развития общества и в различных социальных ситуациях, проследить динамику развития тех или иных социальных слоев и групп, их взаимоотношений друг с другом, а также с государством, культурой, религией, политическими партиями и т.п., выявить основные тенденции и пропорции социального развития.
Круг документов, содержащих в себе интересующую социолога информацию, настолько широк и настолько информативен вследствие чрезвычайной широты и разнообразия отображаемых в них различных сторон социальной действительности, что практически любое конкретное социологическое исследование должно начинаться с анализа существующих по исследуемой проблеме документов. В частности, не рекомендуется начинать на пилотажное, ни тем более полевое исследование, не изучив предварительно официальные статистические данные - отчеты и публикации Госкомстата, данные ведомственной статистики, отчеты, решения коллегий, приказы и распоряжения соответствующих государственных органов - законодательства, принимаемого парламентом, указов президента, решений и распоряжений министерств, публикаций в средствах массовой информации.
Но для того, чтобы огромный и разнообразный массив документации можно было успешно и эффективно использовать в целях извлечения из нее необходимой социологам информации, документы следует классифицировать. Такая классификация осуществляется по целому ряду оснований.
По общей значимости документы обычно делятся на: 1) официальные (законы, указы, декларации, распоряжения и т.п.); 2) неофициальные (личные заявления, письма, жалобы, дневники, семейные альбомы и др.).
По форме изложения документы подразделяются на: 1) статистические (статистические отчеты, сборники статистических материалов, содержащие экономические и социальные показатели развития страны, динамику рождаемости, смертности, материального благосостояния населения, его образовательного уровня и т.п.); 2) вербальные, т.е. такие, в которых информация воплощена в словесно выраженной форме (письма, пресса, книги и т.п.).
По способу фиксации информации выделяются следующие разновидности документов: 1) письменные документы, в которых информация изложена в форме буквенного изображения (рукописи, книги, сообщения прессы, различного рода документальные свидетельства - о рождении, о служебной должности, о праве на владение имуществом и т.п.); 2) иконографические документы, воспринимаемые визуально (иконы, картины, кино- и фотодокументы, видеозаписи); 3) фонетические, т.е. ориентированные на слуховое восприятие (грампластинки, магнитофонные записи, лазерные диски и др.).
По критерию авторства документы делятся на: 1) индивидуальные, созданные одним автором (письмо, заявление, жалоба); 2) коллективные, созданные несколькими авторами или группой людей (обращение к депутатам, правительству или населению страны, декларация о намерениях группы, партии, движения и т.п.).
Документы могут стать источником получения необходимых сведений об изучаемом объекте только тогда, когда социологами оценена надежность имеющейся в их распоряжении документальной информации. При оценке надежности документальных данных необходимо учитывать ряд обстоятельств. Во-первых, официальные документы как правило, более надежные, чем неофициальные. Во-вторых, личные документы (характеристики, карточки индивидуального учета, анкеты и др.) обладают большей степенью надежности, чем безличные (данные прессы, протоколы собраний, заседаний и др.). В-третьих, повышенной надежностью обладают документы юридического характера (постановление суда, нотариально заверенные данные и др.), а также те документы, которые подвергаются финансовому контролю (сведения об изготовленной продукции, о заработной плате и т.п.). В-четвертых, необходимо учитывать, что некоторые личные документы - автобиографии, воспоминания и др. - имеют тенденциозный характер и в силу этого позволяют оценить некоторые личностные качества их авторов - одаренность, скромность либо самовлюбленность, заносчивость и т.п.
Важнейшим источником социологической информации являются документы, специально созданные для целей исследования: анкеты, опросные листы, бланки интервью, тесты, протоколы наблюдений, данные контент-анализа, выраженные в форме отчета.
Многообразие документов, их содержания, направленности, видов, форм и т.п. порождает и разнообразие их использования в социологии, причем формулирование такого использования в значительной степени определяется не только целями и задачами исследования, но и особенностями изучаемого объекта.
Если объектом исследования становится крупная социально-экономическая проблема, например активизация экономического поведения населения страны, то важными источниками социологической информации становятся официальные документы, содержащие требуемые сведения - принятые парламентом законы о предпринимательстве, труде, заработной плате, социальном страховании, указы президента, данные государственной и ведомственной статистики, публикации в прессе. Если же исследуются ценностные ориентации молодежи, то наряду с названными видами документов значительно большее значение приобретают ответы респондентов (опрашиваемых молодых людей) на вопросы социологических анкет, а также экспертов, полученные в процессе проведения стандартизированного интервью, данные полученные и помощью и тестирования и личных документов - писем, документов и т.п.
Таким образом, при исследовании различных социальных процессов и явлений и при решении различных исследовательских задач требуется подбирать именно такие документы, которые глубже, полнее и точнее выражают сущность и особенности исследуемого объекта и в наибольшей степени соответствует решаемой социологами исследовательской задаче.
Многообразие видов документов по-разному используется в социологических исследованиях, однако существуют два основных метода А.Д. Один из них традиционный, классический, а второй - формализованный, или, как его чаще всего называют, контент-анализ (от англ. content-analysis - анализ содержания).
Традиционный А.Д. представляет собой совокупность определенных логических построений, направленных на раскрытие основного содержания изучаемого материала. Дело в том, что в большинстве случаев интересующая социолога информация, содержащаяся в документе, присутствует в нем в неявном, скрытом виде, в форме, отвечающей целям, во имя которых документ был создан (статистический отчет, закон, информационное сообщение и т.п.), а это далеко не всегда совпадает с интересами и задачами социологического анализа. Традиционный А.Д. позволяет преобразовать первоначальную форму информации, содержащейся в документе, в ту форму, которая интересует исследователя. При этом необходимо установить, кто является автором документа, с какими целями и в каком социальном контексте создавался данный документ? Каково соотношение фактов, отраженных в документе, с изучаемой социологами действительностью? Как отражаются на содержании документа взгляды, оценки, социальные и политические предпочтения автора, его статус и позиция? В поисках ответа на эти вопросы социолог, осуществляющий традиционный анализ документа, получает возможность проникнуть в глубинный смысл изучаемого документа, исчерпать его содержание и повернуть его в сторону, необходимую именно для данного конкретного исследования.
Традиционный А.Д. представляет собой самостоятельный, творческий процесс, который зависит от: 1) содержания, направленности самого документа; 2) условий, целей и задач проводимого исследования; 3) научной квалификации, богатства опыта и творческой интуиции исследователя (более квалифицированный и творчески мыслящий социолог сумеет извлечь из одного и того же документа гораздо более обширное и нужное для исследования содержание, чем менее квалифицированный и опытный, не обладающий творческим воображением.
Изложение особенности традиционного А.Д. показывает, что при всей его важности и значимости такой вид аналитической деятельности неотделим от личности исследователя, а потому и несет в себе возможность субъективной оценки и интерпретации изучаемого документа. Стремление избавиться от налета субъективности, вполне возможного при осуществлении традиционного анализа, привело к разработке существенно иного вида формализованного анализа документов, т.е. контент-анализа.
Применять контент-анализ начал еще в 1930-х известный социолог Г. Лассуэл в сфере политики и пропаганды, но широкое распространение он получил начиная с 1950-х, когда в США вышел фундаментальный труд Б. Берельсона "Контент-анализ в коммуникационных исследованиях". Этот вид А.Д. был ориентирован на извлечение социологической информации из больших массивов документальных источников, трудно поддающихся или вовсе не поддающихся традиционному интуитивному анализу. Он основан на выявлении определенной совокупности количественных, статистических характеристик текстов (или сообщений). При этом предполагается, что количественные характеристики содержания изучаемых массивов документов отражают некоторые существенные особенности изучаемых социальных явлений и процессов, например, тематика телепередач, время, отводимое для тех или иных тем телевизионными компаниями, отражают в той или иной степени интересы зрительской аудитории, информационную политику данного источника информации и существующие в обществе нормы их взаимодействия.
Процедура формализованного А.Д. заключается в выделении в изучаемом тексте определенных, интересующих исследователя элементов содержания, классификации выделенных элементов в соответствии с концептуальной схемой исследования, последующем их подсчете и количественном анализе. Контент-анализ основан на стандартизации процедур поиска, определении в содержании изучаемого документа единиц счета, в качестве каковых выступают отдельные слова (термины, имена политических деятелей, названия партий и движений, географические названия и т.п.), суждения, выраженные в форме предложений, абзацев, фрагментов текстов, оценки, точки зрения, аргументы, а также различные виды публикаций (по тематике, жанру, типам авторов и др.). Определение единиц счета зависит от целей исследования.
В социологических исследованиях используются два вида контент-анализа, различающиеся в зависимости от характера представления содержания текста: качественный и количественный. Качественный контент-анализ основа на использовании нечастотной модели содержания текста и позволяет выявить типы качественных характеристик содержания текста вне зависимости от частоты (т.е. количества) встречаемости каждого из этих типов. Количественный контент-анализ основан на использовании количественных мер, его задача - получить количественную характеристику содержания изучаемого текста.
Категориальная модель предмета анализа включает в себя параметры и категории анализа, отражающие признаки изучаемого объекта, их основные характеристики и аспекты, соответствующие целям и задачам социологического исследования. При этом параметры анализа соответствуют признаку объекта исследования, а категория анализа - значению данного признака. Например, в процедуре контент-анализа, проводимого социологом в рамках исследовательского проекта "Активизация экономического поведения различных групп населения Беларуси" одним из существующих параметров является тема "предпринимательство". А категориями контент-анализа данной темы в различных видах документов - в законах о развитии предпринимательства, статистических материалах, публикациях в прессе и т.п. - будут такие понятия, как "предприниматель", "средний бизнес", "малый бизнес", "рынок капиталов", "рынок товаров" и т.п.
Таким образом, параметр контент-анализа жестко задан проблемой и задачами исследования, а категории анализа более гибко приспособлены к тому процессу или явлению, которое предстоит анализировать, и тем задачам, которые придется решать в процессе исследования. Следовательно, каждый параметр контент-анализа может быть представлен в виде определенного набора, а еще лучше (особенно если необходимо учитывать характер взаимосвязей между различными аспектами изучаемого признака) в виде целостной системы категорий анализа. Взаимосвязь параметров и категорий контент-анализа, сведенных в определенным образом упорядоченную систему, предстает в качестве категориальной модели предмета анализа, т.е. исследуемого объекта социальной действительности.
Система единиц контент-анализа представляет собой определенным образом иерархизированную совокупность единиц анализа. В практике социологических исследований сложился определенный набор устойчивых, стандартных единиц контент-анализа. К числу наиболее часто употребляемых из них относятся:
1) Понятие, выраженное отдельным словом, термином или сочетанием слов. В приводимом нами примере прикладного социологического проекта, посвященного исследованию активизации экономического поведения различных групп населения, такими смысловыми единицами являются "предприниматель", "наемный работник", "безработный", "рынок капиталов", "рынок товаров", "рынок труда", "мотивация экономического поведения", "стимулирующая роль заработной платы" и др.
2) Тема, выраженная в единичных суждениях, смысловых абзацах или целостных текстах. Выбор темы в качестве единицы контент-анализа подразумевает внутреннее разделение изучаемого текста на определенные части, являющиеся органическими единицами контекста, внутри которых тема может быть более или менее честно определена. Темой контент-анализа изучаемого текста может быть как общая тема социологического исследования, так и определенная ее часть, например проблема создания благоприятного правового пространства для развития малого и среднего бизнеса, являющаяся частью общей темы активизации экономического поведения.
3) Персонаж ("герой") некоего действия или отношений, отраженных в изучаемом тексте. В качестве такого персонажа, в зависимости от выделенной темы контент-анализа, может выступать предприниматель, менеджер, банковский служащий, президент страны или союза предпринимателей и т.п.
4) Ситуация, например экологическая ситуация, рассматриваемая в контексте отношений человека с окружающей средой, экстремальная ситуация, сложившаяся в районах Беларуси, пострадавших от Чернобыльской катастрофы и др.
5) Действие, осуществляемое отдельными индивидами или их группами, в пределах избранной для контент-анализа темы, например, действия предпринимателей, безработных или налоговой полиции.
Категории и единицы контент-анализа - это конструктивные объекты, содержание которых определяется в рамках конкретной области, избранной в качестве объекта прикладного социологического исследования.
Меры (единицы) измерения, применяемые в процедуре контент-анализа изучаемого текста, бывают обычно двух типов. Первый из них составляют единицы протяженности, располагаемые в координатной сети пространство - время. Примером таких единиц счета, применяемых в контент-анализе, могут служить съем текста в квартирных сантиметрах, либо в числе отведенных на него строк в печатном документе, а также количество минут, которые занимает эфирное время телевизионного сообщения. Единицей измерения может служить и появление искомого признака в тексте, а также частота такого появления. Именно последнее - частота появления искомого признака в тексте является самым распространенным в прикладных исследованиях способом измерения характеристик изучаемого содержания с точки зрения интересующего социолога объекта исследования.
Процедура социологического исследования, основанная на методике и технике контент-анализа, включает в себя ряд операций, осуществляемых в соответствии с тремя стандартными документами. Первый такой документ - таблица контент-анализа. Она содержит в себе набор параметров и категорий, применяемых в процессе осуществления контент-анализа определенного содержания различных типов. Второй документ - инструкция кодировщика. Она включает в себя описание единиц анализа и мер измерения (подсчета) выделяемых характеристик. Регистрация единиц анализа производится в специальных таблицах, составляющих кодированные карточки или матрицы. Кодированная карточка - это и есть третий стандартный документ для проведения контент-анализа. Она содержит все классификационные единицы анализа - параметры и категории, обозначаемые обычно определенным кодом. В этой кодировочной матрице каждый вертикальный столбец означает отдельный документ (присвоенный ему номер), а каждая горизонтальная строчка - классификационные единицы и меры измерения, выраженные в определенных кодах.
Наряду с названными документами в процедуре подсчета единиц контент-анализа применяются специальные формулы, в частности формула конфликта Яниса. Она предназначена для исчисления соотношения между благоприятными и неблагоприятными оценками, позициями, суждениями по интересующему исследователя вопросу. Например, при исследовании отношения населения Беларуси к возможности развития атомной энергетики выявились существенные расхождения как в позициях между экспертами и большинством населения по этой проблеме, так в оценках и в единицах возможных последствий принятия решения о сооружении ядерных энергетических установок. Когда в подобных случаях общее количество благоприятных оценок (единиц анализа) больше числа неблагоприятных, отрицательных, тогда коэффициент подсчитывается по формуле:
где f - число положительных единиц анализа, n - число отрицательных единиц, z - объем содержания текста, имеющего прямое отношение к исчисляемой проблеме, t - общий объем текста.
В том случае, когда количество положительных оценок меньше, чем отрицательных, коэффициент исчисляется по формуле:
В рассматриваемой формуле индекс С+ увеличивается в положительном направлении, когда растет число единиц положительного содержания, и уменьшается, если число сокращается. Аналогичным образом ведет себя и индекс С-, только его увеличение или уменьшение предопределено обратным по знаку изменением числа единиц анализа.
Контент-анализ в социологическом исследовании обычно употребляется в тех случаях, когда исследователь сталкивается с большими текстовыми массивами, которые нуждаются в целенаправленном изучении. Чаще всего он используется при изучении сообщений, транслируемых на массовую аудиторию газетами, радио, телевидением.
Анализ больших текстовых массивов ставит перед исследователем проблему обеспечения репрезентативности результатов при отборе текстов, поэтому и при проведении этой процедуры осуществляется метод выборки, во многом аналогичный тому, который обстоятельно изложен в предыдущей главе. Отметим только, что в каждом конкретном социологическом исследовании, в котором применяется контент-анализ, вопрос о построении выборки (т.е. отбора источников информации и отбора необходимых для исследования документов) решается по-своему, в зависимости от особенностей объекта и целей исследования.
Важную роль при использовании контент-анализа играет установление адекватности документов. Она определяется как степень, в которой в изучаемом документе отражаются интересующие исследователя характеристики объекта, т.е. степень, в какой документ соответствует предмету исследования. Контент-анализ в процессе социологического исследования целесообразно дополнять другими методами исследования или же использовать его в качестве дополнительного метода, если основным методом исследования выступает какой-либо иной из социологических методов. Например, при проведении массовых опросов в некоторых случаях очень важно использовать контент-анализ открытых вопросов анкет и бланков интервью.
Как и всякое иное методическое средство контент-аналитические приемы и процедуры социологического исследования могут дать ожидаемый эффект только если они, во-первых, соответствуют целям и задачам изучения определенного социального процесса или явления и употребляются в свойственных им пределах, и, во-вторых, когда они проводятся квалифицированно, с соблюдением всех правил соответствующей процедуры, дополняясь в случае необходимости применением других методов конкретного социологического исследования.
Отличное определение
Неполное определение ↓
При анализе документов источником социологической информации выступают сообщения, которые содержатся в протоколах, докладах, резолюциях и решениях, выступлениях политиков, публикациях газет, журналов, в художественных произведениях, иллюстрациях, фильмах, дневниках, летописях и т.п. Например, в известной работе У. Томаса и Ф. Знанецкого «Польский крестьянин в Европе и Америке» (1918) объектом анализа стали записки самоубийц и письма, которые на протяжении десятилетий мать писала сыну.
Анализ документов позволяет получать сведения о прошедших событиях, непосредственное наблюдение которых уже невозможно. Изучая документы, в которых те или иные явления жизни, события прослеживаются в течение многих лет, можно выявить тенденции и направленность их изменения. Так, для отечественных исследователей особую важность приобретает обширная социальная статистическая информация, которая долгое время была закрытой и, следовательно, использовалась в крайне ограниченном объеме. Однако эта информация обеспечит возможность реалистического анализа прошлого нашего общества, более полного понимания происходивших в то время процессов и явлений, что позволит избежать подобных ошибок в будущем.
Вторичным анализом данных называют анализ документов, содержащих данные ранее проведенных исследований с важной для социолога эмпирической информацией (статистические отчеты, данные переписи, информационные банки организаций, социологические опросы). Положительной стороной этого метода является то, что социолог получает готовую систематизированную информацию и избавлен от необходимости самостоятельного исследования, отрицательной — то, что он не имеет возможности самостоятельно формулировать интересующие его вопросы.
Контент-анализ (анализ содержания) является наиболее значительным методом сбора и обработки документальной информации и представляет собой формализованный способ исследования, подразумевающий анализ статистических закономерностей частотного распределения смысловых единиц в тексте. В контент-анализ направлен на объективное изучение текстов с целью исследования социальных процессов (объектов, явлений), которые эти тексты представляют.
Для понимания специфики контент-анализа важны следующие положения:
- можно исследовать то, что зафиксировано. То, что не зафиксировано, не существует;
- имеются только два способа фиксации информации — человеческая память и различные материальные носители (камень, папирус, бумага, компакт-диск и т.д.);
- для исследования применяют аналитический или статистический метод. Социология исследует информацию, как правило, статистическими методами;
- статистический метод имеет два варианта — интуитивный и формализованный, использующий специальные методики и математический аппарат;
- формализованный метод реализуется в двух формах — линейное частотное распределение, показывающее, сколько раз интересующий исследователя признак появился в тексте, и двумерное, подразумевающее поиск взаимосвязи между двумя какими-либо объектами.
Контент-анализ основан на формализованном количественном методе, в основном на методе парных распределений признаков в социальном пространстве.
Проведение контент-анализа должно отвечать следующим требованиям:
- объективность анализа, чтобы различные исследователи, работающие по одной методике с тем же текстом, получали одинаковые результаты;
- систематичность анализа объекта исследования — выбор сообщений для анализа должен быть основан на строгих формальных признаках, а не наличных пристрастиях исследователя;
- репрезентативность материалов для анализа, чтобы выводы, сделанные на основании выбранных материалов источника, можно было распространить на все материалы источника;
- правильность или неправильность количественного анализа (частотность употребления тех или иных элементов текста, корреляционные коэффициенты и т.д.) должна поддаваться проверке на языке математики.
Как правило, контент-анализ начинается с выбора: о смысловой единицы — социально-значимой идеи, отображенной в тексте посредством слова, сочетания слов, описания; о единицы счета, отвечающей целям исследования и требованиям достоверности. Так, при анализе прессы за единицу счета можно принять число печатных знаков, абзацев и даже число квадратных сантиметров площади, занятой текстом по изучаемой теме.
При использовании контент-анализа составляется бланк кодировки , содержащий систему операционных понятий, единицы анализа и все элементы описания проблемной ситуации. Обычно в бланк вносятся сведения о документе (например, газетной статье) — автор, дата, объем и т.д., число употребления в нем единиц анализа.
Таблица 1.1. Пример бланка кодировки контент-анализа
Заполнив подобный бланк, информацию можно перевести в числовые данные, удобные для последующей статистической (компьютерной) обработки, что обеспечивает выявление линейного частотного распределения каждого признака и взаимосвязи между различными признаками.
Хрестоматийным примером контент-анализа, основанного на частотном распределении, является исследование Г. Лacсуэлла и Н. Лейтеса, проведенное на материалах газеты «Истинный американец» в 1940-х гг. (табл. 1.2). Результаты анализа позволили выявить намерения авторов статей, послужили доказательством профашистской ориентации редакции и тем самым способствовали закрытию газеты.
Таблица 1.2. Число суждений в газете «Истинный американец»
|
Суждения |
Подтверждение |
Опровержение |
|
Госаппарат США пропитан коррупцией |
||
|
Внешняя политика США антихристианская |
||
|
Президент Рузвельт — нежелательное лицо |
||
|
Германия справедлива и мужественна |
||
|
Политика Японии морально оправдана |
||
|
Япония могущественна |
||
|
Германия могущественна |
||
|
США слабы |
||
|
США находятся под контролем коммунистов |
||
|
США находятся под контролем евреев |
||
|
В администрации США много шпионов |
Анализируя документы, исследователь может концентрироваться на содержании конкретных сообщений, интерпретируя определенным образом слова, словосочетания, образы. На основе этого можно выявить, например, общие тенденции, которые проявляют СМИ в своем отношении к тому или иному социальному явлению. Такой анализ предполагает наличие у исследователя высокого профессионализма, разносторонней культуры, умения неординарно мыслить, а также глубоких знаний из области истории, этнографии, этики, художественной литературы. Недостатком этого в и да а нал и за является высокая степень субъективности результатов исследования.
В качестве примера подобного анализа документов приведем результаты исследования межэтнических отношений в столице, выполненного на основе ряда московских газет за 2006 г. Автор исследования интересовался тем, какой образ москвичей конструируют газеты в массовом сознании горожан. При этом он определял смысл, вкладываемый в местоимение «мы» авторами различных статей. Формально «мы» обозначает «москвичи», но фактически всякий раз в это местоимение вкладывается свое содержание.
Анализ прессы показывает, что московские газеты безусловно конструируют в массовом сознании образ: «Мы — полиэтничное сообщество». При этом в прессе представлены две авторские позиции: первая — «Москва полиэтничный город, таким он и должен быть. Мигранты нам необходимы, поэтому мы должны их принимать и уживаться с ними». И вторая — «Москва — это город русской культуры, хотя в нем действительно жили и живут люди разных национальностей и религий. Он и должен оставаться таким, где доминирует русская культура, где сохраняется принятый веками, хоть и модернизирующийся образ жизни, где должна разумно проводиться демографическая политика и где можно обойтись без такого огромного и неуправляемого наплыва мигрантов, да еще и нелегальных». Робкое и неявное признание в СМИ факта, что «Мы — москвичи — это прежде всего русские» и редкое подчеркивание его в московской прессе — один изуспокаивающих факторов для населения.
На основании анализа прессы автор делает ряд рекомендаций относительно того, как снизить напряженность в межэтнических отношениях — отказаться от пропагандистских акцентов на разделении граждан по этническому и религиозному признакам; усилить интеграционные моменты в публикациях о московском сообществе; исповедовать общность культурных, гражданских и общественных ценностей; чаще показывать позитивные образы представителей разных этнических групп и т.д.
Анализ документов может использоваться как самостоятельно, так и в сочетании с другими методами. Часто он применяется на подготовительном этапе исследования, а на основе его результатов составляются сценарии фокус-групп, анкеты для экспертных опросов и т.д.
Таким образом, анализ документов позволяет прийти к важным содержательным выводам по поводу социальных явлений и процессов, отраженных в документах, а также об изменении отношения в обществе к этим явлениям и процессам. Такой анализ может успешно применяться и для изучения отношения населения к событиям, которые далеко отстоят от времени проведения исследования.
Использование технических средств
По степени формализованности наблюдения
Структурированное наблюдение – вид наблюдения, при котором исследователь заранее определяет, какие из элементов исследуемого процесса или ситуации имеют наибольшее значение для целей исследования, и сосредоточивает на них свое основное внимание, составляя специальный план записи наблюдений. Задачей структурированного наблюдения является систематическое описание ситуации или проверка рабочей гипотезы.
Неструктурированное наблюдение – вид наблюдения, при котором исследователь не определяет заранее, какие именно элементы изучаемого процесса (ситуации) он будет наблюдать. Задачей этого вида наблюдения является изучение объекта в целом или основных его составляющих.
Наблюдение с использованием технических средств – применяются диктофон, фотокамера, видеокамера. Особенностями данного вида являются возможности большего охвата поля наблюдения (видеонаблюдение), объективная фиксация данных, повышенные требования к этике представления данных заказчику.
Наблюдение без использования технических средств – наблюдение, в ходе которого технические средства не используются. Особенностью данного вида является повышенное требование к памяти, вниманию и способам фиксации полученной информации.
В процессе наблюдения обычно используются следующие способы регистрации информации:
1. Карточка наблюдения – формализованная форма фиксации информации, в которой указываются предельно четкие показатели.
2. Протокол наблюдения – полуформализованная форма фиксации информации.
3. Дневник наблюдения – систематическая, свободная фиксация анализируемых признаков. Заносится вся необходимая для понимания информация.
Метод анализа документов. Документом в социологии называют любую информацию, фиксированную в печатном или рукописном тексте, на магнитной ленте, на фото- или кинопленке.
Проблема установления достоверности:
1. Выяснение подлинности документа – определение, фальшивый документ или подделка (нет проблем с подлинностью периодических изданий, книг).
2. Проверка зафиксированной в документе информации. Не следует смешивать надежность, подлинность самого документа с достоверностью сообщаемых в нем сведений.
Проверка зафиксированной в документе информации включает в себя:
1. Выяснение верности описания в документе факта или события. Необходимо придерживаться правил:
Информация о фактах надежнее, чем оценочные суждения автора;
Первичные документы более достоверны, чем вторичные.
2. При анализе первичных документов необходимо проверить, действительно ли автор был свидетелем события. Когда была сделана запись о событии: сразу или по прошествии какого-то времени (чем раньше, тем подробнее, но более оценочна).
3. Необходимо учитывать цель создания документа. Полнота информации об описываемом событии должна анализироваться под углом зрения событий, вынудивших автора создать документ.
4. Учитывать ошибки документов, которые могут быть случайными (опечатка) или систематическими (сознательное – намеренное желание исказить информацию; несознательные – из-за субъективного восприятия мира, по незнанию, из-за каких-либо методических ошибок).
Правила работы с документами:
1. Определить, какие документы необходимы для исследования. Продумать критерии отбора необходимых документов (время создания, сфера деятельности автора, личные или официальные и т.д.)
2. Определить надежность и достоверность документов.
3. Выбрать адекватный метод анализа документов.
Традиционный (классический) анализ документов – это умственные операции по интерпретации, понимании сути информации, содержащейся в документе.
Традиционный (классический) анализ документов отличается от простого ознакомления с ними или прочтения для приобретения нового знания. Как метод исследования анализ документов предполагает выдвижение определенных гипотез, тщательное изучение существа анализируемого материала, логики текста, обоснованности и достоверности приводимых сведений. Огромную роль играют здесь опыт исследователя, глубина его знаний по предмету и интуиция.
Основная трудность при работе с доступными (т.е. нецелевыми) документами – умение читать данные на языке гипотез исследования. Ведь документ был составлен вовсе не того, чтобы вы проверяли поставленные гипотезы.
Различают внешний и внутренний анализ документов.
Внешний анализ в традиционном анализе документов предполагает:
Анализ исторического и социального контекстов, которые сопутствовали появлению документа;
Установление цели создания документа, намерения автора;
Установление надежности и достоверности документа.
Внутренний анализ в традиционном анализе документов предполагает:
Исследование содержания самого документа;
Выяснение компетенции и профессионализма автора;
Разработку вопросов, ответы на которые предусматривают исследовательские задачи.
Основной недостаток традиционного анализа документов заключается в субъективизме исследователя, поскольку так или иначе все предложенные идеи, факты, события и комментарии в изучаемом документе преломляются через его субъективный мир.
Попытка избежать проблему субъективного анализа документов была предпринята в методе контент-анализа.
Сам термин «Анализ содержания» (content analysis), как и первые попытки провести статистически точные измерения содержания материалов массовой информации, ведет свое начало от исследований в области американской журналистики на рубеже XIX и XX вв.
Контент-анализ – строго формализованный метод анализа текстовой информации, использующийся для анализа содержания текстов СМИ, пропаганды.
Одна из первых работ в этой области – исследование Дж. Спида «Дают ли сейчас газеты новости?», опубликованное в 1893 г.
Дж. Спид проанализировал воскресные выпуски нью-йоркских газет за 1881 и 1893 гг. Сравнивая содержание материалов, он решил выяснить, какие изменения произошли в американской прессе за прошедший период. Именно в это время одна из крупнейших сейчас газет «Нью-Йорк Таймс» увеличила свой тираж, снизив цену номера с трех до двух центов и одновременно значительно увеличив свой объем.
Дж. Спид классифицировал содержание материалов по темам: литература, религия, сплетни и т.д., измерил длину газетных колонок (в дюймах), отводимую для освещения этих тем, и пришел к следующему выводу: после проведенной «реформы» газета стала публиковать больше материалов (как построчно, так и в пропорции по количеству материалов), содержащих пересказ различных скандальных историй, сплетен и слухов.
Процедура проведения контент-анализа:
1. Определение предмета анализа документа (признаков, свойств, которые могут характеризовать изучаемую проблему).
2. Выделение в текстовой информации категорий анализа или смысловых единиц.
Единица анализа – часть текста, которая может быть поставлена в соответствие с категорией анализа и содержащая признаки с ней соотносящиеся: слово, высказывание, фамилия и т.д.
3. Подсчет употребления категорий анализа.
Единица счета – количественная характеристика единицы анализа, т.е. сколько раз, на какой площади и т.д.: число строк, абзацев, квадратных дециметров, время в эфире и т.д.
В социологии опрос представляет собой метод сбора информации об изучаемом объекте в ходе общения социолога и опрашиваемого путем регистрации ответов. По подсчетам исследователей, с его помощью собирается примерно 70 % информации.
Область применения опроса:
Как ведущий метод в изучении сферы сознания;
Изучение социальных явлений и процессов, малодоступных для непосредственного наблюдения;
При отсутствии (или недостаточности) документов;
В качестве основного или дополнительного метода сбора социологической информации;
На всех этапах социологического исследования.
Специфика опроса:
1. Получение информации через общение (личное или опосредованное).
2. Искомая информация представляется в виде ответов на вопросы со слов самого респондента.
3. Предмет опроса – субъективно-оценочная информация.
4. Возможность использовать в тех случаях, когда другими методами информацию собрать невозможно. Например, при исследовании мотивов, ценностей.
5. Высокая степень субъективизма требует сопоставления с данными, полученными другими методами сбора информации.
Анализ документов - один из широко применяемых и эффективных методов сбора первичной информации. Отражая духовную и материальную жизнь общества, документы передают не только событийную, фактологическую сторону социальной действительности, но и фиксируют развитие всех выразительных средств, и прежде всего структуру языка.
В них содержатся сведения о процессах и результатах деятельности отдельных индивидов, коллективов, групп населения и общества в целом. Поэтому документальная информация представляет большой интерес для социологов, которые в ходе исследования изучают огромное количество разного рода документов: государственные и правительственные акты, статистические сборники и материалы переписей, ведомственные документы, художественные произведения и научные публикации, прессу, речи политических лидеров, письма представителей всех слоев населения.С документами социолог сталкивается в самом начале абсолютного большинства исследований независимо от того, какими методами предстоит собирать первичную информацию. На этой стадии документы, как правило, представляют собой не объект самостоятельного социологического исследования, а лишь вспомогательный источник информации. Такую функцию могут выполнять четыре группы документов: статистические и вербальные документы об объекте исследования, массивы первичной статистической информации, протоколы и стенограммы, документы личного характера.
В плане вспомогательном источники информации об объекте исследования - это прежде всего документы, содержащие либо статистические сведения о нем, либо его вербальную характеристику; данные предшествующих социологических исследований на аналогичную тему; аналитические отчеты и другие материалы, способные дать информацию для более глубокого уяснения исследуемой проблемы, повышения качества методического инструментария, точности модели выборки; служить основой формирования выборочной совокупности. Источниками подобной документации могут быть органы государственной и ведомственной статистики, различные справочные издания, документы, хранящиеся в архивах, библиотеках и др. Сведения, содержащиеся в этих источниках, могут быть также использованы для проверки устойчивости информации, полученной в результате социологического исследования, для сопоставления, сравнения, либо построения динамических рядов распределения данных.
Массивы первичной статистической информации или статистической отчетности хранятся как в официальных статистических управлениях, так и в различных ведомствах и учреждениях. Это бланки со стандартизованной отраслевой информацией, ежеквартальные и годовые отчеты предприятий в налоговой инспекции, годовые балансы банков; данные о здоровье населения, хранящиеся в медицинских учреждениях; документы по учету преступлений, хранящиеся в правоохранительных органах, и т.д. За исключением «санкционированных» случаев (когда исследования заказаны собственниками соответствующих документов, либо иными организациями, имеющими к ним доступ) такие документы труднодоступны исследователю.
Протоколы и стенограммы судебных или арбитражных заседаний, расследований, собраний, индивидуальные характеристики школьных психологов на учащихся и другие аналогичные документы могут служить источником тематических зондажей.
Для репрезентативных исследований из-за ограниченности массива документов они, как правило, не пригодны. Кроме того, эти документы не всегда доступны исследователю ввиду своей конфиденциальности.
Используемые в зондажных целях личные документы - письма, дневники, автобиографии и т.д. - также не всегда могут составить репрезентативный массив для полномасштабного исследования. К тому же доступ к личным документам затруднен не в меньшей степени, чем к протоколам и стенограммам.
Наряду с решением вспомогательных задач - сбор сведений об объекте, предмете исследования, уточнение модели выборки, методического инструментария сбора информации - документы могут составить источниковую основу самостоятельного социологического исследования. Анализ документов как поисковый научный метод лежит в основе двух видов исследования: количественного семантического анализа и главного метода, используемого в прикладной социологии - анализа содержания документов. Прежде чем перейти к его детальному рассмотрению, ознакомимся в общих чертах с методом количественного семантического анализа.
Виды Прикладная социология в первую очередь рас-
документов сматривает различные печатные и рукописные материалы, созданные для хранения и передачи информации. При более широком подходе в состав документов включают также теле-, кино-, фотоматериалы, звуковые записи и т. д.
Существует ряд оснований для классификации документов. По статусу различают документы официальные и неофициальные; по форме изложения - письменные и (более широко - вербальные), аудиальные, визуальные, аудио-визуальные и статистические. По своим функциональным особенностям документы разделяются на информационные, регулятивные, коммуникативные и культурно-просветительские. Естественно, при этом подчеркивается основная, ведущая направленность документа, однако чаще всего он выполняет одновременно несколько функций.
Принципиальное значение для исследователя имеют официальные документы - постановления правительственных органов, директивы ведомств, приказы и распоряжения администрации предприятий и учреждений, которые преимущественно отражают общественные связи и выражают коллективные точки зрения. Они составляются и утверждаются государственными или общественными органами, коллективными или частными учреждениями и могут выступать в качестве юридического доказательства. Ведущее назначение этих документов - управленческое. Их основная функция - информировать о состоянии дел, о достижении определенных намеченных целей.
Полезная информация для систематизированного изучения и статистического обобщения контроля за деятельностью организаций содержится в текущих планах работы. Анализ этих материалов в динамике позволяет выявить роль различных управленческих акций в организации производства, обнаружить и исправить имеющиеся трудности, недостатки в работе. Ведущее назначение такого рода документов - коммуникативное и культурное, но при этом они информируют членов коллектива и регулируют отношения между ними.
Большую пользу может принести изучение неофициальных документов. Среди них выделяются личные документы. Они весьма ценны, поскольку представляют собой почти ничем не ограниченные высказывания людей по свободно выбранной теме. Личные документы - дневники, мемуары, письма, семейные фото- и кинодокументы, архивы и т.д. - незаменимый источник изучения общественного сознания, мнений и установок на индивидуальном уровне. Они позволяют вскрывать глубинные социальные механизмы образования ценностных ориентаций, понять историческую обусловленность мотивов поведения, найти основу для выделения социальных типов личности. Особое значение имеют письма населения в различные властные организации, в редакции средств массовой информации.
Важнейший источник документальной информации - материалы прессы, отражающие все стороны жизни общества. Публикации газет синтезируют в себе черты документов различных типов: «словесную», цифровую и изобразительную информацию, официальные сообщения, авторские выступления и письма граждан, документы истории и репортажные материалы о современности.
Многое может сказать об эффективности газетных выступлений изучение языка публикаций. Так, по данным исследования, проведенного в рамках проекта «Общественное мнение», до 70% читателей газеты «Таганрогская правда» неправильно интерпретировали содержащиеся в публикациях на экономическую тематику ключевые понятия: от 50% до 80% читателей продемонстрировали полное незнание или ошибочное истолкование таких слов, как: «демократ», «монополия», «реванш», «либерал», «эскалация» и др. А ведь это - понятия, наиболее часто встречавшиеся в выступлениях внешнеполитических обозревателей центральных газет, радио и телевидения.
Еще одно основание для типологии документов - их целевое назначение. Выделяют документы, созданные независимо от исследователя, и документы, «целевые», то есть подготовленные в точном соответствии с программой и задачами социологического обследования. К первой группе, естественно, относятся все документы, существование которых ни прямо, ни косвенно не обусловлено техникой проведения социологического исследования (связанные с темой исследования официальные документы, статистические сведения, материалы прессы, личная переписка и т. д.). Вторая группа документов включает: ответы на открытые вопросы анкеты и тексты интервью, записи наблюдений, отражающих мнение и поведение респондентов; справки официальных и общественных организаций, выполненные по инициативе, заказу исследователей; статистическую или вербальную информацию, собранную и обобщенную в ориентации на определенное социологическое исследование.
Информацию, содержащуюся в документах, принято разделять на первичную и вторичную. В первом случае речь идет об описании конкретных ситуаций, об освещении деятельности отдельных лиц или органов. Вторичная информация носит более обобщенный, аналитический характер, в ней, как правило, отражены более глубокие социальные связи.
Самостоятельные этапы анализа документов - Отбор отбор источников информации и комплектова-
документов ние выборочной совокупности подлежащих для изуче- анализу материалов. Опорой для этих этапов служит программа исследования.
Как подойти к отбору массива документов для анализа? Прежде всего принимают во внимание качественный и количественный аспекты процедуры построения выборки.
Количественная сторона выборки определяется в первую очередь материально-техническими возможностями и организационными условиями деятельности исследовательской группы. Если к отбору и анализу документов можно привлечь достаточно опытных, обученных специалистов, если сроки проведения исследования не требуют оперативного осуществления всех работ, а для обработки первичной информации могут быть использованы современные вычислительные средства, то, несомненно, надо повысить разнообразие источников информации и увеличить объем выборочной совокупности. На практике, однако, чаще приходится думать об обратном, то есть о путях сокращения количества изучаемых материалов. Общий принцип решения этой задачи один - конкретизация, уточнение целей анализа документов.
Исследователь не имеет права поддаться магии слова «документ». Ни печать, ни подписи на нем не гарантируют надежности документальной информации. За текстом всегда стоят люди и их интересы, их сила и слабости всегда отражаются в содержании документа. Поэтому приступая к работе, определяют надежность самого документа и достоверность его содержания. Речь идет, во-первых, о подлинности источника и его связи с предметом исследования и во-вторых - о правдивости в освещении фактов, точности в передаче автором описываемых им событий.
Бывает так, что случайные ошибки снижают достоверность всего документа или отдельных его разделов: неверное указание дат и имен, опечатка в приводимом статистическом материале, непреднамеренное «опущение» ряда важных деталей и т.д.
Существуют также обстоятельства систематического характера, отрицательно сказывающиеся на качестве документальной информации, например, неправильная методика группировки при составлении статистических документов.
Широко используемое средство, позволяющее проверить надежность, достоверность информации и одновременно исследовать содержание документов, - «внешний» и «внутренний» анализ. Внешний анализ состоит в изучении обстоятельств возникновения документа, его исторического, социального контекста. Зная истинное положение дел в соответствующей сфере жизни общества, конкретных областях, в регионах страны, будучи знакомым с традициями разных социальных групп населения, социолог легко обнаружит тенденциозность в освещении отдельных проблем, поднимаемых некоторыми авторами документов. Внутренний анализ - это и есть собственно изучение содержания документа, всего того, о чем свидетельствует текст источника, и тех объективных процессов и явлений, о которых он сообщает.
Виды Во всем многообразии исследовательских при-
анализа емов, используемых при изучении документов,
докуМентов выделяются два основных вида: качественный анализ (иногда его называют традиционным) и формализованный, носящий название контент-анализа. Эти два во многом различных подхода к изучению документальной информации могут, тем не менее, дополнять друг друга.
Качественный анализ зачастую служит предпосылкой последующего формализованного изучения документов. Как самостоятельный метод он приобретает особое значение при изучении уникальных документов: их число всегда невелико и поэтому нет надобности в количественной обработке информации. На первый план в таких случаях выдвигаются углубленное логическое исследование содержания документа, обнаружение возможных «умолчаний», оценка своеобразия авторского языка и стиля изложения.
Стремление в максимальной степени избежать субъективизма, потребность в социологическом изучении и обобщении большого объема информации, ориентация на использование современной вычислительной техники при обработке содержания текстов привели к становлению метода формализованного, качественно-количественного изучения документов (контент-анализа).
Согласно этому методу, содержание текста определяется как совокупность имеющихся в нем сведений, оценок, объединенных в некую целостность единой концепцией, замыслом. Формализованный анализ документов имеет дело с текстом, но ориентирован прежде всего на изучение стоящей за ним реальности. Особо подчеркнем, что внетекстовой реальностью являются не только события, факты, человеческие отношения, отраженные в текстах, но и используемые при их подготовке принципы отбора материалов. Другими словами, для исследователя может быть в равной степени важно и то, что вошло в содержание текста, и то, что оказалось вне его рамок.Процедура формализованного изучения документов начинается с выделения двух единиц анализа: смысловых (качественных) и единиц счета. При этом главной смысловой единицей должна быть социальная идея, социально-значимая тема, отображенная в операциональных понятиях. В тексте она выражается по-разному: словом, сочетанием слов, описанием. Цель исследования - отыскать индикаторы, указывающие на наличие в документе темы, значимой для анализа, и раскрывающие содержание текстовой информации. К примеру, при изучении роли газеты в распространении технических знаний к публикациям на эту тему могут быть отнесены статьи, очерки, заметки, фотографии, в которых прямо или косвенно, с различной степенью достоверности говорится о новых достижениях в области техники и технологии.
Плодотворным оказывается при анализе текстов деятельностный (проблемный) подход. В этом случае весь текст или его часть рассматриваются как описание конкретной проблемной ситуации, в которой есть свои «действующие лица» и рассказано об отношениях между ними. При формализованном анализе документов всесторонне рассматривают саму деятельность, а также выделяют ее субъекты, цели и мотивы совершаемых ими поступков, обстоятельства, причины, породившие потребность в той или иной деятельности (бездеятельность - это тоже вид деятельности); объект ее направления. Подобное «проблемное» прочтение содержания совокупности писем населения или газетных публикаций способствует преодолению многих трудностей, вызываемых разнообразием излагаемых в них ситуаций и языковых средств, используемых различными авторами. При соотнесении содержания текстов с социально-демографическими характеристиками и словарным багажом их авторов описанный прием анализа документов открывает самые широкие и благоприятные возможности для применения ЭВМ, позволяет получить интересные содержательные выводы о явлениях, процессах, отраженных в документах.
Обязательный инструментарий осуществления формализованного анализа документов - бланк кодировки. Он составляется в соответствии со схемой операциональных понятий, содержит единицы анализа и все элементы описания проблемной ситуации, устанавливает однозначное соответствие между лексикой текста и кодами, над которыми производятся вычислительные операции.
В качестве примера приведем фрагмент бланка, с помощью которого можно осуществить кодирование информации, содержащейся в письме:
| Признак, градация признака | nbsp; | ||||||
| nbsp; | |||||||
| nbsp; | |||||||
| nbsp; | |||||||
| nbsp; | |||||||
| Один человек | nbsp; | ||||||
| Два и более человека | nbsp; | ||||||
| Ситуация не ясна | nbsp; | ||||||
| Группа, к которой принадлежит | nbsp; | ||||||
| Неформальная (семья, друзья и т.д.) | nbsp; | ||||||
| Формальная (производственная, | nbsp; | ||||||
| учебный коллектив и т.д.) | nbsp; | ||||||
| Ситуация не ясна | nbsp; | ||||||
| nbsp; | |||||||
| Мужчина(мужчины) | nbsp; | ||||||
| Женщина (женщины) | nbsp; | ||||||
| Смешанная группа | nbsp; | ||||||
| Ситуация не ясна | nbsp; | ||||||
| nbsp; | |||||||
| Молодежь (до 30 лет) | nbsp; | ||||||
| Лица среднего возраста (30-49 лет) | nbsp; | ||||||
| Лица старшего возраста (свыше 50 лет) | nbsp; | ||||||
| Смешанная группа | nbsp; | ||||||
| Ситуация не ясна | nbsp; | ||||||
| Количество проблем, рассматриваемых в письме: | |||||||
Анализ документации
Анализ документации (англ. document analysis ) - это метод сбора данных посредством анализа документов для их последующей интерпретации и оценки программы . Термин «документация» означает процесс формального закрепления данных, полученных из письменных, устных, графических или археологических источников. В связи с чем, для исследователя документ является источником получения информации об интересующем его объекте. Этот источник информации может быть представлен в форме текстового материала, в формате visual media (включая аудио-ленты, фотографии, фильмы, и видеозаписи), а начиная с недавнего времени и в формате электронных данных. Сейчас оценщики используют e-mail переписку, мультимедиа и форумы как новые формы документации, которую нужно тщательно исследовать для достижения целей оценивания.
Цель анализа документации
Целью анализа документации является сбор фактов . Например исследователь может изучить брошюру программы, чтобы определить её основные цели и задачи, собрать дополнительные сведения. Но не все документальные факты подлежат анализу и оценке. Как правило исследователь анализирует документацию для того, чтобы найти те или иные факты в подтверждение гипотезы , которую он уже заранее для себя сформулировал. То есть анализ документации заключается в выборе из имеющихся документов «нужных» фактов. Таким образом, вопросы, гипотезы или общие идеи исследователя действуют как критерий для отбора фактов для их дальнейшей интерпретации и получения выводов. Анализ документации является лучшим методом поиска ретроспективной информации относительно программы и подчас может являться единственным источником получения такой информации. Анализ документации может быть проведен в любой момент, что особенно полезно на начальной стадии оценки, когда исследователю необходимо изучить программу, историю её реализации и определить её основные цели, задачи и т.д. При выполнении анализа документа, оценщик выясняет, какая информация уже собрана, а какую только предстоит собрать для оценки программы.
Преимущества анализа документации
- Документация содержит полный объем данных
В отличие от коротких выборочных исследований, которые проводятся оценщиками с целью получения информации о реализации программы и позволяют получить крайне ограниченный объем информации, документация по программе ведется с начала её создания до получения конкретных результатов и их анализа. Поэтому документы содержат полный объем информации, позволяют оценить общую картину реализации программы, а также построить прогнозные оценки и выявить основные тренды развития. Некоторые виды информации могут быть эффективно собраны именно посредством анализа документа. Очень часто оценщик должен знать заявленные цели программы, и документы - это источник такой информации. Вместо огромных затрат времени на общение с персоналом программы, подобная информация может быть получена из основных документов.
- Документы содержат более надежную информацию
Информация, получаемая посредством анализа документации зачастую является более достоверной и надежной, чем какая-либо другая. Результаты интервьюирования зависят от репортера, его умения задать «правильные» вопросы для получения релевантной информации – велик субъективный фактор. Интервьюирование основывается на памяти репортера, в то время как анализ документа не подчинен этому недостатку. Полученные со слов опрашиваемых данные могут содержать в себе фактические ошибки в силу неосведомленности респондентов или по причине неаккуратности репортера. Официальная документация как правило тщательно проверяется и свободна от пристрастий и необъективности репортера.
- Анализ документации экономит ресурсы и время
При проведении опросов и интервью необходимо заранее договариваться о встрече и тратить на сбор необходимой информации значительное количество времени, после чего полученную информацию необходимо зафиксировать и выполнить отчет. Ничего из этого не нужно осуществлять при анализе документации, так как она может быть проведена в любое время и не требует кооперации большого числа людей. Документы часто находятся в общем пользовании и доступны в любое время при минимальных затратах.
- Некоторая информация может быть получена только из документов
Анализ документа может выявить информацию, которая не могла бы быть получена через опросы . Например, один исследователь, демонстрируя Ирландское доминирование в Бостонских общественных школах, идентифицировал Ирландские фамилии в списке служащих, определив таким образом, их долю в общем числе служащих. Подчас персонал не склонен отвечать на вопросы, в связи с чем документы остаются единственным источником информации. Крайне сложно получить ретроспективную информацию о программе, особенно если её реализация уже завершилась. Люди, инициировавшие проведение программы, а также активно в ней участвовавшие могут не помнить всех деталей или оказаться недоступными на момент проведения оценки.
Недостатки анализа документации
- Обман со стороны автора документа
Часто документы пишут таким образом, чтобы программа выглядела лучше, чем она есть на самом деле. Подобное «приукрашивание» самой программы, хода её реализации и результатов вводит в заблуждение исследователей и может привести к неправильным интерпретациям и выводам оценщиков.
- Документ может содержать ошибки
Документ - это письменный отчет и также может содержать некоторые фактические ошибки. Очевидна связь содержания документа с памятью человека, ответственного за его составление. Отчеты могут отражать ошибки клерков, типографские ошибки, погрешность измерения , или содержать прямой обман. Отчеты агентств могут быть неточными или устаревшими.
- Документы не всегда достаточно детализированы
Несмотря на то, что исследователю может быть доступен весь объем документации, зачастую она не будет содержать большую часть необходимой информации и/или достаточно детализироваться. В Коннектикуте, например, государственные эксперты, осуществлявшие оценку программы социальной помощи студентам, получили огромное количество материалов, но так и не смогли выяснить, на основании какого критерия из 30000 студентов были выбраны лишь 6000. Если исследователь заинтересован внутренними процессами и процедурами принятия решения, необходимые данные скорее всего будут недоступны.
- Документы зачастую не содержат определений и остаются неясными
Определения и категории, используемые в документе, могут не удовлетворять исследователя и оставаться неясными, что затрудняет понимание сути программы и сбор необходимых фактов для достижения цели. Например, Hendrickson и Barber (1980) описывают оценку программы, когда в документации программы не содержалось ни одного развернутого определения используемых категорий данных, а заново нанятый персонал не имел опыта в сборе и документировании информации.
- Документация подвержена влиянию субъективного фактора
Любой документ отражает в себе то, что думал и знал на момент составления документа его автор. Документальные факты никогда не бывают «чистыми», так как не могут существовать в такой форме и всегда являются отражением мысли составившего документ человека. Это значит, что при первом рассмотрении документа, необходимо обращать внимание не на факты, в нем содержащиеся, а на человека, который составил этот документ. В идеале, в первую очередь необходимо изучить автора, а уж затем его документ, с тем чтобы понимать цель его составления и видеть возможные ошибки - намеренные или случайные.
- Документ может содержать нерепрезентативные примеры
Основным критерием сбора любой информации является репрезентативность выборки. Это делается для того, чтобы полученные данные не содержали в себе концентрации каких-либо сугубо конкретных признаков, а представляли общую картину в целом. Однако документ, как и любой другой источник информации, не защищен от подобной ошибки. Если примеры, приведенные в документе, не являются репрезентативными, то есть характерными для данного явления в целом, исследователь получает неадекватную картину происходящего, результатом чего могут стать смещенные оценки программы и неправильная интерпретация результатов. Единственным способом проверки данных на репрезентативность является сравнение зафиксированной в документе информации с информацией, полученной из других источников другими методами.
Виды анализа документации
- Отслеживание (англ. Tracking ) – это процесс изучения документации с целью сбора информации, которая подтвердит или опровергнет гипотезу исследователя. Когда исследователь начинает изучать программу, результаты её реализации, его интересует, что именно привело к такому стечению обстоятельств, почему произошло именно так, а не иначе. Исследователь строит гипотезу, своё предположение относительно того, что послужило причиной этому, а затем шаг за шагом начинает проверять её путем анализа документов. Для оценки текущих результатов оценщик «возвращается» назад, воссоздавая ту цепочку событий и явлений, зафиксированных в документах, результатом которых стали имеющиеся итоги.
- Анализ содержания документа (англ. Content Analysis ) - это метод анализа документации, который заключается в применении научных методов анализа документа с точки зрения его содержания. Основной формой анализа содержания документа является определение четкости и разборчивости текста самого документа, выявление степени его удобочитаемости (англ. readability ). Подобный анализ включает в себя определение среднего числа слов в предложении, число общеопнятных слов, число сложных и длинных предложений и число абстрактных идей. Анализ документов с точки зрения их содержания также дает существенное представление о сути программы, которую необходимо оценить.
- Агрегирование имеющихся данных (англ. Case-Study Aggregation Analysis ) - это метод анализа документации, который заключается в сборе всех имеющихся исследований, программ и документов на интересующую тему для агрегирования всего массива информации. Данный метод анализа документации позволяет понять, какая информация уже собрана и проанализирована, и какую информацию необходимо собрать. Агрегирование имеющихся данных позволяет собрать весь массив добытых сведений у одного исследователя или оценщика, что позволяет ему более адекватно понять суть той или иной программы.
Определение надежности документа
Существует четыре основных правила для определения степени надежности документа:
- Неполное наблюдение или плохая память являются причинами неадекватности утверждений. В результате. чем большее количество времени прошло с момента реализации программы до составления документа, тем менее надежен этот источник информации;
- Все документы составляются с определенной целью. Некоторые представляют собой отчеты о проделанной работе, другие составляются как обращение или пропаганда других людей. Чем серьёзнее было намерение автора составить простой отчет по фактической реализации программы, тем надежнее документ;
- Чем больше конфиденциальность информации, тем надежнее документ, так как конфиденциальная информация предназначена для внутреннеого пользования "посвященным" кругом людей, которым нет необходимости обманывать самих себя;
- Утверждения опытного образованного исследователя более правильны, нежели заявления простых наблюдателей. То есть чем больше опыт человека, составлявшего документ, тем надежнее информация содержащаяся в нем.
Особый интерес в современных условиях представляет анализ финансовой документации . Любое воздействие, будь то программа социальной помощи населению, сокращение налогового бремени или введение новых стандартов технического регулирования, ведет к перераспределению ресурсов, изменению затрат и выгод субъектов и объектов воздействия. В условиях ограниченности ресурсов и высоких рисков вопрос оценки результативности расходов становится все более актуальным. В связи с чем, для оценки целесообразности проведения программы необходимо сравнить издержки и выгоды от её реализации в целом для всего общества. Получить необходимую для этого информацию можно с помощь анализа финансовой документации.
Под финансовой документацией понимаются не только документы в узком смысле, но и проведение сбора исходных данных в публичных источниках, анализ данных статистических служб, анализ состояния цен, запросы котировок цен и т.д.
Анализ финансовой документации позволяет оценить масштабы реализации программы, источники её финансирования , а также механизмы реализации программы. Данный метод сбора информации позволяет выявить основные цели и приоритеты в реализации программы и является дополняющим к экспертным опросам и опроса представителей отрасли.
Одной и форм оценки целесообразности программ путем анализа финансовой документации является финансово-экономическое обоснование . В соответствии с Регламентом Государственной Думы Российской Федерации, Регламентом Правительства Российской Федерации, проекты нормативных правовых актов, реализация которых требует финансовых или материальных затрат, должны сопровождаться финансово-экономическим основанием, которое, по сути, также оценивает целесообразность реализации того или иного государственного вмешательства и результативность расходов. Финансово-экономическое обоснование позволяет обосновать необходимость введения нормативного правового акта исходя из положительного воздействия на общественное благосостояние.
- Encyclopedia of evaluation. Sage Publications, 2005.
- Caulley, D. Document analysis in program evaluation. Evaluation and Program Planning, 1983.
- Guba, E.G., Lincoln, Y.S. Effective Evaluation. San-Francisco, 1981.
- Hendrickson, L., Barber, L. Evaluation and Politics: a critical study of a community school program. Evaluation review, 1980.
- Murphy, J.T. Getting the facts. Santa Monica, 1980.
- Weiss, C.H. Evaluation Research, 1972.
Wikimedia Foundation . 2010 .
- Википедия
ИСО 9004-1-94: Управление качеством и элементы системы качества. Часть 1. Руководящие указания - Терминология ИСО 9004 1 94: Управление качеством и элементы системы качества. Часть 1. Руководящие указания: 8.7. Анализ готовности продукций к реализации Следует определить возможности организации для поставки новой или модернизированной… … Словарь-справочник терминов нормативно-технической документации
оценка - 3.9 оценка (evaluation): Систематическое определение степени соответствия объекта установленным критериям.
