An introduction to educational research methods. Введение в образовательные исследовательские методы Білім беру-зерттеу әдістеріне кіріспе
жүктеу/скачать 32,4 Mb. Pdf көрінісі
|
- Бұл бет үшін навигация:
- Как можно снизить угрозу валидности в обоих исследованиях
- Поиск опровергающих доказательств Зачем это необходимо
- Как можно снизить угрозу валидности в исследовании Джейн
- Заключение: размышление о достоверности и валидности применительно к собственному проекту
- Задание 7.1 Каким образом использование учениками ИКТ на уроках способствует их обучению
- Дополнительная литература
Триангуляция Это широко используемая стратегия повышения внутренней валидности качественного анализа в общественных науках. Она основана на принципе подтверждения результатов за счет использования множественных перспектив. Основным аспектом стратегии являются угрозы для валидности выводов, вызванные необъективностью любого источника, метода или агента исследования, и снижаемые за счет использования различных методов.
Reliability And Validity In Qualitative Research By Teacher Researchers 354
Почему это необходимо? Авторы утверждают, что для качественного анализа необходимо несколько типов триангуляции, но я рассмотрю три метода, которые могут иметь отношение к типу проекта исследований, использованному в этой главе: триангуляция источников, методов и исследователей. Триангуляция различных источников может означать простое включение нескольких информантов (т.е. опрашиваемых или исследуемых субъектов). Однако за счет включения различных категорий информантов (т.е. учителей и учеников, вторичных и первичных информантов, учеников разного пола или способностей или из разных классов) комбинированные перспективы предположительно сделают результаты более достоверными. Триангуляция методов включает использование различных инструментов сбора данных с одними субъектами. Это позволяет компенсировать угрозы, присущие отдельным методам. Например, вероятность «эффекта Хоторна (Hawthorne)» (изменения в поведении участников в ходе исследования могут быть связаны лишь с определенной социальной ситуацией и ее социальным воздействием на них) предположительно выше в случае отдельных интервью, чем в случае опросников, особенно если опрашиваемый знает интервьюера. Однако опросники имеют свои собственные недостатки, такие как меньшая свобода для развития опрашиваемым собственных мыслей и использование письменной формы самовыражения. Наконец, триангуляция исследователей обозначает использование более одного лица для сбора или анализа сведений. Можно утверждать, что триангуляция как инструмент исследования особенно ценен в случае интроспективного анализа, хотя, как мы увидим в наших примерах, эта стратегия также позволяет укрепить авторитет наблюдательных исследований.
Некоторые комментаторы (напр., Silverman, 2010: 371) утверждают, что использование триангуляции не подходит для качественного анализа, поскольку противоречит этнографической перспективе, в которой контекст каждого источника информации, каждого использованного метода и подхода каждого исследователя обладает внутренней ценностью. Поэтому сравнение результатов под разными углами нельзя использовать для укрепления общего вывода. Однако согласно менее категоричному мнению, можно сохранить главенство основного источника и методов исследования, а также собственную интерпретацию результатов исследования, и одновременно использовать несколько источников информации и анализа в поддержку валидности этого основного фокуса. Как можно снизить угрозу валидности в обоих исследованиях? Авторы утверждают, что для качественного анализа необходимо несколько типов триангуляции, но я рассмотрю три метода, которые могут иметь отношение к типу проекта исследований, использованному в этой главе: триангуляция источников, методов и исследователей. Триангуляция различных источников может означать простое включение нескольких информантов (т.е. опрашиваемых или исследуемых субъектов). Однако за счет включения различных категорий информантов (т.е. учителей и учеников, вторичных и первичных информантов, учеников разного пола или способностей или из разных классов) комбинированные перспективы
Reliability And Validity In Qualitative Research By Teacher Researchers 355
предположительно сделают результаты более достоверными. Триангуляция методов включает использование различных инструментов сбора данных с одними субъектами. Это позволяет компенсировать угрозы, присущие отдельным методам. Например, вероятность «эффекта Хоторна (Hawthorne)» (изменения в поведении участников в ходе исследования могут быть связаны лишь с определенной социальной ситуацией и ее социальным воздействием на них) предположительно выше в случае отдельных интервью, чем в случае опросников, особенно если опрашиваемый знает интервьюера. Однако опросники имеют свои собственные недостатки, такие как меньшая свобода для развития опрашиваемым собственных мыслей и использование письменной формы самовыражения. Наконец, триангуляция исследователей обозначает использование более одного лица для сбора или анализа сведений. Можно утверждать, что триангуляция как инструмент исследования особенно ценен в случае интроспективного анализа, хотя, как мы увидим в наших примерах, эта стратегия также позволяет укрепить авторитет наблюдательных исследований. Некоторые комментаторы (напр., Silverman, 2010: 371) утверждают, что использование триангуляции не подходит для качественного анализа, поскольку противоречит этнографической перспективе, в которой контекст каждого источника информации, каждого использованного метода и подхода каждого исследователя обладает внутренней ценностью. Поэтому сравнение результатов под разными углами нельзя использовать для укрепления общего вывода. Однако согласно менее категоричному мнению, можно сохранить главенство основного источника и методов исследования, а также собственную интерпретацию результатов исследования, и одновременно использовать несколько источников информации и анализа в поддержку валидности этого основного фокуса. Как можно снизить угрозу валидности в обоих исследованиях? Как пример интроспективного исследования, анализ Джона выиграет от всех трех типов триангуляции. В частности, тип исследования в данной ситуации требует триангуляции источников. Опрос учителей и учеников, включающий, по возможности, учителей из начальной школы информанта, позволил бы Джону собрать воедино мнения группы лиц по вопросу влияния перехода между этапами KS2/3 на изучение географии на основании триангуляции источников информации. Если бы выводы основывались исключительно на сведениях от учеников, то мы бы считали их менее убедительными, поскольку отдельно взятые данные интервью с учениками могут быть подвержены «эффекту Хоторна» или частичным воспоминанием об изучении географии в начальной школе.
Несмотря на наблюдательную направленность исследования Джона, внутренняя валидность результатов увеличится, в частности, за счет триангуляции методов. Чтобы делать общие утверждения о том, как ее ученики сотрудничают в малых группах, и какие формы использования языка это создает, ей нужны доказательства того, что успехи учеников не полностью зависят от характера групповой работы или от динамики определенных взаимосвязей между сверстниками. Для этого Джейн может использовать различные методы поощрения использования группой изучаемого языка, давая им различные виды языковых заданий в течение периода сбора информации. Они
Reliability And Validity In Qualitative Research By Teacher Researchers 356
могут включать, например, ролевые игры, споры, решение задач или описание. Важно включить различные виды задач, поскольку скрытые предпочтения учеников могут определяться типом языка, требуемым для выполнения различных заданий (например, знание определенной лексики), или возможностью различных видов взаимодействия (напр., спор, сотрудничество), предпочтительных для разных типов личности.
Интерес Джейн к исследованию причин, почему ее ученики показывают определенные результаты в изучении языка, может привести к выводам, валидность которых может оказаться под угрозой, если она не примет соответствующих мер для укрепления своих рассуждений. Для компенсации исключительно собственного объяснения полученных данных Джейн могла бы провести интервью с отдельными учениками в качестве другой формы триангуляции методов ее исследования. Это было бы особенно полезным для изучения причин того, почему ученики меняют язык в определенные моменты группового диалога. Хотя Джейн может интерпретировать некоторые возможные причины за счет поиска паттернов перехода в расшифровках, для ее анализа пошли бы на пользу собственные объяснения некоторых учеников. Она также могла бы использовать интервью как возможность протестировать некоторые собственные интерпретации паттернов перехода на самих учениках, чтобы увидеть, подтверждают ли они ее собственные взгляды. Разумеется, даже если бы ученики опровергли некоторые ее заключения, это не обязательно означало бы отсутствие их валидности, поскольку импульс мог сработать на подсознательном уровне. Однако обсуждение этого вопроса с учениками само по себе усилило бы ее исследование, сделав интерпретированные данные насыщеннее, и продемонстрировав большую осведомленность о сложностях процесса анализа.
Что касается триангуляции исследователей, то и Джон, и Джейн могли бы обратиться к коллеге для проверки их выборки данных, связанных с определенным аспектом их исследования, чтобы увидеть, повторится ли сделанная ими самими интерпретация данных в выводах коллеги.
Это способ подтверждения выводов путем пересмотра гипотез в свете опровергающих доказательств в данных. Miles and Huberman (1994: 263)) описывают эту тактику как часть набора стратегий для поиска «противопаттернов» («unpatterns»), которые «проверяют вывод о «паттерне», говоря, чем он не является». Другие перечисленные ими стратегии включают «проверку смысла посторонних значений», «использование крайних случаев» и «отслеживание сюрпризов». Возможно, более явно, чем предыдущие две стратегии, которые рассмотрены в этой главе, поиск опровергающей информации сфокусирован на связи между собранными эмпирическими данными и теориями, гипотезами или выводами, сделанными исследователем после того, как процесс анализа принес некоторое понимание.
Reliability And Validity In Qualitative Research By Teacher Researchers 357
Как можно снизить угрозу валидности в исследовании Джейн? Поиск опровергающих доказательств – один из способов защиты от нашей естественной склонности к излишнему энтузиазму в отношении определенной интерпретации или паттернов данных. Цель качественного анализа не в том, чтобы доказать точку зрения или найти подтверждение теориям, но зачастую воодушевление от обнаружения одного или нескольких экземпляров данных, подтверждающих определенную интерпретацию исследуемого явления, может заставить исследователя слишком быстро и слишком безоговорочно остановиться на определенной интерпретации данных. Например, Джейн может обнаружить, что ученики с большей готовностью используют изучаемый язык в повторяющейся ситуации (напр., если они уже сталкивались с необходимостью использовать выражение в схожей коммуникативной ситуации в прошлом задании). Не прибегая к количественному подсчету количества применений изучаемого языка в повторяющейся ситуации, что было бы некорректно в качественном анализе, Джейн могла бы также искать случаи использования учениками французского языка в новых коммуникативных ситуациях или неиспользования в повторяющихся ситуациях. Независимо от того, приведет ли это к изменению ее выводов, просто продемонстрировав нам (и себе), что она проверила опровергающие доказательства, даст ей и нам больше уверенности в сделанной ею гипотезе и ее заключительных выводах.
Как показали примеры, приведенные в этой главе, эти две концепции необходимо учитывать на разных этапах вашего исследовательского проекта. Подсознательно вы должны размышлять о слабых местах процесса сбора и анализа информации. Насколько эффективно они соотносятся с вашими целями и задачами исследования? Всегда полезно обсудить свой план с коллегой или наставником, прежде чем приступить к его реализации. Ищите примеры в литературе, чтобы понять, как другие люди спроектировали схожие исследования. Выявив потенциальные недостатки, вы сможете начать планировать стратегии, подобные описанным выше, которые вы сможете адаптировать для преодоления определенных угроз для достоверности и валидности собственного исследования.
Помните, что между качественным и количественным анализом есть фундаментальное различие: первый не стремится прийти к твердым фактическим выводам на основании некоторой формы измерения; его цель – выработать гипотезы и аргументы, или исследовать темы, подтвержденные заслуживающими доверия данными. Будьте откровенны (и при необходимости самокритичны) о том, как вы пытались подтвердить достоверность доказательств в своем анализе.
Reliability And Validity In Qualitative Research By Teacher Researchers 358
Задание 7.1 Каким образом использование учениками ИКТ на уроках способствует их обучению? Представьте, что вы хотите исследовать этот вопрос применительно к контексту вашего предмета. Примите к сведению следующие вопросы, которые вам необходимо будет решить при проектировании качественного исследования на основании собственного опыта преподавания с одной или несколькими группами в вашей школе. • Какой тип использования учениками ИКТ вы хотите исследовать и почему?
• С каких аспектов их учебы вы хотите начать исследование? • Какие доказательства вы хотите собрать относительно использования учениками технологии? • Какие другие формы сбора данных вы используете? • Перечислите процедуры и типы информации, которые потребовались бы другим для повторения исследования. • Какова вероятная угроза для внутренней валидности вашего исследования? • Какие стратегии вы используете для защиты от этих угроз?
Данная глава призвана обозначить основные преимущества обеспечения достоверности и валидности исследования, проводимого учителями- исследователями. Мы утверждали, что эти два понятия являются важными мерами оценки, используемыми в наблюдательном и интроспективном качественном анализе. Достоверность – это степень тщательности, последовательности и добросовестности исследования. Эта мера традиционно связывается с субъектом исследования. Если бы независимый исследователь проводил аналогичный анализ, пришел бы он к тем же выводам (внутренняя достоверность)? Если бы независимый исследователь проводил аналогичное исследование в другом месте, то пришел бы он к тем же выводам (внешняя достоверность)? Валидность – это то, в какой степени исследование измеряет то, что в нем заявлено. Внешняя валидность – это показатель генерализуемости результатов. Она считается неактуальной в реальных условиях эпистемологических рамок качественного анализа. Однако она может быть полезна, если рассматривать ее как инструмент Reliability And Validity In Qualitative Research By Teacher Researchers 359
гипотетической валидации. Внутренняя валидность, с другой стороны, описывается как важное качество, касающееся связи между результатами исследования и процедурами сбора и анализа информации, используемыми для их получения. Описаны и объяснены три типа стратегий проверки внутренней валидности качественного анализа учителей-исследователей. Долгосрочное участие дает исследователю достаточно времени для ознакомления и понимания субъектов, данных и процесса исследования, что увеличивает валидность результатов. Триангуляция источников, методов и исследователей защищает исследование от угроз для внутренней валидности результатов за счет погрешностей, присущих каждому отдельному источнику, методу или отдельному исследователю. Поиск опровергающих доказательств – это способ подтвердить определенные паттерны в результатах, исследуя опровергающие свидетельства, что позволяет определить, чем паттерны не являются. Вопросы для рефлексии 1. Были ли вы достаточно честны в процедурах и ограничениях вашего исследования? Качественные исследования - исследования как о процессе, так и о его результатах. Вопросы об обоснованности и достоверности являются хорошим способом критически составить отчет о процессе. 2. Рассматривали ли вы угрозы вопросам надежности и достоверности, прежде чем начать, а также рассматривали ли их после того, как вы завершили сбор данных? 3. Составьте список стратегий, которые использовались для укрепления надежности и достоверности вашего исследования. Во-первых, определите потенциальные угрозы, затем поговорите о стратегиях, которые вы разработали, чтобы компенсировать эти угрозы. 4. У вас есть соответствующее количество целей исследования для изучения? Будьте реалистами в пределах временных и ресурсных ограничений, с которыми вы работаете.
Denzin, N. and Lincoln, Y. (2011) The SAGE Handbook of Qualitative Research (4th edn). London: Sage. Saldana, J. (2009) The Coding Manual for Qualitative Researchers. London: sage Silverman, D. (2010) Interpreting Qualitative Data (3rd edn). London: Sage.
Reliability And Validity In Qualitative Research By Teacher Researchers 360
Reliability And Validity In Qualitative Research By Teacher Researchers 361
ЗЕРТТЕУШІ МҰҒАЛІМДЕРДІҢ САПАЛЫ ТАЛДАУЫНЫҢ ШЫНАЙЫЛЫҒЫ МЕН ЖАРАМДЫЛЫҒЫ
ТАРАУ 7
Тарауға шолу жасау Бұл тарауда сабақ беруші зерттеушілермен жүргізілген мектептегі сапалы зерттеу мәнмәтініндегі шынайылық және жарамдылық болып табылатындығы қарастырылады. Зерттеуші мұғалімдердің сапалық талдауының ішкі жарамдылығын тексерудің үш түрлі стратегиясы сипатталып, түсіндіріледі. Сонымен бірге, дереккөздер, әдістер мен зерттеушілер үшбұрышының нәтижелердің ішкі жарамдылығы үшін қауіптерден экспериментті сақтауға көмек береді. Ең соңында, жоққа шығаратын дәлелдемелерді іздеу кері дәлелдемелерді зерттеу есебінен нәтижелердің белгілі бір үлгілерін растауға қолданылуы мүмкін.
Reliability And Validity In Qualitative Research By Teacher Researchers 362
Кіріспе Белгілі бір зерттеу кезеңінде аз ауқымды сапалық талдау жүргізетін негізгі қауіптердің бірін мынадай сұрақпен білдіруге болады: «әрі қарай не болады?». Бұл зерттеу – тек бір тамшы ғана, басқа бір адам үшін менің тәжірибемнің жеке және жергілікті нәтижелері қандай мәнге ие болады? Түрлі мәнмәтіндерде түрлі нәтижелерге қол жеткізіледі, сондықтан басқа адамдар үшін менің зерттеу жұмысымның пайдасы қандай? Бір жағынан алғанда бұл қауіп ақпараттың көп мөлшері мен қамтылуына қол жетімділікті есепке ала отырып, аса ауқымды сандық талдаудың көзге көрінетін мыңыздылығына реакция болып табылады. Зерттеуге қаншалықты көп пән, сыныптар, мектептер мен мәнмәтіндер қамтылған болса, егер олар статистикалық есептеулермен расталған болса, зерттеушінің жалпы сәйкестік пен қол жетімділігіне үміт ету үшін зерттеушіде көбірек негіздеме болады. Дәл сол мезетте өзіндік зерттеудің шынайылығымен және жарамдылығымен байланысты қауіптер педагогикалық зерттеуді шектеуді түсінудің оң белгісі болып табылады. Білікті зерттеушінің аңғырт зерттеушіден айырмалығы – біріншісі өз нәтижелері туралы асығыс-үсігіс және өркөкірек мәлімдемелер жасауға ниетті емес: дауланбайтын сенімділік, ережеге сәйкес, ғылыми-педагогикалық зерттеулерде сирек кездеседі. Кейбір күдік біздің қырағылығымызды арттырып, жаңа әрі қарама-қайшы дәлелдемелер үшін бізді ашық ететіні маңызды.
Алайда, талдау зерттеу жұмысы ретінде есептелуі үшін, белгілі бір дәрежегі жүйелілік пен жарамдылық талап етіледі, өйткені менің кіріспе ескертулеріме қарамастан, зерттеу жұмысының мақсаты – ең ауқымдағы тұлғалардың қызығушылығын тудырып, жеке және субъективті ойлау нәтижесі ретінде елестетуге мүмкіндік береді. Авторлар Линкольн мен Губа (Lincoln and Guba (1985)) «натуралистік зерттеу» мәнмәтінінде талдау сапасын оның «адалдығымен» және сендіру үдерісінің бөлігі ретінде пайдаланылған әдістерді зерттеумен өлшеуге болатынын растады: Адалдықпен байланысты негізгі мәселе қарапайым: Зерттеуші өз зерттеулерінің нәтижелері олардың назарына тұрарлық екендігін, сонымен қатар олардың назарына алынуға тиісті екендігіне өз тыңдармандарын (өзін қоса алғанда) сендіре алады ма? Осы қатынаста сенімді болу үшін қандай дәлелдемелер келтіруге, қандай критерийлерге жүгінуге, қандай сұрақтар қоюға болады? (1985: 290) Зерттеу жобасы (алынған мәліметтерді талдау мен түсіндіруге тырысатын) мен жеке жобаны (тек мәліметтерді ғана сипаттайтын) болжамды түрде айыратын немесе «пәндік зерттеу» мен «көрнекі мысал» арасындағы осындай жүйелілік пен кең ауқымды жарамдылық (Bassey, 1999: 62). Осыған байланысты қоғамтану ғылымында осы тараудың басқа бөлігінде мектептегі зерттеу мәнмәтінінде біз жан-жақты қарастыратын зерттеу жұмысының жарамдылығы мен шынайылығын нығайтуға арналған екі топтағы концепциялар мен стратегиялар түзіледі. Алайда, біз бастамас бұрын, «сапалық талдау» термині нені білдіретінін түсініп алу қажет.
Reliability And Validity In Qualitative Research By Teacher Researchers 363
жүктеу/скачать 32,4 Mb. Достарыңызбен бөлісу:
|