ДИАГНОСТИКА ДИСКУРСИВНЫХ СПОСОБНОСТЕЙ НА МАТЕРИАЛЕ ПОВСЕДНЕВНОЙ РЕЧИ

Разработанная нами методика диагностики дискурсивных способностей на базе английского языка имеет существенные ограничения: она применяется при освоении английского языка как иностранного, т. е. в процессе генеза исследуемых способностей. Диагностика же дискурсивных способностей на материале родного языка - отдельная задача, предполагающая создание новой методики. Поэтому нам потребовалась не только замена стимульного материала, но и корректировка диагностируемого конструкта, поскольку языковая способность к родному языку у взрослых людей вполне сформирована.

При разработке Теста дискурсивных способностей на материале русского языка мы опирались на эмпирические данные о характере изменений в повседневном общении горожан: усиление диалоги-зации устного городского общения, усиление личностного начала, возрождение игровой, карнавальной стихии в жизни города (Китайгородская, Розанова, 2003). Исследовательницы выделили различные типы современных коммуникативных пространств: общение дома - общение вне дома, целеориентированная коммуникация -фатическая коммуникация, коммуникация будней - коммуникация праздников, коммуникация рабочего времени - коммуникация свободного времени. Соответственно, каждое коммуникативное пространство отличается специфическим дискурсом. При определении типов дискурса, являющихся базовыми для разработки стимульного материала методики, мы опирались на выделенные типы современного городского коммуникативного пространства и учитывали при этом психологические особенности повседневного дискурса (Зачесова, Гребенщикова, 2007).

Пилотная версия методики была создана на материале повседневной лексики и базировалась на 9 типах дискурса: юмористические сообщения; телефонные разговоры; общение в семье; деловые взаимоотношения (в основном начальник-подчиненный); общение в учебном заведении (преподаватель-студент); общение в Интернете; разговоры с незнакомыми и случайными знакомыми; взаимодействие с обслуживающим персоналом; дружеское общение.

Данная версия методики состояла из 63 пунктов, каждый из которых представлял собой описание ситуации и разворачивающегося в ней диалога. Открытая форма пункта требовала от испытуемого подбора наиболее адекватного, наиболее подходящего для данной ситуации ответа. На эмпирическом уровне была реализована идея концепта дискурсивных способностей как способностей, позволяющих человеку инициировать, поддерживать, развертывать и завершать процесс общения с помощью соответствующих ситуации языковых средств. Ниже приведены примеры открытых пунктов методики диагностики дискурсивных способностей:

  • 11. В книжном магазине вам нужна книга с верхней полки, но вам ее не достать. Продавец замечает ваш внимательный взгляд наверх и спрашивает:
    • - Хотите, я вам достану эту книгу?

Ваш ответ: ...

32. Представьте ситуацию: вы выложили на торрент-трекер редкую запись известной группы.

Вам пишут:

- Почему такое плохое качество? Зачем выкладывать запись, когда она в таком ужасном состоянии?

Вы справедливо отвечаете:...

В ходе проведенного пилотного исследования на студентах гуманитарных специальностей (ГАУГН, Московский институт экономики, политики и права) и старшеклассников школы №539 г. Москвы количество пунктов методики было сокращено с 63 до 34 и разработана a-версия методики с вариантами ответов типа меню. В качестве материала для закрытых пунктов использовались наиболее типичные ответы испытуемых в ходе пилотного исследования. Для каждого пункта методики было отобрано 6 ответов: два наиболее удачных, в полной мере соответствующих ситуации, задаваемой диалогом; два, подходящих в меньшей степени; и два ответа, «условно соответствующих», «вроде бы подходящих» к описываемой ситуации.

Заведомо не соответствующие ситуации ответы, ответы нелепые и несообразные были отброшены.

За «соответствующие» ответы по новой версии методики испытуемые получали 2 балла, за «соответствующие в меньшей степени» - 1 балл, за «условно соответствующие» - 0 баллов. В качестве экспертов при отборе ответов для заданий методики выступили сотрудники лаборатории психологии речи и психолингвистики Института психологии РАН.

Количество типов обыденного дискурса в a-версии методики было уменьшено и, соответственно, новая типология явилась некоторым обобщением выделенных ранее типов. Пункты методики (описание ситуации и разворачивающийся в ней диалог) относились к 4 типам дискурса: взаимодействие с незнакомыми и случайными знакомыми; взаимодействие с близкими и знакомыми людьми; деловые отношения; интернет-дискурс. Тестовый балл по шкале дискурсивных способностей подсчитывался как сумма баллов по пунктам методики.

Апробация методики осуществлялась в 2013-2014 годах, в ней приняли участие студенты первых курсов гуманитарных специальностей ГАУГН и Московского института экономики, политики и права, старшеклассники московской школы № 539 и гимназии № 1503, преподаватели и учителя образовательных учреждений. Всего в исследовании приняло участие 208 человек (133 женщины и 75 мужчин в возрасте от 17 до 21 года).

Исследование включало в себя групповое тестирование студентов и школьников (группами по 15-35 человек) с использованием следующих методик: тест дискурсивных способностей, краткий отборочный тест, тест социального интеллекта, краткие варианты тестов Торренса и Медника. При этом последовательность предъявления во всех группах была единой.

Дополнительно проводилась экспертная оценка учителями и преподавателями познавательных, в первую очередь языковых и дискурсивных, способностей «своих» студентов и школьников. Всего в качестве экспертов выступили 9 человек (8 женщин и 1 мужчина в возрасте от 23 до 52 лет). Экспертная оценка предполагала 5-балльную оценку особенностей вербального поведения студентов и школьников по следующим шкалам: «Поддерживает настроение разговора», «Легко общается с людьми разного статуса», «Принимает участие в решении групповой задачи», «Меняет темп разговора в соответствии с ходом беседы», «Адекватен при переписке по электронной почте с преподавателем», «Количество интеракций в ходе обучения». Мы предполагали, что указанные шкалы позволяют произвести точную оценку поведенческих признаков дискурсивных способностей человека.

Для определения уровня общего интеллекта применялся краткий отборочный тест диагностики следующих способностей: способность обобщения и анализа материала, гибкость мышления, инертность мышления и переключаемость, эмоциональные компоненты мышления и отвлекаемость, скорость и точность восприятия, распределение и концентрация внимания, употребление языка и грамотность, выбор оптимальной стратегии, пространственное воображение (Бузин, 1989). В целях выполняемого исследования оценка интеллектуальной продуктивности осуществлялась по трем показателям (вербальный интеллект, невербальный интеллект и интегральный показатель) путем группировки пунктов теста по типам стимульного материала. Для определения уровня социального интеллекта использовался адаптированный вариант теста Дж. Гилфорда и М. Салливена в адаптации Е.С. Михайловой (Михайлова, 2006). Вербальная и невербальная креативность диагностировалась с использованием кратких вариантов тестов Торренса и Медника (Воронин, Галкина 1994; Воронин, 1994). Креативность оценивалась по нескольким показателям: продуктивность, оригинальность, уникальность и гибкость.

Первоначально был подсчитан индекс сложности и коэффициент дискриминативности для каждого из пунктов теста. Индекс сложности традиционно определялся на уровне 20% и 80%. Его применение показало, что все 34 пункта теста укладываются в заданные границы. При использовании коэффициента дискриминативности сначала были отброшены пункты с отрицательными корреляциями по отношению к суммарному баллу по тесту. Далее были исключены задания методики с минимальными коэффициентами корреляции и повышающими а Кронбаха при их удалении. После четырех циклов исключения наименее подходящих пунктов методики а Кронбаха составил 0,752, а количество пунктов методики сократилось

Диагностика дискурсивных способностей на материале повседневной речи до 17. Ниже приведена финальная таблица статистик соотношения пункта с суммарным баллом (см. таблицу 11). Отобранные пункты вошли в шкалу диагностики дискурсивных способностей, названную тестом дискурсивных способностей (ТДС17). Для вычислений использовался пакет программ IBM SPSS Statistics 19.0.

Как отмечалось выше, в качестве внешнего критерия использовались экспертные оценки преподавателей вузов и учителей, об-

Таблица 11

Статистики соотношения пункта с суммарным баллом для шкалы из 17 пунктов

№ пункта первоначальной шкалы

Среднее шкалы при удалении пункта

Дисперсия шкалы при удалении пункта

Корреляция пункта с суммарным баллом

Квадрат коэффициента множественной корреляции

а Крон-баха при удалении пункта

1

21,67

19,100

0,355

0,400

0,739

5

21,74

19,249

0,364

0,391

0,738

6

21,62

18,972

0,444

0,508

0,732

7

21,75

19,437

0,298

0,352

0,744

8

22,01

19,942

0,248

0,489

0,748

9

21,70

18,848

0,467

0,419

0,730

11

21,82

19,181

0,407

0,554

0,735

13

21,76

19,070

0,371

0,398

0,738

17

21,80

19,753

0,224

0,424

0,751

18

21,61

20,047

0,224

0,418

0,749

20

21,85

19,822

0,265

0,361

0,746

21

21,82

20,350

0,187

0,420

0,752

23

21,63

19,219

0,331

0,462

0,741

26

21,67

19,392

0,388

0,310

0,737

28

22,10

17,991

0,407

0,412

0,734

31

21,83

19,680

0,266

0,361

0,747

34

21,63

18,302

0,465

0,512

0,728

Таблица 12

Оценка валидности методики дискурсивных способностей по внешнему критерию

Статистика

Показатели

1

2

3

4

5

6

sum

тКендалла

ТДС 17

0,47**

0,27**

0,35**

0,46**

0,42**

0,35**

0,39**

Примечание: ** - корреляция значима на уровне 0,01 (двухсторонняя); TDS17 - показатель дискурсивных способностей по шкале из 17 пунктов. Экспертная оценка дискурсивных способностей: 1 - «Поддерживает настроение разговора»; 2 - «Легко общается с людьми разного статуса»;

3 - «Принимает участие в решении групповой задачи»; 4 - «Меняет темп разговора в соответствии с ходом беседы»; 5 - «Адекватен при переписке по электронной почте с преподавателем»; 6 - «Количество интеракций в ходе обучения»; sum - суммарный балл экспертной оценки дискурсивных способностей.

учающих студентов и учеников, принявших участие в исследовании. Ниже приведена таблица корреляций уровня дискурсивных способностей и экспертной оценки их проявлений (см. таблицу 12).

В целом критериальную валидность теста дискурсивных способностей следует признать удовлетворительной. Наиболее связанными с уровнем дискурсивных способностей оказались показатели «Поддерживает настроение разговора» и «Меняет темп разговора в соответствии с ходом беседы». Вероятно, именно эти характеристики на поведенческом уровне репрезентируют концепт «дискурсивные способности». Показатель «Легко общается с людьми разного статуса» оказался ниже вследствие ограниченности ситуаций взаимодействия экспертов и обследуемых. Вероятно, эти ситуации в основном сводились к отношениям «взрослый-ребенок», «старший-младший» и/или «руководитель-подчиненный».

Как отмечалось выше, при составлении методики содержание пунктов отражало 4 типа повседневного дискурса. Воспроизведение этой структуры при обследовании выборки стандартизации позволяет говорить об удовлетворительной содержательной валидности методики. Для оценки этого показателя использовался факторный анализ методом главных компонент с последующим Varimax-вращением. Вклад выделенных факторов в объяснение дисперсии

Таблица 13

Полная объясненная дисперсия

Компонента

Начальные собственные значения

Итого

% дисперсии

кумулятивный % дисперсии

1

3,555

20,910

20,910

2

2,021

11,886

32,796

3

1,677

9,863

42,659

4

1,562

9,187

51,846

5

1,222

7,188

59,034

6

1,043

6,132

65,166

значений представлен в виде таблицы и на графике собственных значений (см. таблицу 13 и рисунок 8).

Интерпретация выделенных факторов позволит понять, насколько эмпирическая структура данных соответствует исходным представлениям о типологии используемых дискурсов обыденных ситуаций. Однако в первую очередь следует определиться с количеством

График собственных значений интерпретируемых факторов

Рис. 8. График собственных значений интерпретируемых факторов. Если использовать критерий «каменистой осыпи» и проанализировать график собственных значений, то, очевидно, следует выделить два фактора и, возможно, добавить еще два при условии их успешной содержательной интерпретации. Если использовать критерий Кайзера и отобрать факторы с собственными значениями, большими 1 (см. таблицу 14), то следует отобрать 6 факторов. Собственно содержательная интерпретация выделенных факторов может быть осуществлена при анализе факторных нагрузок, представленных в таблице 14.

Первый фактор (20,91% дисперсии), исходя из содержания пунктов, интерпретируется следующим образом: это дискурс, разворачивающийся в условиях деловых отношений, независимо от статуса собеседников. Второй фактор (11,88%), существенно менее весомый, чем первый, содержательно можно интерпретировать следующим образом: положительный полюс - дискурс в условиях несоответствия ситуации и привычного для нее дискурса; непривычная, несообразная для привычной ситуации речь (необычные обращения в телефонных разговорах, странные высказывания на интернет-форумах, нетипичный дискурс в общении с близкими людьми); отрицательный полюс - дискурс в условиях полного соответствия ситуации и разворачивающемуся в ней диалогу: деловая ситуация - деловой дискурс (дискурс деловых отношений), комичная ситуация - диалог с элементами юмора, общение по Интернету - специфический лексикон и характерные для данного дискурса обращения. Третий фактор (9,86%) - дискурс в ситуациях сопротивления партнеров по диалогу намерениям говорящего. Четвертый фактор (9,18%) - дискурс в напряженных и неприятных ситуациях, требующих от человека «сохранения своего лица», поддержания status quo. Содержательно интерпретировать остальные факторы не удалось.

Факторный анализ показал, что был воспроизведен только один фактор из a priori определенной структуры повседневного дискурса: дискурс деловых отношений. Вероятнее всего, это явилось следствием ограниченности социального опыта старших школьников и студентов первых курсов. Остальные типы повседневного дискурса не являются определяющими при группировке заданий в ходе выполнения теста дискурсивных способностей. Мы изначально стремились к созданию содержательно однородной однофакторной шкаТаблица 14

Матрица факторных решений для пунктов методики ТДС 17

№ пункта перво-начальной шкалы

Компонента

1

2

3

4

5

6

1

0,782

-0,108

0,203

0,035

-0,073

0,048

5

0,243

0,694

-0,049

0,047

-0,004

0,223

6

0,037

0,250

0,332

0,105

0,702

0,099

7

0,581

0,197

-0,143

-0,011

0,134

0,107

8

0,028

0,755

-0,159

-0,011

0,172

0,157

9

0,050

0,257

0,305

0,103

0,082

0,704

11

0,164

-0,136

0,788

0,076

0,230

0,098

13

0,123

0,167

-0,013

-0,018

0,230

0,759

17

-0,035

-0,073

0,775

0,118

-0,021

0,029

18

-0,099

0,065

0,098

0,827

0,177

-0,086

20

0,181

-0,072

-0,063

-0,023

0,776

0,230

21

-0,029

-0,049

0,090

0,760

-0,297

0,273

23

-0,051

0,573

0,536

0,091

-0,259

0,183

26

0,321

0,353

0,069

0,529

0,180

-0,213

28

0,558

0,063

0,458

-0,158

0,096

0,106

31

0,436

-0,370

-0,012

0,467

0,062

0,270

34

0,636

0,390

-0,042

0,089

0,258

-0,053

Примечание: факторный анализ произведен методом главных компонент с последующим Varimax-вращением и нормализацией Кайзера; вращение сошлось за 9 итераций.

лы, и содержательное выделение одного фактора указывает на то, что ситуации, связанные с дискурсом деловых отношений у школьников и студентов, диагностически более показательны и информативны, нежели остальные ситуации, в которых разворачивается повседневный дискурс. Тем не менее, все изначально предполагаемые типы повседневного дискурса представлены в пунктах методики дискурсивных способностей (см. таблицу 15). Таким образом,

Таблица 15

Корреляции т Кендалла показателя дискурсивных способностей с различными типами интеллекта и креативности

Исследуемые показатели

ТДС 17

Социальный интеллект: Истории с завершением

0,31**

Социальный интеллект: Группы экспрессии

0,45**

Социальный интеллект: Вербальная экспрессия

0,19**

Социальный интеллект: Истории с дополнением

0,29**

Социальный интеллект: Композитная оценка

0,34**

КОТ: Вербальный IQ

0,55**

КОТ: Невербальный IQ

0,04

КОТ: Суммарная оценка IQ

0,22**

КОТ: Просмотренные пункты

0,23**

Креативность (по Меднику): Продуктивность

0,23**

Креативность (по Меднику): Оригинальность

0,15**

Креативность (по Торренсу): Беглость

0,16**

Креативность (по Торренсу): Оригинальность

0,17**

Креативность (по Торренсу): Разработанность

0,21**

Креативность (по Торренсу): Гибкость

0,11*

Примечание: ** - корреляция значима при р<0,01; * - корреляция значима при р<0,05; ТДС 17 - показатель дискурсивных способностей по шкале из 17 пунктов.

первоначальная структура повседневного дискурса воспроизведена лишь частично, а исходная модель тестовой деятельности требует изучения различных видов профессиональной деятельности, в которых востребованы дискурсивные способности.

Для оценки конвергентной и дискриминантной валидности методики было проведено одновременное тестирование различных типов интеллекта и креативности: социального интеллекта (4 фактора социального интеллекта по тесту Дж. Гилфорда и М. Салливе-на), общего, вербального и невербального интеллекта (4 показателя краткого отборочного теста (КОТ), вербальной креативности (2 поДиагностика дискурсивных способностей на материале повседневной речи казателя по тесту Медника) и невербальной креативности (4 показателя по тесту Торренса). В качестве меры соответствия между показателями теста дискурсивных способностей и показателями интеллекта и креативности использовался коэффициент корреляции т Кендалла. В таблице 15 представлены полученные результаты.

Тест дискурсивных способностей - методика, выявляющая вербальные особенности когнитивной сферы. Соответственно, ее корреляции с «вербальными» показателями тестов интеллекта и креативности должны быть выше, чем с «невербальными». Корреляция показателей дискурсивных способностей с вербальным интеллектом значимы на уровне р<0,01, а корреляция с невербальным интеллектом отсутствует. Самая высокая корреляция среди всех показателей обнаруживается между вербальным интеллектом и дискурсивными способностями. Анализ корреляций социального интеллекта показывает обратную тенденцию. При этом все корреляции между показателями дискурсивных способностей и показателями социального интеллекта положительные и значимые. Корреляции с показателями креативности также значимые и положительные. Единственный показатель, не связанный с дискурсивными способностями, - невербальный интеллект. Анализ факторной структуры дискурсивных способностей, факторов интеллекта и креативности позволил выделить 5 основных факторов (см. таблицу 16) - социальный интеллект, невербальная креативность, общий интеллект, вербальная креативность и дискурсивные способности. Полученная структура факторов в общих чертах воспроизводит структуру познавательных способностей, в которую также входят показатели дискурсивных способностей, необходимые для освоения и понимания иностранного языка (Кочкина, 2009). В этом исследовании было выделено 4 фактора: фактор общего интеллекта; фактор общего интеллекта и лингвистических способностей; фактор социального интеллекта; фактор дискурсивных способностей и социального интеллекта. При этом дискурсивные способности оказались значимо связанными с общим интеллектом, вербальным интеллектом и социальным интеллектом (шкала «вербальная экспрессия»).

Ретестовая надежность методики исследовалась при повторном тестировании школьников г. Москвы на выборке меньшей, чем в первом исследовании. В тестировании участвовало 115 человек - старТаблица 16

Матрица факторных решений для показателей интеллекта, креативности и дискурсивных способностей

Исследуемые показатели

Компонента

1

2

3

4

5

ТДС 17

0,274

0,254

-0,011

0,137

0,755

Соц. IQ: Истории с завершением

0,863

0,096

0,104

0,058

0,189

Соц. IQ: Группы экспрессии

0,624

0,113

0,024

0,027

0,538

Соц. IQ: Вербальная экспрессия

0,485

-0,172

0,243

0,455

0,199

Соц. IQ: Истории с дополнением

0,822

0,077

0,099

0,127

0,087

Соц. IQ: Композитная оценка

0,911

0,034

0,148

0,111

0,279

КОТ: Вербальный IQ

0,208

0,038

0,391

-0,015

0,776

КОТ: Невербальный IQ

0,178

0,097

0,903

0,022

-0,155

КОТ: IQ

0,247

0,090

0,866

0,007

0,347

КОТ: Просмотренные пункты

-0,113

0,189

0,684

-0,091

0,432

Креативность (по Меднику): Продуктивность

0,122

0,098

-0,252

0,714

0,129

Креативность (по Меднику): Оригинальность

-0,037

0,071

0,183

0,785

0,019

Креативность (по Торренсу): Беглость

0,251

0,888

-0,038

0,134

0,094

Креативность (по Торренсу): Оригинальность

0,099

0,740

0,291

0,313

0,104

Креативность (по Торренсу): Разработанность

0,684

0,378

-0,051

-0,180

-0,124

Креативность (по Торренсу): Гибкость

0,018

0,900

0,136

0,042

0,157

Примечание факторный анализ произведен методом главных компонент с последующим Varimax-вращением и нормализацией Кайзера; вращение сошлось за 7 итераций.

шеклассников школы № 539 и гимназии № 1503. Повторное тестирование осуществлялось через 2 месяца после первого тестирования в группах от 13 до 30 человек. Корреляция Пирсона между первым и повторным тестированием составила г=0,756.

По итогам разработки теста дискурсивных способностей на материале родного языка (русского) можно сказать следующее: дискурсивные способности были определены как способности к освоению и реализации дискурсивных практик и эмпирически верифицированы как операционализированная часть коммуникативной компетенции, которая позволяет человеку инициировать, поддерживать, развертывать и завершать процесс общения, используя при этом языковые средства, соответствующие ситуации. Предполагалось, что разнообразные типы обыденного дискурса позволят надежно и достоверно их диагностировать.

При разработке методики использовались наиболее распространенные типы городского обыденного дискурса. Диагностически наиболее значимыми оказались следующие: взаимодействие с незнакомыми и случайными знакомыми, взаимодействие с близкими и знакомыми людьми, деловые отношения, интернет-дискурс. Именно эти типы дискурса были использованы для создания русскоязычной версии методики диагностики дискурсивных способностей.

Методика диагностики дискурсивных способностей ТДС 17 позволяет диагностировать уже сформировавшиеся дискурсивные способности. В ходе проведенного исследования получены высокие показатели ее основных психометрических характеристик - надежности, валидности, согласованности и т.д.- на выборке старших школьников и студентов. Она может быть использована для профориентации и профотбора в различных сферах профессиональной деятельности, предполагающих активное вербальное взаимодействие и оценку его успешности (ведение переговоров, улаживание конфликтов, эффективное установление контактов между людьми, быстрые взаимодействия с представителями различных социальных и языковых групп, составление и адекватное понимание устных и письменных обращений и т.д.).

 
Посмотреть оригинал
< Пред   СОДЕРЖАНИЕ ОРИГИНАЛ   След >