Таким образом, несмотря на небольшой объем тренировочного корпуса были получены неплохие результаты. При соотношении 42% к 58% программа в среднем правильно классифицирует 67,3%, при равном соотношении - 69,2% записей из тестовой выборки. Это говорит о том, что тренировочный корпус был хорошо сформирован, а составляющие тональный словарь языковые единицы относительно полно описывают языковую ситуацию на блог-платформе «Живой Журнал».
Заключение
Цель данной работы заключалась в разработке метода автоматического определении вербальной агрессии в блогах Интернет-пользователей «Живого Журнала». Цель достигнута за счет реализации таких задач, как сбор и анализ корпуса записей на предмет содержания агрессии; анализ контекста и изучение лингвистических и экстралингвистических условий проявлений агрессии; составление тонального словаря и его проверка путем реализации наивного байесовского классификатора и подсчета метрик качества.
В ходе выполнения данной работы были получены следующие результаты. Термин вербальная агрессия часто определяют через смежный с ним термин толерантность, который приобретает различные оттенки значения в зависимости от языка и исторического опыта народов.
На основе классификации, предложенной социологом М.Мацковским, были даны определения понятию «толерантность» в разных сферах его использования. В пример были приведены крайние формы проявления интолерантности.
Толерантности противопоставляется интолерантность, под которой понимают проявление нетерпимости по отношению к людям на основании самых разнообразных признаков. Во всех дискурсах при описании данного явления доминирует сема «непредвзятость».
Кроме того, были изучены работы исследователей, изучавших проблематику теории коммуникации и особенности Интернет-коммуникации. В ходе данной работы были выявлены особенности Интернет-коммуникации, характерные для блогосферы.
Далее были рассмотрены работы, в которых подробно рассматривались особенности корпусной лингвистики, ее методология, а также возможности применения методов корпусной лингвистики для изучения и интерпретации статистических закономерностей лингвистических явлений. Наконец был изучен ряд исследований, авторы которых занимались определением тональности текстов.
В данной работе при помощи специальной программы, которая автоматически скачивает тексты из Интернета, был создан корпус из 1400 записей на русском языке с блог-платформы «Живой Журнал». Данные записи были подвержены обработке. Все тексты были токенизированы, слова в них приведены к нижнему регистру. Помимо этого, для улучшения качества корпуса и работы алгоритма классификации из текстов были удалены стоп-слова, а все остальные слова, несущие смысловую нагрузку, были лемматизированы.
Далее весь корпус был разделен на тренировочный и тестовый корпус: 1120 записей вошли в состав тренировочного корпуса, 280 записей - в тестовый корпус. Все записи предварительно были маркированы как положительные или те, в которых не было обнаружено вербальной агрессии, и как отрицательные, т.е., в которых были обнаружено данное явление. После этого был составлен тональный словарь на основе содержавшихся в корпусе языковых единиц, через употребление которых в записях можно обнаружить вербальную агрессию. Это было достигнуто путем анализа частотного словаря, составленного корпусным менеджером AntConc, и изучения ближайшего контекста данных языковых единиц.
Качество полученного словаря было проверено в ходе работы наивного байесовского классификатора на материале тестового корпуса, в состав которого вошло 280 новых записей. В результате работы данного классификатора было правильно размечено 67,3% записей при ожидаемом соотношении 42% «отрицательных» записей к 58% «положительных», и 69,2% записей при их ожидаемом равном соотношении, что говорит о хорошем качестве составленного тонального словаря. Полученные результаты, а особенно составленный тональный словарь могут в дальнейшем быть использованы для определения вербальной агрессии не только в блогосфере, но и в других средах коммуникации.
Библиографический список
1. Ананьина, В.Т. Влияние межнациональных семей на этническую толерантность в российском обществе// Уральский федеральный университет им. первого президента Б.Н.Ельцина - Екатеринбург - 2015.
2. Асмолов, А.Г., Солдатова, Г.У., Шайгерова, Л.А. О смыслах понятия толерантность // Век толерантности. Научно-публицистический вестник. - 2001. - №1-2. - с.8-19.
3. Басовская, Е.Н. Творцы черно-белой реальности: о вербальной агрессии в средствах массовой информации//Критика и семиотика. Вып 7. - 2004 г. - с.257-263
4. Гвишиани, Н.Б. Практикум по корпусной лингвистике: Учеб. пособие по английскому языку. - М.: Высшая школа, 2008.
5. Гнатюк, О. Л. Основы теории коммуникации. 2- изд.. М.:КНОРУС, 2012. 256 с.
6. Горина, О.Г. Применение методов корпусной лингвистики для определения контекстно-специфических слов и коллокаций / Вестник Ленинградского государственного университета им. А.С.Пушкина. - 2011 г. - с.27-36
7. Декларация принципов толерантности. Утверждена резолюцией 5.61 генеральной конференцией ЮНЕСКО от 16 ноября 1995 года.
8. Дрынкина, Т.И. Феноменология толерантности [Текст] / Т.И.Дрынкина // Толерантность в современном обществе: опыт междисциплинарных исследований: сборник научных статей / под науч. ред. М.В,Новикова , Н.В.Нижегородцевой. - Ярославль: Изд-во ЯГПУ. - С. 52-54
9. Евстафьева, А.В. Адресант и адресат «языка вражды» в текстах средств массовой информации [Текст] / А.В. Евстафьева // научный журнал «Вестник Тюменского государственного университета»/ под науч. ред. Н.Н.Белозерова. - Тюмень: Изд-во ТюмГУ. - С.125-134
10. Евстафьева, А.В. «Язык вражды» в средствах массовой информации: лингвистические и экстралингвистические факторы функционирования //Автореф. дисс… канд. фил. наук. - Тамбов. 2009
11. Захаров, В.П. Корпусная лингвистика. СПб: СПб. гос. ун-т., 2005. - 48 с.
12. Захаров, В.П., Богданова, С.Ю. Корпусная лингвистика: учебник для студентов гуманитарных вузов. - Иркутск: ИГЛУ, 2011. - 161 с.
13. Иркаев, А.Г. Толерантность, как мировоззренческая устойчивость / А.Г.Иркаев // Интернет-журнал «Науковедение» №4 - 2011.
14. Иссерс. О.С., Рахимбергенова, М.Х. Языковые маркеры этнической ксенофобии (на материале российской прессы) [Текст] / О.С.Иссерс, М.Х.Рахимбергенова // Политическая лингвистика. - Вып. 3 (23). - Екатеринбург, 2007. - С.90-96
15. Каблуков, Е.В. Сложный диалогический текст медиадискурса как объект лингвистического исследования [Текст] / Е.В.Каблуков // Современный русский язык: динамика и функционирование: Материалы Всерос. науч. - практ. Интернет - конф. Волгоград, 8-12 декабря 2008 г. / отв. ред. Ю.В.Федосов. Волгоград: Изд-во ВГПУ «Перемена», 2009 - С.32-38
16. Кирилюк, О.М. Содержание понятия «толерантность» [Текст] / О.М.Кирилюк // Толерантность в современном обществе: опыт междисциплинарных исследований: сборник научных статей / под науч. ред. М.В,Новикова , Н.В.Нижегородцевой. - Ярославль: Изд-во ЯГПУ. - С. 57-60
17. Кольцова, Е.Ю. Измерение толерантности [Текст] / Е.Ю.Кольцова, Е.Е.Таратута // Журнал социологии и социальной антропологии. - 2003. - №4. - С.113-130. - ISSN 1029-8053
18. Коновалов, В.Н. «Словарь по политологии». Подготовлен кафедрой политологии РГУ. М.: РГУ, 2010 г. - 292 с.
19. Корнилова, Т.В., Чумакова, М.А. Шкалы толерантности и интолерантности к неопределенности в модификации опросника С.Бандера [Текст] // Экспериментальная психология. - 2014. - Т.7. №1. - С.92-110
20. Куликова, А.В. Особенности Интернет-коммуникаций / Вестник Нижегородского университета им. Н.И.Лобачесвкого. Серия: Социальные науки. №4 (28). 2012., с 19-24.
21. Куликова, Е.В. Языковая специфика рекламного дискурса [Текст] / Е.В.Куликова // Вестник Нижегородского университета им. Н.И.Лобачевского. - Сер. Филология. Искусствоведение. - 2008. - №4. - С.197-205
22. Лекторский, В.А. «О толерантности, плюрализме и критицизме» [Текст] / В.А.Лекторский// Вопросы философии. - 1997. - №11. - С.46-54
23. Лукашевич, Н.В. Тезаурусы в задачах информационного поиска. М.: Изд-во Московского университета, 2011.
24. Максимова, О.Б. Язык в Интернет-коммуникации: общие закономерности и национально-культурные особенности (на материале русского и английского языков) / Вестник РУДН. Серия: Теория языка. Семиотика. Семантика. №3. - 2010. - с. 74 - 90.
25. Маслова, В. А. Современные направления в лингвистике. М.: Академия - 2008 г. - 272 с.
26. Мацковский М.С. Толерантность как объект социологического исследования // Век толерантнос- ти: Научно-публицистический вестник. - Вып. 3-4;
27. Михайлова, О.А. Лингвокультурологические аспекты толерантности: [учеб.-метод. пособие] / О.А.Михайлова; М-во образования и науки Рос. Федераци, Урал. федер. ун-т. - Екатеринбург : Изд-во Урал. ун-та, 2015 - 124 с
28. Мехонина, Е.Н. О понятии коммуникативно-речевой категории и методике ее описания [Текст] / Е.Н.Мехонина // Филология в XXI веке: методы, проблемы, идеи: материалы Всерос. науч. конф. Пермь, 8 апреля 2013 г. / отв. ред. Н.В.Соловьева; Перм. гос. Нац. Исслед. ун-т. - Пермь, 2013 - С.231-237
29. Можгинский, Ю.Б. Агрессивность детей и подростков: распознавание, лечение, профилактика [Текст]/ Ю.Б.Можгинский - М.: Когито-Центр, 2006 - 181 с.
30. Морозова, О.Н. Особенности Интернет-коммуникации: определение и свойства / Вестник Ленинградского университета им. А.С.Пушкина - 2010. - с. 150 - 157.
31. Нартдинова, С.С. Толерантность как проблема воспитания [Текст]// Закономерности и тенденции развития науки в современном обществе: сборник статей Международной научно-практической конференции. 29-30 марта 2013г.: Ч.2 / отв. ред. Л.Х. Курбанаева. - Уфа: РИЦ БашГУ, 2013. - С.31-37
32. Паламарчук, Н.А. Способы выражения вербальной агрессии в текстах интернет-комментариев // Актуальные проблемы теоретической и прикладной лингвистики: сб. науч. тр./под ред. ЕП Сосниной.-Ульяновск: УлГТУ. 2011. С. 19-28.
33. Рыков, В.В. Корпус текстов как реализация объектно-ориентированной парадигмы // Труды Международного семинара Диалог-2002. - М.: Наука, 2002.
34. Сагалакова, Г.А. Проблема толерантности и интолерантности в современной России // Изв. АлтГУ. - 2008. - № 4/5. - С.269-276
35. Сагитова, Л., Шайхитдинова, С., Ходжаева, Е. Опыт разработки контент-аналитической методики выявления толерантности/интолерантности в печатных текстах СМИ // Перекрестки № 3-4/2009. Журнал исследований восточноевропейского Пограничья. С. 173-192.
36. Семашко, М.А. Развитие термина «толерантность» в гуманитарных науках / М.А.Семашко // Электронный научно-педагогический журнал. - 2007.
37. Солынин, Н. Э. Основные подходы к определению понятия «толерантность» / Ярославский педагогический вестник. Психолого-педагогические науки научный журнал [Текст]. - Ярославль: Изд-во ЯГПУ, 2009. - № 4.- Том II (Психолого-педагогические науки). - 276 с.
38. Сосковец, Л.И. Религиозная толерантность и свобода совести: История и теория вопроса. // Известия Томского политехнического университета. - Т.307. - №2. - 2004 - С.177-180
39. Стернин, И.А., Шилихина, К.М. Коммуникативные аспекты толерантности. Воронеж. 2000.
40. Таюпова, О.И., Юсупова, Л.Г. Лингвистические аспекты теории коммуникации / Вестник Башкирского университета, Т.19 №2 - 2014 г. - с. 561 - 564
41. Тихомирова, И.Е. Содержание понятия толерантность [Текст] / И.Е.Тихомирова // Толерантность в современном обществе: опыт междисциплинарных исследований: сборник научных статей / под науч. ред. М.В,Новикова , Н.В.Нижегородцевой. - Ярославль: Изд-во ЯГПУ. - С.79-81
42. Фонталин, Л.Н., Певницкий, Л.А. Иммунологическая толерантность, М., 1978
43. Форсова, В.В. О религиозных корнях толерантности [Текст]// Социологические исследования. - 2004. - №1. - С.54-61
44. Хамутовская, С.В. Политическая толерантность: концептуальные понятия [Текст] / С.В.Хамутовская // Социологический альманах / под науч. ред. И.В.Котлярова - №3, 2012. - С.223-230
45. Хомяков, М.Б. Философские и лингвокультурологические проблемы толерантности: Коллективная моногр./ Отв. ред. Н.А.Купина и М.Б.Хомяков. - М.:ОЛМА-ПРЕСС, 2005. - 542 с. - (Золотая коллекция)
46. Шарков, Ф.И. Коммуникология: основы теории коммуникации / Шарков Ф.И., - 4-е изд. - М.:Дашков и К, 2017. - 488 с.: ISBN 978-5-394-02089-6
47. Шестакова, А.Н. Особенности выявления оскорблений при лингвистической экспертизе текстов СМИ // Актуальные проблемы теоретической и прикладной лингвистики: сб. науч. тр./под ред. ЕП Сосниной.-Ульяновск: УлГТУ. 2011. С. 77-80.
48. Щербинина, Ю.В. Вербальная агрессия [Текст]/ Ю.В.Щербинина - М.: УРСС, 2006 - 360 с.
49. Юсупова, Л. Г. Развитие готовности студентов неязыковых специальностей вуза к межкультурной коммуникации: дис. … канд. пед. наук. Челябинск, 2008. 177 с.
50. Якимова, Н.С. Вербальная агрессия как актуальный феномен современного общества//Вестник КемГУ. Вып.1 - 2011 г. - с.184-187
51. Almatarneh S., Gamallo P. «Automatic Construction of Domain-Specific Sentiment Lexicons for Polarity Classification» // 15th International Conference on Practical Applications of Agents and Multi-Agent Systems, Porto (Portugal), Fernando De la Prieta, Zita Vale, Luis Antunes, Tiago Pinto, Andrew Campbell, Vicente Juliбn, Antonio J.R. Neves, Marнa N. Moreno, 2017.
52. Berggren Niclas, Elinder Mikael «Is Tolerance Good or Bad for Growth?».// Public Choice, Vol.150, No.1/2: Springer, Jan. 2012, pp. 283-308
53. Biber D., Conrad S., Reppen R. «Corpus Linguistics: Investigating language structure and use» / Cambridge: Cambridge University Press. 1998. 300 p. ISBN0521499577.
54. Brody S.,Elhadad N. «Detecting salient aspects in online reviews of health providers» // AMIA Annual Symposium, 2010.
55. Carter J.Scott «A Cosmopolitan Way of Life for All? A Reassessment of the Impact of Urban and Region on Racial Attitudes From 1972 to 2006»// Journal of Black Studies, Vol.40, No.6: Sage Publications, Inc., July 2010, pp. 1075-1093