Реферат по предмету "Разное"


Авторский инвариант русских литературных текстов

ДОПОЛНЕНИЕ 3. В.П.Фоменко, Т.Г.Фоменко АВТОРСКИЙ ИНВАРИАНТ РУССКИХ ЛИТЕРАТУРНЫХ ТЕКСТОВ. ПРИЛОЖЕНИЕ: КТО БЫЛ АВТОРОМ "ТИХОГО ДОНА"? Комментарий А.Т.Фоменко (Москва, Московский государстьвенный университет, механико-математический факультет). Вниманию читателя предлагается исследование, выполненное моими родителями Валентиной Поликарповной Фоменко и Тимофеем Григорьевичем Фоменко в 1974-1981 годах. В полном объеме их работа публикуется здесь впервые. В краткой форме она вошла в 1983 году в сборник "Методы количественного анализа текстов нарративных источников", Москва, 1983, Академия Наук СССР, Ин-т Истории СССР, с.86-109. Главным результатом настоящей работы является обнаружение "авторского инварианта" для русских литературных текстов. Он позволяет различать некоторых авторов и оказывается полезным при решении проблем, связанных с плагиатом. Этот результат был получен на основе некоторой общей идеи - статистического анализа функций объема для нарративных текстов. Функции объема были введены в работе [р19], где были также предложены некоторые новые эмпирико-сатистические модели анализа информации в нарративных текстах. Развитие этих идей можно найти также в работе [р20]. Настоящая работа находится, на первый взгляд, несколько в стороне от исследований по основам древней хронологии. Однако, этот материал показывает - как могут ЭМПИРИКО-СТАТИСТИЧЕСКИЕ МЕТОДЫ использоваться при решении не только хронологических, но и других смежных проблем, например, - при установлении авторства письменного документа. А поскольку центральным стержнем нашего анализа письменной истории являются эмпирико-статистические методы, мы и решили познакомить читателя с этим исследованием. Тем более, что проблема установления авторства в современной и в древней литературе является чрезвычайно актуальной и любые новые методы в этой области могут оказаться полезными.^ 1. ВВЕДЕНИЕ. ВКРАТЦЕ ОБ ИСТОРИИ ПРОБЛЕМЫ. В литературе, истории, лингвистике часто возникает вопрос об атрибуции литературных произведений - действительно ли они написаны одним автором. Действительно ли диалоги Платона написаны одним человеком? Правда ли, что пьесы Шекспира - творения одного гения? Или же они написаны разными людьми? Кто в действительности скрывается под именем "Шекспир"? Специальный интерес приобретает эта проблема, когда возникает подозрение в плагиате. Особое звучание задачи такого сорта приобретают при исследовании ДРЕВНИХ текстов, данные об авторах которых утрачены или сомнительны. Укажем лишь на некоторые подходы к решению таких задач. Например, в работе В.Фукса [р1] изучался вопрос об авторстве некоторых древних текстов на основе статистического анализа различных ГРАММАТИЧЕСКИХ структур их языка. Много исследований посвящено обнаружению количественных закономерностей, позволяющих различать между собой РАЗНЫЕЛИТЕРАТУРНЫЕ ЖАНРЫ - поэзию, драматургию, публицистику и пр. [р2]. Попытка использования точных математических приемов для решения проблемы плагиата изложена, например, в книге [р10]. Проблеме обнаружения авторских инвариантов посвящена значительная научная литература. Так например, структура языкаразличных авторов изучалась с помощью отдельных распорядительныхслов, в частности, предлога "в", частицы "не" [р3], или при помощидлины предложений и слов [р4]. Однако, как показали эксперименты,использование лингвистических спектров ОТДЕЛЬНЫХ распорядительныхслов не позволяет обнаружить устойчивые инварианты. На это указалеще в 1916 году академик А.А.Марков [р5], отметивший что прибольших объемах выборок результаты такого типа должны "колебатьсяоколо среднего числа, подчиняясь общим законам языка", чтоестественно затрудняет различение авторов. Полезный подход продемонстрирован в ряде работ В.Фукса, где каждому автору сопоставляются такие его характеристики, каксреднене количество слогов и среднее количество слов впредложении. Этот прием позволяет изобразить текст (автора)точкой на плоскости в случае использования двух параметров, илиже точкой в многомерном пространстве (если число параметроввозрастает). Интересные исследования ведутся и в отечественной филологии (см., например, [р6]-[р9]). Следует отметить общую характерную особенность этих и многих других (не упомянутых нами здесь) исследований. Обычно изучаются индивидуальные количественные параметры текстов и путем их сравнения ученые старались выявить "значимые различия", опираясь на которые можно было бы отличить друг от друга разных авторов. Однако главным вопросом здесь является - какие различия следует считать значимыми, а какие - нет. Тут открывается простор для субъективизма. И здесь коренятся главные трудности применения статистических методов к задачам такого сорта.^ 2. ЧТО ТАКОЕ АВТОРСКИЙ ИНВАРИАНТ? Под АВТОРСКИМ ИНВАРИАНТОМ мы понимаем количественную характеристику литературных текстов (некий параметр), который а) однозначно характеризует своим поведением произведения одного автора или небольшого числа "близких авторов", и б) принимает существенно разные значения для произведений разных групп авторов. Желательно, чтобы число "разных групп" было достаточно велико, и чтобы каждая группа объединяла относительно мало похожих, близких по стилю авторов. Однако многообразие грамматических структур, участвующих в формировании литературных текстов, сильно затрудняет поиски такихинвариантов. Уже простые вычислительные эксперименты показывают,что обнаружение числовых характеристик, различающих разныхавторов, - сложная задача. Дело в том, что когда человек пишеткнигу, то существенную роль играют не только подсознательные, нои сознательные факторы. Например, частота употребления автором РЕДКИХ И ИНОСТРАННЫХ СЛОВ может, конечно, служить неким показателем его стиля, эрудиции. Однако этот показатель ЛЕГКО КОНТРОЛИРУЕТСЯ автором на СОЗНАТЕЛЬНОМ уровне, поскольку редкие и иностранные слова вставляются в текст нечасто и каждый раз автор специально отмечает про себя: "здесь я вставляю иностранное или редкое слово". В результате, как неопровержимо свидетельствуют конкретные подсчеты, использовать эту числовую характеристику в качестве авторского инварианта НЕЛЬЗЯ. Она контролируется автором, "скачет" и писатель может легко менять ее от произведения к произведению. Отсюда видно, что количественная оценка индивидуальных отличительных особенностей автора - весьма нетривиальная задача.Сформулируем точнее - какими свойствами должен обладать авторский инвариант. Искомая числовая характеристика должна удовлетворять следующим естественным требованиям. 1) Она должна быть достаточно "массовой", интегральной, чтобы СЛАБО КОНТРОЛИРОВАТЬСЯ автором на сознательном уровне. Другими словами, она должна быть его "бессознательным параметром", коренящимся настолько глубоко, что автор даже не задумывается о нем. А если бы даже задумался, то не смог бы долго его контролировать и в результате довольно быстро вернулся бы в прежнее устойчивое и ТИПИЧНОЕ для него состояние. 2) Искомый параметр должен сохранять "постоянное значение" для произведений данного автора. То есть, иметь небольшоеотклонение от среднего значения (слабо колебаться) на протяжениивсех его книг. Именно это свойство и позволяет говорить, чтоданный параметр является ИНВАРИАНТОМ. 3) Наконец, параметр должен уверенно различать между собой разные группы писателей. Другими словами, должно существоватьдостаточное число авторских групп, заметно отличающихся друг отдруга значениями инварианта. Третье условие важно. Ведь может случиться так, что некий параметр окажется слабо колеблющимся вдоль произведенийкаждого отдельного писателя, однако в то же время принимает ОДНО И ТО ЖЕ ЗНАЧЕНИЕ, будучи вычислен для РАЗНЫХ авторов. Другими словами, он не позволяет различать писателей.^ ТОЛЬКО СОЧЕТАНИЕ ВСЕХ ТРЕХ ПЕРЕЧИСЛЕННЫХ УСЛОВИЙ ПОЗВОЛЯЕТ ГОВОРИТЬ, ЧТО МЫ ОБНАРУЖИЛИ АВТОРСКИЙ ИНВАРИАНТ. 3. НАШ ПОДХОД. ВЫБОРКИ И ШАГИ, ЭВОЛЮЦИЯ ПАРАМЕТРА ВДОЛЬ ТЕКСТА. Пусть в нашем распоряжении оказалось какое-то количество произведений одного писателя. Для удобства упорядочим иххронологически (т.е. в порядке написания) и для краткости назовемполучившуюся совокупность - ТЕКСТОМ ДАННОГО АВТОРА. Такимобразом, текст автора (в нашем определении) может состоять изнескольких различных произведений - романов, повестей, рассказови т.п. Выделим теперь из этого текста отдельные фрагменты - выборки одинакового объема, т.е. состоящие из одного и того же(фиксированного заранее) количества слов. Это количество словестественно назвать ОБЪЕМОМ ВЫБОРКИ. Эти равновеликие (равные по объему) выборки мы будем выделять из текста ЧЕРЕЗ РАВНЫЕ ИНТЕРВАЛЫ, т.е. таким образом,чтобы каждые две соседние выборки были отделены друг от другапримерно одним и тем же количеством слов. Это "расстояние",интервал между соседними выборками мы назовем ШАГОМ. См. рис.Доп-3.1. Объем выборок и их шаг можно варьировать в зависимости от поставленных задач. Итак, последовательно двигаясь по тексту одного автора, мы через каждые, например, 10 страниц стандартного книжного текстабудем делать выборки одного и того же объема, например, в 2000слов. Чем длиннее исследуемый текст, тем больше выборок мы сможемсделать. Для коротких произведений число выборок будет невелико,что усложняет анализ, делает результаты неустойчивыми. Пусть теперь мы избрали какой-либо лингвистический параметр, например частоту употребления писателем предлога "в". Можно изучить эволюцию этого параметра вдоль всего текста, состоящего,быть может, из нескольких отдельных произведений, выстроенныхнами в ряд. Для этого сделаем последовательные выборки иподсчитаем для каждой из них значение интересующего наслингвистического параметра. В результате для каждой выборки(порции) получим свое число. От выборки к выборке оно будет,вообще говоря, меняться. Построим график, отложив по горизонталицелые числа 1,2,3,..., являющиеся номерами последовательныхвыборок, а по вертикали - значения изучаемой нами лингвистическойхарактеристики. В результате, эволюция данного параметра вдоль всего исследуемого текста изобразится некоторой ломаной линией. Следовательно, мы представили каждого писателя не точкой на плоскости или в пространстве, как это делалось, например, вработах [р1],[р2], а графиком - ломаной линией. Она нагляднопоказывает поведение исследуемого параметра вдоль произведенийданного автора. Оказывается, такие графики очень удобны припоиске авторских инвариантов. В самом деле, теперь задача можетбыть переформулирована так. Требуется найти такой лингвистический параметр и такой оптимальный объем выборок, чтобы соответствующие им графикиизображались бы для каждого автора ПРАКТИЧЕСКИ ГОРИЗОНТАЛЬНЫМИЛИНИЯМИ - "ПРЯМЫМИ", т.е. слабо колеблющимися ломаными. Другими словами, это будет означать, что числовые значения найденного инварианта мало отклоняются от своего среднегозначения вдоль произведений каждого отдельного автора. Этоявление - сглаживание ломаной кривой и ее стремление кгоризонтальной прямой - назовем СТАБИЛИЗАЦИЕЙ лингвистическогопараметра. Однако одного факта стабилизации еще недостаточно, чтобы можно было объявить данный параметр - авторским инвариантом. Совершенно необходимо, чтобы стабилизировавшиеся графики (т.е. практически горизонтальные прямые), отвечающие разным группам писателей, ЗНАЧИТЕЛЬНО ОТЛИЧАЛИСЬ бы друг от друга по высоте. То есть, они должны лежать на существенно разных уровнях. Напомним еще раз, что иногда "горизонтальные прямые", отвечающие разным авторам, могут оказаться близкими, лежащими на одном уровне. В этих случаях значения авторских инвариантов близки. Мы отнесем к одной группе писателей с близкими значениями параметров. Чтобы авторский инвариант был действительно эффективен, он должен разделить совокупность всех писателей на несколько групп с существенно разными значениями инварианта. Если значения авторского инварианта для двух сравниваемых текстов оказываются близкими, отсюда нельзя делать заключение об их принадлежности одному писателю. Ясно, что априори само существование таких замечательных лингвистических инвариантов ниоткуда не следует. Для их выявлениятребуется обширный вычислительный эксперимент. И такойэксперимент был нами проведен на протяжении нескольких лет.Перейдем к изложению результатов.^ 4. ПОСТАНОВКА ЭКСПЕРИМЕНТА. СПИСОК ИССЛЕДОВАННЫХ НАМИ ПАРАМЕТРОВ. Для обнаружения "бессознательного параметра" - авторского инварианта, слабо или вообще не контролируемого писателями, мы изучили следующие количественные характеристики текстов. 1) ДЛИНА ПРЕДЛОЖЕНИЙ, т.е. среднее число слов в предложении (подсчитанное для каждой выборки). 2) ДЛИНА СЛОВ, т.е. среднее количество слогов в слове, подсчитанное для каждой выборки. 3) ОБЩАЯ ЧАСТОТА УПОТРЕБЛЕНИЯ СЛУЖЕБНЫХ СЛОВ - ПРЕДЛОГОВ, СОЮЗОВ, ЧАСТИЦ, т.е. процентное содержание служебных слов в каждой выборке. 4) ЧАСТОТА УПОТРЕБЛЕНИЯ СУЩЕСТВИТЕЛЬНЫХ, т.е. их процентное содержание в каждой выборке. 5) ЧАСТОТА УПОТРЕБЛЕНИЯ ГЛАГОЛОВ, т.е. их процентное солержание в каждой выборке. 6) ЧАСТОТА УПОТРЕБЛЕНИЯ ПРИЛАГАТЕЛЬНЫХ (в процентах). 7) ЧАСТОТА УПОТРЕБЛЕНИЯ ПРЕДЛОГА "В" (в процентах). 8) ЧАСТОТА УПОТРЕБЛЕНИЯ ЧАСТИЦЫ "НЕ" (в процентах). 9) КОЛИЧЕСТВО СЛУЖЕБНЫХ СЛОВ В ПРЕДЛОЖЕНИИ, т.е. среднее число союзов, предлогов и частиц в предложении. Некоторые из перечисленных параметров рассматривались ранее. Однако предложенный нами параметр 3 - частота всех служебных слов - является, насколько нам известно, НОВЫМ. Указанные параметры существенно различны по своему характеру. Наш параметр 3 особо выделяется своей интегральностью,"массовостью", так как здесь подсчитывается суммарный процент ВСЕХ СЛУЖЕБНЫХ СЛОВ, которых очень много! Большое число служебных слов, используемых в русском языке, делает этот параметр невероятно трудно контролируемым на сознательном уровне. Писатель может легко следить, например, за длиной своих предложений. Однако трудно представить себе автора, который при написании книги смог бы уследить за процентом своих служебных слов! Параметры 7 (частота предлога "в") и 8 (частота частицы "не") описывают распределение отдельных служебных слов и заметно менее "массовы", чем суммарный параметр 3. Мы включили параметры 7 и 8 в нашсписок, чтобы выяснить - стабилизируются ли они и могут ли онислужить в качестве авторских инвариантов (ответ оказалсяотрицательным!). Параметр 9 - количество служебных слов в предложении - хотя и носит интегральный характер, однако существенно зависит отдлины предложений и следовательно от их числа в выборке. А этапоследняя величина, как показали подсчеты, весьма неустойчива иможет колебаться в заметных пределах, не стабилизируясь. Мы специально собрали в нашем списке самые разнородные числовые характеристики, чтобы составить представление осравнительном поведении этих параметров и выбрать из нихдействительно стабилизирующийся (т.е. авторский инвариант), еслитаковой вообще найдется. В основу исследования был положен описанный выше выборочный метод из генеральной совокупности. Величина шага, т.е. интервалмежду соседними выборками, для книг большого объъема равнялся 60страницам стандартного книжного текста. Величина же выборки варьировалась. Размер начальной порции, в отличие от 1000 слов, ранее принимавшийся многими авторами, былпринят равным 2000 слов. Затем объем выборок последовательноувеличивался, а именно - 4000, 8000, 16000 слов. Проведенный эксперимент показал, что дальнейшее увеличение объема выборок не обязательно, так как искомый АВТОРСКИЙ ИНВАРИАНТ был обнаружен уже при величине выборки в 16000 слов. При исследовании текстов небольшого объема величина шага уменьшалась и выборки производились чаще. Впрочем, как показалэксперимент, величина шага (в отличие от объема выборки) малосказывается на окончательных результатах. В качестве критерия стабилизации был взят следующий принцип. Объем выборки увеличивался до тех пор, пока не обнаруживался параметр, для которого средняя величина его отклонений от средних значений вдоль произведений всех исследуемых писателей оказывалась существенно меньше амплитуды колебаний параметра между текстами разных авторов. Другими словами, для каждого автора вычислялось отклонение параметра от среднего значения, а затем эти отклоненияусреднялись по всем авторам. Разыскивался параметр, для которогоэто последнее число существенно меньше разницы между максимальными минимальным значениями параметра по всем исследуемым писателям.^ 5. СПИСОК ИССЛЕДОВАННЫХ НАМИ АВТОРОВ И ИХ ПРОИЗВЕДЕНИЙ. Мы воспользовались традиционной периодизацией истории русского литературного языка [р9]. В качестве основногоисторического периода был избран XIX век, где были выбраны 9писателей, писавших по-русски и создавших большие тексты. См.список ниже. Однако, чтобы составить более полное представление об эволюции перечисленных параметров в зависимости от историческойэпохи, рамки эксперимента были расширены. К списку авторов ЧШЧвека мы добавили писателей XVIII и XX веков. В итоге получилсясписок из 23 писателей (см. ниже). Для каждого писателя былиобработаны все его основные книги. Оказалось, что полученныерезультаты практически не зависят от объема произведений приусловии, что объемы достаточно велики. Приведем список обработанных нами литературных произведений.^ ПИСАТЕЛИ XVIII ВЕКА: 1) ЧУЛКОВ М.Д. (1743-1792) - роман "Пригожая повариха" (написан в 1770 г.), М., 1971. 2) НОВИКОВ Н.И. (1744-1818) - сатирический журнал "Живописец" (издан в 1772-1773 гг.), М., 1971. 3) ФОНВИЗИН Д.И. (1745-1792) - "Записки первого путешествия" (написаны в 1777-1778 гг.), повесть "Повествование глухого и немого" (издана в 1783 г.), повесть "Калисфен" (издана в 1786 г.), сочинение в письмах "Друг честных людей или стародум" (написано в 1830 г.), мемуары "Чистосердечное признание в делах моих и помышлениях" (изданы в 1830 г.), М., 1971. 4) РАДИЩЕВ А.Н. (1749-1802) - "Путешествие из Петербурга в Москву" (издано в 1790 г.), М., 1971. 5) КАРАМЗИН Н.М. (1766-1826) - "История Государства Российского" (написана в 1816-1826 гг.), повесть "Бедная Лиза" (издана в 1792 г.), повесть "Остров Бернгольм" (издана в 1794 г.), повесть "Марфа Посадская" (издана в 1803 г.), М., 1971. 6) КРЫЛОВ И.А. (1769-1844) - повесть "Каиб" (издана в 1792 г.), "Похвальная речь" (издана в 1792 г.), М., 1971.^ ПИСАТЕЛИ XIX ВЕКА: 7) ГОГОЛЬ Н.В. (1809-1852) - повести: "Вечера на хуторе близ Диканьки", "Сорочинская ярмарка", "Вечер накануне Ивана Купала", "Майская ночь или утопленница", "Пропавшая грамота", "Ночь перед Рождеством", "Страшная месть", "Иван Иванович и его тетушка", "Заколдованное место" (изданы в 1831-1832 гг.), повести: "Миргород", "Старосветские помещики", "Тарас Бульба", "Вий", "Повесть о том, как поссорились Иван Иванович с Иваном Никифоровичем" (изданы в 1835 г.), "Повести" (Петербургские): "Невский проспект", "Нос", "Портной", "Шинель", "Коляска", "Записки сумасшедшего", "Рим" (изданы в 1833-1842 гг.), поэма "Мертвые души" (издана в 1840 г.), М., 1959, 1971. 8) ГЕРЦЕН А.И. (1812-1870) - мемуары "Былое и думы" (изданы в 1852-1868 гг.), М., 1969. 9) ГОНЧАРОВ И.А. (1812-1891) - роман "Обыкновенная история" (издан в 1847 г.), роман "Обломов" (издан в 1859 г.), роман "Обрыв" (издан в 1869 г.), М., 1959. 10) ТУРГЕНЕВ И.С. (1818-1883) - "Записки охотника" (написаны в 1855-1856 гг.), роман "Рудин" (написан в 1855-1856 гг.), роман "Дворянское гнездо" (написан в 1859 г.), роман "Накануне" (написан в 1860 г.), роман "Отцы и дети" (написан в 1862 г.), М., 1961. 11) МЕЛЬНИКОВ-ПЕЧЕРСКИЙ П.И. (1818-1883) - "Красильниковы" (дорожные записки, 1852 г.), рассказ "Дедушка Поликарп" (написанв 1857 г.), рассказ "Поярков" (написан в 1857 г.), рассказ"Старые годы" (написан в 1857 г.), роман "В лесах" (написан в1871-1875 гг.), М., 1963. 12) ДОСТОЕВСКИЙ Ф.М. (1821-1881) - роман "Преступление и наказание" (написан в 1866 г.), роман "Братья Карамазовы" (написан в 1879-1880 гг.), М., 1970-1973. 13) САЛТЫКОВ-ЩЕДРИН М.Е. (1826-1889) - "История одного города" (написана в 1869-1870 гг.), роман "Господа Головлевы" (написан в 1875-1880 гг.), М., 1975. 14) ЛЕСКОВ Н.С. (1831-1895) - повесть "Леди Макбет Мценского уезда" (написана в 1864 г.), повесть "Воительница" (написана в 1866 г.), "Запечатленный ангел" (повесть написана в 1873 г.), повесть "Очарованный странник" (написана в 1873 г.), рассказ "Железная воля" (написан в 1876 г.), рассказ "Однодум" (написан в 1879 г.), рассказ "Несмертельный голован" (написан в 1880 г.), рассказ "Левша" (написан в 1881 г.), рассказ "Тупейный художник" (написан в 1883 г.), рассказ "Человек на часах" (написан в 1889 г.), рассказ "Зимний день" (написан в 1894 г.), М., 1973. 15) ТОЛСТОЙ Л.Н. (1828-1910) - повесть "Детство" (написана в 1852 г.), повесть "Отрочество" (написана в 1854 г.), повесть "Юность" (написана в 1856 г.), рассказ "Набег" (написан в 1852 г.), повесть "Утро помещика" (написана в 1856 г.), повесть "Казаки" (написана в 1863 г.), роман "Война и мир" (написан в 1863-1869 гг.), роман "Анна Каренина" (написан в 1873-1877 гг.), роман "Воскресение" (написан в 1899 гг.), М., 1960-1964.^ ПИСАТЕЛИ XX ВЕКА: 16) ГОРЬКИЙ А.М. (1868-1936) - рассказ "Макар Чудра" (написан в 1892 г.), рассказ "Дед Архип и Ленька" (написан в 1894г.), рассказ "Старуха Изергиль" (написан в 1894-1895 гг.),рассказ "Ошибка" (написан в 1895 г.), рассказ "Однажды ночью"(написан в 1895 г.), рассказ "Озорник" (написан в 1896 г.),рассказ "Товарищи" (написан в 1897 г.), рассказ "Супруги Орловы"(написан в 1897 г.), рассказ "Бывшие люди" (написан в 1897 г.),рассказ "Мальва" (написан в 1897 г.), рассказ "Скуки ради"(написан в 1897 г.), рассказ "Варенька Олесова" (написан в 1898г.), рассказ "Дружки" (написан в 1898 г.), рассказ "Читатель"(написан в 1898 г.), М., 1939. Далее: повесть "Детство" (написанав 1912-1913 гг.), повесть "В людях" (написана в 1914-1915 гг.),повесть "Мои университеты" (написана в 1923 г.), повесть "ДелоАртамоновых" (написана в 1925 г.), М., 1967. 17) БУНИН И.А. (1870-1953) - рассказ "Антоновские яблоки" (написан в 1900 г.), повесть "Деревня" (написана в 1909-1910 гг.), повесть "Суходол" (написана в 1911 г.), рассказ "Захар Воробьев" (написан в 1911-1912 гг.), рассказ "Братья" (написан в 1916 г.), рассказ "Господин из Сан-Франциско" (написан в 1915 г.), рассказ "Божье дерево" (написан в 19130 г.), рассказ "Натали" (написан в 1941 г.), рассказ "Чистый понедельник" (написан в 1944 г.), М., 1973. 18) НОВИКОВ-ПРИБОЙ А.С. (1877-1944) - рассказ "По-темному" (написан в 1911 г.), рассказ "Бойня" (написан в 1906 г.), рассказ "Пошутили" (написан в 1913 г.), рассказ "Порченный" (написан в 1912 г.), повесть "Море зовет" (написана в 1919 г.), роман "Капитан первого ранга" (написан в 1936-1944 гг.), роман "Цусима" (написан в 1905-1941 гг.), М., 1963. 19) ФЕДИН К.А. (1892-1977) - роман "Города и годы" (написан в 1924 г.), роман "Братья" (написан в 1928 г.), М., 1974. 20) ЛЕОНОВ Л.М. (род. 1899) - роман "Русский лес" (написан в 1953 г.), М., 1974. 21) ШИШКОВ В.Я. (1873-1945) - повесть "Тайга" (написана в 1916 г.), повесть "Пейнус-озеро" (написана в 1931 г.), роман "Угрюм-река" (написан в 1918-1932 гг.), М., 1960. 22) ФАДЕЕВ А.А. (1901-1956) - роман "Разгром" (написан в 1926 г.), роман "Молодая гвардия" (написан в 1945 г.). 23) ШОЛОХОВ М.А. (1905-1984) - собрание сочинений в 8 томах, М., 1962: ранние рассказы - том 1, роман "Тихий Дон" - тома 2-5, роман "Поднятая целина" - тома 6,7, рассказы - том 8.^ 6. ВЫЧИСЛИТЕЛЬНЫЙ ЭКСПЕРИМЕНТ Для каждого из этих писателей мы в 1974-1977 годах полностью обработали все указанные в списке сочинения. А именно, вдоль всех этих многотомных текстов были просчитаны значения девяти перечисленных лингвистических параметров. В результате, мы построили частотные графики для выборок размером в 2000, 4000, 8000, 16000 слов. Вся эта огромная работа была выполнена нами "вручную", поскольку мы не располагали компьютеризированными версиями всех этих книг (мы не уверены, что таковые существуют даже сегодня). Принцип построения частотных графиков был таков. По горизонтали откладывались номера последовательных выборок, а повертикали - численные значения лингвистических параметров. Врезультате каждому писателю отвечает некоторая ломаная кривая. Колебания параметров, их отклонения от среднего значения, подсчитывались по формуле d = (H.макс - H.мин) / H.сред где H.макс, H.мин, H.сред - максимальное, минимальное и среднее значения соответственно.^ 7. РЕЗУЛЬТАТЫ ЭКСПЕРИМЕНТА Оказалось, что все перечисленные параметры за исключением параметра 3 при росте объема выборки либо не стабилизируютсявообще, либо разброс их значений для одного автора сравним смаксимальной разностью значений для разных авторов. Другимисловами, в этом последнем случае "все авторы склеиваются", ихневозможно численно отделить друг от друга. Ясно, что такиепараметры не могут служить для различения хотя бы некоторых группавторов. Типичным примером первой ситуации (отсутствие стабилизации с ростом объема выборки) является эволюция параметра 1 - количества слов в предложении. См.рис.Доп-3.2. Отчетливо видно, что даже при объеме выборок в 16000 слов кривые хаотичны, сильно перемешаны и размах колебаний слишком велик. Типичным примером второй ситуации ("слипание всех писателей") является поведение параметра 2 - количества слогов вслове. См. рис.Доп-3.3. Хотя при объеме выборок в 16000 словкривые начинаются выпрямляться, стабилизироваться, однако всетраектории практически сливаются друг с другом, слипаются, чтоделает невозможным различение авторов. Аналогичная картина наблюдается и для параметров 4,5,6,7,8,9. Например, кривые параметра 9 не стабилизируются иперемешиваются. Поведение параметра 8 похоже на поведениепараметра 2 - хотя при большом объеме выборок кривыевыравниваются, однако они становятся очень близкими друг к другу,стремятся к одному и тому же значению, определяемому,следовательно, общими законами русского языка, а неиндивидуальными особенностями писателя. На этом основании нам представляется крайне сомнительным использование параметров 1,2,4,5,6,7,8,9 для различения авторов.^ 8. ЧАСТОТА УПОТРЕБЛЕНИЯ СЛУЖЕБНЫХ СЛОВ ОКАЗЫВАЕТСЯ АВТОРСКИМ ИНВАРИАНТОМ. Замечательным исключением является параметр 3 - частота употребления всех служебных слов - ПРЕДЛОГОВ, СОЮЗОВ И ЧАСТИЦ. Эволюция этого параметра в зависимости от роста объема выборки показана на рис.Доп-3.4, рис.Доп-3.5, рис.Доп-3.6, рис.Доп-3.7. В список служебных слов мы внесли следующие слова: ПРЕДЛОГИ - в, на, с, за, к, по, из, у, от, для, во, без, до, о, через, со, при, про, об, ко, над, из-за, из-под, под. СОЮЗЫ - и, что, но, а, да, хотя, когда, чтобы, если, тоже, или, то есть, зато, будто. ЧАСТИЦЫ - не, как, же, даже, бы, ли, только, вот, то, ни, лишь, ведь, вон, то-есть, нибудь, уже, либо. Итого - 55 служебных слов. Хотя список неполон, он оказался вполне достаточным для различения авторов.^ ВАЖНЫЙ ЭКСПЕРИМЕНТАЛЬНЫЙ ФАКТ. 1) При величине выборок в 16000 слов процентное содержание служебных слов для каждого автора из нашего списка (заисключением одного писателя, о котором речь пойдет ниже)оказалось приблизительно постоянным вдоль всех его произведений,т.е. частотный график изображается практически горизонтальнойпрямой. Эта стабилизация происходит для всех 22 писателей (из 23исследованных). См. рис.Доп-3.7. 2) Разность между максимальным и минимальным значениями параметра 3 (минимум и максимум взяты по всем исследованнымписателям) значительно больше амплитуды его колебаний внутрипроизведений отдельных авторов. Амплитуда колебаний параметра 3по разным писателям достаточно велика - от 19% до 27,5%. См.рис.Доп-3.7. Отсюда следует, что параметр 3 хорошо различает многих авторов. На этом основании назовем параметр 3 - АВТОРСКИМ ИНВАРИАНТОМ. Он может служить для атрибуции неизвестных произведений и для обнаружения плагиата, хотя и с определенной осторожностью,поскольку мы обнаружили писателей с очень близкими авторскимиинвариантами, например, Фонвизин Д.И. и Толстой Л.Н. (см. ниже). Кроме того, для достаточно уверенных выводов нужны тексты большого объема. Главным выводом здесь является нетривиальное утверждение о существовании авторского инварианта русских литературнрыхтекстов. Было бы интересно продолжить эксперименты с цельюобнаружения других авторских инвариантов. Подчеркнем, что подобные выводы можно делать только после проведения обширного вычислительного эксперимента. Лишь после того, как будет экспериментально доказано, что тот или иной параметр действительно стабилизируется внутри произведений каждого писателя, можно считать, что мы обнаружили инвариант. Причем обработанный список авторов должен быть достаточно велик - по крайней мере несколько десятков. Строить же какие либо теории лишь на основе сравнения текстов одного или двух писателей - по нашему мнению необоснованно. Интересно, что обнаруженный нами авторский инвариант практически не зависит от временной эпохи: в указанном спискеавторов представлены писатели трех веков - от XVIII до XX.^ 9. ЧИСЛЕННЫЕ ПРИМЕРЫ. Поскольку, как выяснилось, основной интерес представляют графики для выборок в 16000 слов, то ограничимся именно этим случаем. Для произведений И.С.Тургенева и Л.Н.Толстого приведем таблицу значений следующих параметров: 3 - количество всех служебных слов (в процентах), 1 - количество слов в предложении, 2 - количество слогов в слове, 9 - количество служебных слов в предложении, 7 - количество предлога "в" (в процентах), 8 - количество частицы "не" (в процентах). параметры: | 3 1 2 9 7 8 | ТУРГЕНЕВ 22,0122,3622,38 11,26 15,5813,35 2,17 2,162,21 2,44 3,493,04 2,36 2.05- 2,19 1,87- среднее знач.отклонение 22,240,016 13,400,322 2,170,023 2,980,35 2,200,14 2,040,16 параметры: | 3 1 2 9 7 8 | ТОЛСТОЙ 23,6723,3423,4523,5823,7823,3523,7723,8223,77 13,13 20,75 14,27 18,93 14,86 16,33 14,23 15,2414,97 2,11 2,15 2,28 2,16 2,15 2,19 2,11 2,112,20 3,09 4,79 3,35 4,62 3,64 3,80 3,47 5,753,42 2,10 2,56 2,38 2,46 2,74 2,71 2,15 2,192,49 2.05 1,72 1,67 1,87 1,88 1,93 2,17 2,071,75 среднее знач.отклонение 23,620,020 15,950,477 2,160,08 3,810,45 2,360,27 1,920,26 Отчетливо видно, что наименьшими отклонениями обладают параметры 3 и 2, а именно - 0,016 и 0,023 для Тургенева и 0,020 и 0,08 для Толстого. Но параметр 2 не может служить авторским инвариантом, так как его значения для подавляющего большинства разных авторов из нашего списка чрезвычайно близки. Например, 2,17 для Тургенева и 2,16 для Толстого. Поэтому с точки зрения параметра 2 все писатели "сливаются в одного", что не позволяет их различать. Параметр 3 - частота служебных слов - оказывается не только инвариантом, но и различает достаточное число авторов. Например,для Тургенева он равен 22,24, а для Толстого 23,62. Разностьравна 1,38, что превышает колебания этого параметра внутрипроизведений Тургенева и Толстого. Для изученных нами писателей параметр 3 может принимать значения от 19,4 процентов до 27,5 процентов, т.е. диапазон его значений достаточно велик по сравнению с колебаниями параметра внутри текстов отдельных авторов. Приведем теперь таблицу значений параметров 3,7 и 8 для Гоголя, Герцена, Достоевского, Леонова и Фадеева. параметры: 3 7 | 8 параметры: 3 7 8 | ГОГОЛЬ 23,8223,5423,6123,6223,85 2,25 2,29 2,61 2,752,10 2,101,861,821,902,50 ГЕРЦЕН 22,4222,8722,98 2,87 3,102,64 2,03 2,041,92 сред.знач.отклонение 23,650,013 2,450,027 1,950,35 сред.знач.отклонение 22,710,024 2,910,16 2,010,06 параметры: 3 7 | 8 параметры: 3 7 8 | ДОСТОЕВ-СКИЙ 25,2625,4325,29 2,23 2,482,13 1,702,212,14 ЛЕОНОВ 23,1123,04 2,972,58 1,812,00 сред.знач.отклонение 25,320,007 2,380,15 2,020,25 сред.знач.отклонение 23,060,003 2,830,14 1,900,10 параметры: 3 7 | 8 параметры: 3 7 жебных слов Разница между значениями параметра 3 для ранних МЕЛКИХ рассказов Чехова (I-V тома) и для более КРУПНЫХ повестей ирассказов позднего периода его творчества (VI-VIII тома) -достаточно ощутима. См. рис.Доп-3.8. Причем в ранних МЕЛКИХ рассказахне только МЕНЬШЕ служебных слов, но главное заключается в том, чторазброс их больше, чем в последующих КРУПНЫХ произведениях. БОЛЬШИЕ (поздние) тексты Чехова характеризуются ВЫСОКОЙ СТАБИЛЬНОСТЬЮ авторского инварианта, как впрочем и для всех других 26 авторов БОЛЬШИХ текстов из нашего списка. В этом смысле Чехов не выделяется на их фоне - параметр 3 прекрасно "обслуживает" все его БОЛЬШИЕ сочинения. В заключение отметим еще одно интересное обстоятельство. Оказалось, что процент служебных слов наиболее стабилен (привеличине порций в 8000 и 16000 слов) на ПРОЗАИЧЕСКИХпроизведениях и менее устойчив на ПОЭТИЧЕСКИХ текстах. Этотвопрос заслуживает отдельного рассмотрения и здесь мы не будем нанем останавливаться. Обнаружение авторского инварианта в русском литературном языке делает весьма правдоподобным гипотезу о существованиианалогичных авторских инвариантов и в других языках. Они могут,конечно, отличаться от процента служебных слов. Особый интереспредставляли бы авторские инварианты греческого и латыни, еслииметь в виду применения аналогичных методик для распознаванияавторства древних текстов.^ 11. СТАТИСТИЧЕСКИЙ АНАЛИЗ ТВОРЧЕСТВА М.А.ШОЛОХОВА. АВТОРСКИЙ ИНВАРИАНТ "ТИХОГО ДОНА" РЕЗКО ОТЛИЧАЕТСЯ ОТ АВТОРСКОГО ИНВАРИАНТА ДРУГИХ ПРОИЗВЕДЕНИЙ М.А.ШОЛОХОВА. Внимательный читатель наверное уже отметил, что из исследованного нами списка 28 писателей почему-то один выпал. Это - Михаил Александрович Шолохов, к исследованию произведений которого мы сейчас и переходим. Все наши выводы мы основываем на анализе его сочинений, изданных в 8 томах в Москве в 1962 году. Сразу же отметим, что мы ни в коей мере не претендуем на какие-либо окончательные выводы и публикуем полученные намирезультаты в надежде, что они возможно окажутся полезными дляисследователей творчества Шолохова. Всем известно, что М.А.Шолохов достиг весьма видного положения в отечественной и мировой литературе. Нобелевская премия 1965 года также говорит о его междунаро


Не сдавайте скачаную работу преподавателю!
Данный реферат Вы можете использовать для подготовки курсовых проектов.

Поделись с друзьями, за репост + 100 мильонов к студенческой карме :

Пишем реферат самостоятельно:
! Как писать рефераты
Практические рекомендации по написанию студенческих рефератов.
! План реферата Краткий список разделов, отражающий структура и порядок работы над будующим рефератом.
! Введение реферата Вводная часть работы, в которой отражается цель и обозначается список задач.
! Заключение реферата В заключении подводятся итоги, описывается была ли достигнута поставленная цель, каковы результаты.
! Оформление рефератов Методические рекомендации по грамотному оформлению работы по ГОСТ.

Читайте также:
Виды рефератов Какими бывают рефераты по своему назначению и структуре.