Общее языкознание, вопросы языкознания
Принцип аналогии в морфологии

Принцип аналогии в морфологии

В работе Белоногова Г. Г. и Зеленкова Ю. Г. описывается принцип построения алгоритма морфологического анализа текстов на основе принципа аналогии. Данный принцип используется в системах орфографического контроля русских текстов, системах автоматического индексирования документов и системах машинного перевода текстов с русского языка на английский и с английского языка на русский. Производительность программы на компьютере с процессором от 386 и выше составляет около 400 слов/с.

При автоматической обработке текста возникает проблема “новых“слов. Для синтаксического анализа и синтеза необходимо знать грамматические характеристики слов. Если слова в словаре нет, то морфологический анализ не может быть выполнен, а следовательно не могут быть определены грамматические характеристики слова.

Для того, чтобы определить грамматические характеристики слов без словаря, Белоногов предложил принцип аналогии. Он основан на том, что существует сильная корреляционная связь между грамматическими характеристиками слов и буквенным составом их концов. Например: организация, приватизация, концентрация имеют ж. р., им. п. и ед. ч. ; работают, понимают, привлекают - это глаголы в 3-ем лице мн. ч. и т.д.

Принцип аналогии проверялся на ряде индоевропейских языков: (русский, болгарский, латышский, испанский, английский) и оказался эффективным. Сначала он применялся для определения грамматических характеристик слов, не включенных в машинный словарь. Затем возникла идея при проведении морфологического анализа отказаться от машинного словаря.

Если по текстам большого объема составить словарь словоформ и назначить каждой словоформе некоторые грамматические признаки, а затем преобразовать данный словарь в обратный словарь словоформ, то можно обнаружить, что многие участки словаря имеют одинаковые наборы признаков.

Обратный словарь словоформ представляет собой список словоформ с такими характеристиками как признак длинны грамматического окончания, номер флективного класса (типа словоизменения) и числовой индекс, характеризующий такие признаки как “глагольность“, “местоименность” , “сравнительная степень” . Например: масштаба 01/001/01 служба 01/056/01 возникшие 02/105/10 батальон 00/021/01 рассчитывая 00/152/10 Обратный словарь используется для автоматического морфологического анализа текстов, если составляющие их словоформы отождествлять со словоформами словаря и приписывать им грамматическую информацию, указанную в словаре. Словоформам текста, которые не находятся в словаре, можно приписывать грамматическую информацию тех словоформ словаря, концы которых в максимальной степени совпадают с концами этих новых словоформ текста.

Объем обратного словаря можно сократить, если на всех его участках оставить по две словоформы: начальную и конечную. Более того, из этих двух словоформ можно оставить только одну, и если словоформа текста не совпадет ни с одной словоформой обратного словаря, то ей приписывается информация непосредственно предшествующей словоформы этого словаря.

Данный сокращенный словарь можно еще сократить, если исключить из него начальные буквы словоформ, не оказывающие влияние на результаты морфологического анализа. При этом у каждой пары рядом стоящих словоформ оставляются справа совпадающие конечные буквосочетания и еще по одной букве, которые не совпадают. Например: аба 01/001/01 еба 01/044/01 неба 01/071/01 авшие 02/105/10 тальон 00/021/01 тывая 00/152/10 После выполнения всех операций объем словаря сокращается в 8 раз. На точность первоначально включенных в словарь словоформ это не повлияет, а точность анализа остальных словоформ русского языка будет достаточно высокой.

Для морфологического анализа текстов на основе метода аналогии достаточно располагать обратным словарем концов слов. Но авторы разработки сделали еще “Словарь служебных и коротких слов” . В этот словарь были включены сначала предлоги, местоимения, частицы, союзы и короткие слова до 5 букв. Затем в него вошли также словоформы, которые по методу аналогии анализировались неверно. В результате этот словарь увеличился до 11 тысяч словоформ.

Таким образом, в процессе морфологического анализа словоформы ищутся в словаре “Служебных и коротких слов” , а затем в словаре концов словоформ. Результаты анализа, полученные по первому словарю, считаются более надежными, и словоформы, найденные в этом словаре, дальнейшей обработке не подвергаются.

В настоящее время вероятность правильного анализа слов при обработке текстов любой тематики превышает 99%.

В разработке данной системы наряду с авторами данной статьи принимали участие научные сотрудники отдела лингвистических исследований ВИНИТИ: А. П. Новоселов, Е. Ю. Рыжова, С. А. Самоделкина, Ал-др А. Хорошилов, Ал-сей А. Хорошилов, Е. Г. Дружинина.


просмотров: 234
Search Results from Ebay.US* DE* FR* UK
The Book of Mysteries (New Hardcover W/Dust Jacket) by Jonathan Cahn

$9.49
End Date: Friday Aug-25-2017 9:59:45 PDT
Buy It Now for only: $9.49
|
The Casual Vacancy by JK Rowling Hardcover First Edition 1st US Printing

$7.99
End Date: Friday Aug-18-2017 17:47:36 PDT
Buy It Now for only: $7.99
|
NEW !! After Alice by Gregory Maguire (2015) 1st edition Hardcover

$10.99
End Date: Tuesday Aug-22-2017 18:23:30 PDT
Buy It Now for only: $10.99
|
The Bazaar of Bad Dreams: Stories by Stephen King Hardcover 2015

$8.99
End Date: Tuesday Aug-8-2017 7:42:33 PDT
Buy It Now for only: $8.99
|
Search Results from «Озон» Художественная литература, анонсы.
 
Чарльз Паллисер Квинканкс. Том 1 The Quincunx: The Inheritance Of John Huffam
Квинканкс. Том 1

Выдающийся роман Чарльза Паллисера буквально взорвал нишу не только исторического детектива, но исторического романа вообще. Он является одним из лучших образцов реконструкции атмосферы эпохи и тонкой игры с каноническим литературным жанром.
По викторианским детективам Коллинза и Конан Дойла нам известно, что «старая добрая» Англия была не такой уж доброй. Но на самом деле все было куда хуже, чем изображали даже самые смелые классики. Англия имела такое дно, такую изнанку, что они способны удивить даже искушенных читателей XXI века. Вынужденный пройти через все круги этого ада, Джон Хаффам постепенно приближается к разгадке  тайны, которая преследует его с самого детства. Тайны пяти кланов, чьи чудовищные отношения намертво слили их в загадочном орнаменте квинканкса...

Жанр:
Многоходовая интеллектуальная головоломка, стилизованная под викторианский роман.
Автор:
Чарльз Паллисер - английский писатель американского происхождения. Родился в 1947 году в штате Массачусетс, живет в Англии с трех лет. Учился в Оксфорде, преподавал английский язык в Университете Стратклайда в Глазго, работал первым заместителем редактора The Literary Review. С 1990 посвятил себя полностью литературной деятельности. Причиной стал успех его первого романа - "Квинканкс", - который был награжден Sue Kaufman Prize for First Fiction, переведен на основные мировые языки и разошелся тиражами в общей сложности более миллиона копий. На данный момент у Паллисера вышло пять романов, ряд литературоведческих статей, также он пишет сценарии для театра, радио и телевидения.
Книга:
"Квинканкс" - самый парадоксальный роман современной английской литературы, выдающаяся стилизация под викторианскую прозу. Легкий язык и блестящее владение стилем позволили Чарльзу Паллисеру создать великолепную мистификацию: внимательный читатель заметит: эта книга - не то, за что себя выдает. Сюжет закручивается в соответствии с четкой структурой: пять частей романа, пять семейств, между которыми идет борьба за наследство. Герб из пяти четырехлепестковых роз, квинканкс, который хранит ответ на загадку - кто же является законным наследником поместья, за которое ведется борьба. Чтобы отгадать эту шараду, читателям вместе с героем - Джоном Хаффамом - нужно будет пройти все перипетии: разорение, переезд из деревни в город, знакомство с самыми разными людьми. Загадочности происходящим событиям придает воссозданная Паллисером атмосфера туманного Лондона середины XIX века с его чопорными леди, циничными клерками и пронырливыми уличными мальчишками. Роман в двух томах выходит в серии "Грандмастер исторического детектива".

...

Коринн Майер, Анна Симон Эйнштейн. Графическая биография
Эйнштейн. Графическая биография
О книге Эта графическая биография проведет читателя от рождения Эйнштейна в 1879 году до его смерти в 1955, рассказывая о его личной и профессиональной жизни. От первого опыта за школьной партой до эмиграции в Америку, от первого озарения до Нобелевской премии, от его взглядов на религию до участия в гражданских акциях. Графический роман элегантной легкостью языка и кажущейся простотой иллюстраций порадовал бы самого Эйнштейна. Но, несмотря на простоту формата, содержание книги вполне серьезное - самые важные теоретические находки ученого объясняются очень аккуратно и понятно. Фишки книги - Просто и доступно объясняются сложные теории Эйнштейна. - Вас ждет не только серьезный ученый-физик, но и Эйнштейн дома, Эйнштейн с детьми, Эйнштейн, флиртующий за обедом. "Все в мире относительно, кроме вашей красоты". - Комикс потрясающе устроен: вот мы сидим за партой с маленьким Альбертом, а вот уже несемся по "вселенной его мыслей", превосходно визуализированной иллюстратором. Для кого эта книга Для всех, кто хочет больше узнать об Альберте Эйнштейне. Для любителей комиксов. Для всех, кому интересны биографии неординарных людей....

 Marvel. Стражи Галактики. Полная энциклопедия космических изгоев
Marvel. Стражи Галактики. Полная энциклопедия космических изгоев
Узнайте все об удивительных приключениях безумной, отчаянной и благородной команды Стражей Галактики! Подробнейшие данные, засекреченные досье и канонические иллюстрации из выпусков комиксов разных лет - от ключевых до самых редких.

Настоящее коллекционное издание для всех поклонников MARVEL! Все об удивительных приключениях Питера Квилла, Ракеты, Грута, Гаморы, Дракса и их боевых товарищей....

Фридрих Горенштейн Улица Красных Зорь
Улица Красных Зорь
В книгу вошли повесть "Ступени", впервые изданная в альманахе "МетрОполь", и три произведения эмигрантского периода: "Чок-Чок", "Муха у капли чая" и "Улица Красных Зорь", давшая название всему сборнику. Автор предисловия Дмитрий Быков назвал ее "духовной автобиографией автора и самым слезным и мучительным текстом, написанным с истинно платоновской мощью". 

Об авторе: Фридрих Горенштейн - прозаик, драматург, киносценарист ("Солярис", "Раба любви . Прозу Горенштейна не печатали в советской России совсем, рукописи он давал читать только "ближнему кругу", в конце семидесятых появились зарубежные публикации. Юрий Трифонов, Андрей Кончаловский, Андрей Тарковский, Бенедикт Сарнов называли его романы "Место", "Псалом", "Искупление" гениальными. Он не примыкал ни к одному движению и направлению, не находил себе места ни в одном стане, а статус классика обрел еще при жизни. В 1980 году писатель эмигрировал и умер в 2002 году в Берлине. 

Цитата: "Тоне казалось, что в болотистых местах и прячется самое страшное слово для поселковых - амнистия. Поселок был последним пунктом, ближе которого ссыльных к Москве не пускали, и, когда случалась амнистия, начинались грабежи и убийства. Другое страшное слово - война - было далеко, на краю света, и могилы военные были далеко. Вместо убитого человека присылали бумажку, и взрослые эту бумажку оплакивали. А амнистия жила хоть и далеко от улицы Красных Зорь, однако в этой местности, в болотистой чаще, и жертв ее хоронили в сосновых и еловых гробах на поселковом кладбище у сосняка-брусничника. К тому ж амнистия пришла тогда, когда война кончилась и стала неопасной". Фридрих Горенштейн

Отзывы: "А почему эта проза так редко издается, так немногими любима - так ведь и это ясно. После нее и жить, и писать трудно: планка задана высокая, да и вещи сказаны жестокие... Горенштейн - это первоклассный, не будет преувеличением сказать - великий писатель". Дмитрий Быков

"Горенштейн - очень подлинное явление, он плоть от плоти классической русской литературы, и он очень глубок". Юрий Векслер

Ключевые слова: горенштейн, повести, проза, неизданное, художественная литература, метрополь, ступени, чок-чок, улица красных зорь, Место, Псалом, "Искупление", "Солярис", "Раба любви".

...

Константин Паустовский, Галина Трефилова,  А. Борщаговский К. Паустовский. Собрание сочинений в 7 томах (эксклюзивное подарочное издание)
К. Паустовский. Собрание сочинений в 7 томах (эксклюзивное подарочное издание)
Переплет ручной работы изготовлен из натуральной кожи по старинной европейской технологии XVIII века.
Блинтовое и золотое тиснение переплета.
Трехсторонний золотой обрез.
Каждый том дополняет шелковое ляссе.

Константин Георгиевич Паустовский - классик отечественной литературы, замечательный художник слова, знаток родной при роды. Щедрый писательский дар и изобретательная фантазия Паустовского позволяли ему рассказывать на страницах своих произведений о таких сложнейших проблемах века, как интеллигенция и революция, художник и общество, природа и цивилизация....

Глеб Успенский Глеб Успенский. Собрание сочинений в 9 томах (эксклюзивное подарочное издание)
Глеб Успенский. Собрание сочинений в 9 томах (эксклюзивное подарочное издание)
Оригинально оформленное подарочное издание. Переплет ручной работы изготовлен из натуральной кожи по старинной европейской технологии XVIII века. Блинтовое и золотое тиснение переплета. Трехсторонний золотой обрез. Каждый том дополняет шелковое ляссе.

Многочисленные очерки и рассказы Успенского посвящены жизни разных социальных слоев русского народа. Документальный характер произведений, злободневность, реализм, внимание к деталям, запоминающиеся персонажи, великолепное знание народной речи - все это делает очерки и рассказы Глеба Ивановича Успенского ярким литературным явлением конца XIX столетия....

В. Н. Козляков Борис Годунов. Трагедия о добром царе
Борис Годунов. Трагедия о добром царе

"...И мальчики кровавые в глазах..." Большинству из нас царь Борис Федорович Годунов (1552-1605) и ныне представляется таким, каким изобразил его в своей бессмертной трагедии А.С. Пушкин. Впервые в русской истории достигший высшей власти не в силу происхождения, не по праву принадлежности к правящей династии, но благодаря своему уму, способностям и умению управлять страной, Годунов много сделал для блага Отечества но в памяти поколений все равно остался жестоким убийцей несчастного царевича Дмитрия, последнего отпрыска династии Рюриковичей. Тень невинно убиенного царевича преследовала его всю жизнь и в конечном итоге стала причиной краха всех его начинаний и гибели его собственной семьи. Но был ли он причастен к тем преступлениям, в которых его обвиняют? Чего больше было в его царствовании - гения или злодейства? И насколько уживаются эти качества в одном человеке? Обо всем этом, а также об истории России на рубеже XVI-XVII вв. веков, в самый канун Великой Смуты, едва не погубившей Российское государство, рассуждает в своей новой книге известный историк, постоянный автор серии "Жизнь замечательных людей" Вячеслав Николаевич Козляков.

...

Д. Л. Быков Заложник вечности
Заложник вечности

Эта книга - о жизни, творчестве - и чудотворстве - одного из крупнейших русских поэтов XX века Бориса Пастернака; объяснение в любви к герою и миру его поэзии. Автор не прослеживает скрупулезно изо дня в день путь своего героя, он пытается восстановить для себя и читателя внутреннюю жизнь Бориса Пастернака, столь насыщенную и трагедиями, и счастьем. Читатель оказывается сопричастным главным событиям жизни Пастернака, социально-историческим катастрофам, которые сопровождали его на всем пути, тем творческим связям и влияниям, явным и сокровенным, без которых немыслимо бытование всякого талантливого человека. В книге дается новая трактовка легендарного романа "Доктор Живаго", сыгравшего столь роковую роль в жизни его создателя.

...

Оливер Стоун Интервью с Владимиром Путиным
Интервью с Владимиром Путиным
Владимира Путина считают самым влиятельным человеком в мире. Ему приписывают несметные богатства и царские амбиции. Многие верят, что он лично руководил хакерскими атаками, повлиявшими на выборы в США, и именно он ответственен за начало новой холодной войны с Западом и войну на Украине. Западные политики называют его агрессором и душителем свободы. Но они же признают, что без России невозможно решить ни одну серьезную проблему. Граждане многих стран, в том числе Запада, восхищаются его прямолинейностью, решительностью и защитой традиционных ценностей, а российские оппозиционеры рассказывают о запредельном уровне коррупции в стране.
В России Путин остается самым популярным политиком. С ним связывают как рывок страны в начале 2000-х, так и нынешнюю стагнацию. Его считают консерватором, который тормозит развитие России и пытается воссоздать Советский Союз. Но его же считают наиболее вероятным кандидатом на выборах в 2018 году.
Вряд ли можно найти другого лидера, отношение к которому столь поляризовано - как в России, так и в мире. Режиссер Оливер Стоун, трехкратный обладатель премии "Оскар", решил составить собственный портрет Владимира Путина и лично расспросить его обо всем, что вызывает наибольшие вопросы.
В течение двух лет он провел с ним более 12 интервью - ранее российский лидер никогда не общался с иностранным журналистом так много и так откровенно.
Книга содержит интервью, вошедшие в четырёхсерийный документальный фильм Оливера Стоуна "Путин", а также значительные материалы, оставшиеся за кадром....

Дот Хатчисон Сад бабочек
Сад бабочек
Роман "Сад бабочек", вышедший в США в 2016 году, буквально взорвал рейтинги "Амазона", уверенно и надолго став бестселлером №1 этого крупнейшего книжного рынка. Читателям стало ясно: на небосклон остросюжетной литературы взошла новая звезда, по своему таланту сравнимая с такими мастерами жанра, как Томас Харрис, Джон Фаулз и Дэвид Болдаччи...
Эти девушки знают его лишь как Садовника - мужчину, который похитил их и поселил здесь, в таинственном саду под стеклянным куполом с тенистыми деревьями и прекрасными цветами, ручьем и водопадом. Но для них это место - не рай, а сущий ад. И они ни на секунду не забывают: век их короток, как век бабочек, вытатуированных на их спинах, и может оборваться в любой момент. А сколько им отмерено жить, решает один лишь Садовник...

О книге:
Спецгруппа ФБР "накрывает" хорошо укрытый от посторонних глаз особняк с роскошным садом. Диковинные цветы, тенистые деревья, плети винограда, пещера и водопад - все это кажется райским уголком. Но для его обитательниц - двух десятков девушек с вытатуированными на спинах бабочками - этот сад превратился в настоящий ад. Очаровательные обитательницы поселились здесь не по своей воле - их похитил и привёз сюда человек, которого все его жертвы знают только под именем Садовник. И он волен распоряжаться жизнями своих "бабочек", как ему вздумается: красота, по мнению Садовника, недолговечна, а потому ни одна из девушек не становится старше двадцати одного года. Но и после смерти каждая «бабочка» оставалась собственностью своего похитителя и мучителя. Он заключал тела мёртвых девушек в особые стеклянные сосуды и заливал их прозрачной смолой - так, чтобы можно было целиком видеть рисунок крыльев на спине. Садовник хотел обладать красотой своих невольниц даже после их смерти. Однако агентам ФБР всё равно не хватает информации для восстановления полноты картины преступлений маньяка. Они стараются разговорить одну из выживших "бабочек" по имени Майя. Но она оказывается крепким орешком, и от того, насколько агенты смогут достичь с ней взаимопонимания, будет зависеть успех всего дела.

Для кого:
Для поклонников остросюжетного триллера, когда психологическое напряжение на протяжении всего повествования остаётся на максимуме. За лаконичной внешней формой - роман выстроен в форме допроса жертвы похитителя - раскрываются боль и страх, отчаяние и ненависть похищенных девушек, заставляя читателя испытывать подлинные сильные эмоции.
Об авторе:
Дот Хатчисон - американская писательница, автор романов "Раненое имя", "Сад бабочек" и "Розы мая". Работала в лагере бойскаутов, ремесленном и книжном магазинах, в театре и на фестивале Ренессанса. С 2011 года ведёт блог с рецензиями на прочитанные книги. Роман "Сад бабочек" вышел в США в 2016 году, уверенно и надолго став бестселлером № 1 "Амазона"....

2008 Copyright © BookPoster.ru Мобильная Версия v.2015 | PeterLife и компания
Пользовательское соглашение использование материалов сайта разрешено с активной ссылкой на сайт
Рейтинг@Mail.ru Rambler's Top100 Яндекс.Метрика Яндекс цитирования