From b44e1a7a36f7d3fafd4eacdeb8d172e04200337c Mon Sep 17 00:00:00 2001 From: Jack Rueter Date: Thu, 10 Oct 2024 12:10:58 +0300 Subject: [PATCH] Remove duplicate proper nouns --- .../stems/propernouns_newwords.lexc | 58 +------------------ 1 file changed, 1 insertion(+), 57 deletions(-) diff --git a/src/fst/morphology/stems/propernouns_newwords.lexc b/src/fst/morphology/stems/propernouns_newwords.lexc index 7fcafaa5..5e6442c0 100644 --- a/src/fst/morphology/stems/propernouns_newwords.lexc +++ b/src/fst/morphology/stems/propernouns_newwords.lexc @@ -91,7 +91,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Анош+N+Prop:Анош PROP_OSH ; Антиокия+N+Prop:Антиокия PROP_KUDO ; Анто+N+Prop+Sem/Mal:Анто PROP_KUDO ; -Аполлос+N+Prop:Аполлос PROP_OZKS ; Апраскин+N+Prop:Апраскин PROP_TYL ; Ардзя+N+Prop:Ардзя PROP_KUDO ; Ареопаг+N+Prop:Ареопаг PROP_LAV ; @@ -108,7 +107,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Астакан+N+Prop:Астакан PROP_KAL ; Астрадамский+N+Prop:Астрадамский PROP_PEJ ; Астрадамской+N+Prop:Астрадамской PROP_PEJ ; -Атталия+N+Prop:Атталия PROP_KUDO ; Атюрьбуе+N+Prop:Атюрь#буе PROP_KUDO "(eng) /(fin) /(rus) " ; Атюрьева+N+Prop:Атюрьева PROP_KUDO ; Аугустин+N+Prop:Аугустин PROP_TYL ; @@ -128,9 +126,7 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Барсаба+N+Prop:Барсаба PROP_KUDO ; Батый+N+Prop:Батый PROP_PEJ ; Батыревской+N+Prop:Батыревской N_PEJ ; -Башкортостан+N+Prop:Башкортостан PROP_KAL ; Баюшка+N+Prop:Баюшка PROP_KUDO ; -Беларусь+N+Prop:Беларусь PROP_ROZ1 ; Бельзевул+N+Prop:Бельзевул PROP_KAL ; Берке+N+Prop:Берке PROP_VELE ; Бернике+N+Prop:Бернике PROP_VELE ; @@ -143,22 +139,18 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Битиния+N+Prop:Битиния PROP_KUDO ; Бласт+N+Prop:Бласт PROP_ART ; Бодо+N+Prop:Бодо PROP_KUDO ; -Бодор+N+Prop:Бодор PROP_KAL ; -Болва+N+Prop:Болва PROP_KUDO ; Боля+N+Prop:Боля PROP_KUDO ; Бондор+N+Prop:Бондор PROP_KAL ; Бонзай+N+Prop:Бонзай PROP_PEJ ; Борхон+N+Prop:Борхон PROP_KAL ; Борщанка+N+Prop:Борщанка PROP_KUDO ; Ботника+N+Prop:Ботника PROP_KUDO ; -Брахе+N+Prop:Брахе PROP_VELE ; Будулмай+N+Prop:Будулмай PROP_PEJ ; Бузран+N+Prop:Бузран PROP_KAL ; Буинской+N+Prop:Буинской N_PEJ ; Буйла+N+Prop:Буйла PROP_KUDO ; Бурёнков+N+Prop:Бурёнков PROP_LAV ; Бурнай+N+Prop:Бурнай PROP_PEJ ; -Бурцево+N+Prop:Бурцево PROP_KUDO ; Бутишино+N+Prop:Бутишино PROP_KUDO ; Бухарест+N+Prop:Бухарест PROP_KIT ; Бухум+N+Prop:Бухум PROP_LAV ; @@ -269,18 +261,15 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Динька+N+Prop:Динька PROP_KUDO ; Диоська+N+Prop:Диоська PROP_KUDO ; Диртя+N+Prop:Диртя PROP_KUDO ; -Днепра+N+Prop:Днепра PROP_KUDO ; Дойда+N+Prop:Дойда PROP_KUDO ; Долгорукой+N+Prop:Долгорукой PROP_PEJ ; Дорай+N+Prop:Дорай PROP_PEJ ; -Дорка+N+Prop:Дорка PROP_KUDO ; Дорожинька+N+Prop:Дорожинька PROP_KUDO ; Досифей+N+Prop:Досифей PROP_PEJ ; Досифея+N+Prop:Досифея PROP_KUDO ; Достоевской+N+Prop:Достоевской N_PEJ ; Дребеднев+N+Prop:Дребеднев PROP_TEV ; Дригорей+N+Prop:Дригорей PROP_PEJ ; -Дубёнка+N+Prop:Дубёнка PROP_KUDO ; Дубенской+N+Prop:Дубенской N_PEJ ; Дуболого+N+Prop:Дуболого PROP_KUDO ; Дусенька+N+Prop:Дусенька PROP_KUDO ; @@ -293,7 +282,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Евнух+N+Prop:Евнух PROP_LAV ; Евстигней+N+Prop:Евстигней PROP_PEJ ; Ёгор+N+Prop:Ёгор PROP_KAL ; -Егорка+N+Prop:Егорка PROP_KUDO ; Ёгорка+N+Prop:Ёгорка PROP_KUDO ; Ёгорь+N+Prop:Ёгорь PROP_KEL1 ; Едом+N+Prop:Едом PROP_LAV ; @@ -420,7 +408,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Кесарія+N+Prop+Sem/Mal:Кесарія PROP_KUDO ; Кечас+N+Prop:Кечас PROP_OZKS ; Кечказова+N+Prop:Кечказова PROP_KUDO ; -Киви+N+Prop:Киви PROP_VELE ; Килейбуе+N+Prop:Килей#буе PROP_KUDO "(eng) /(fin) /(rus) " ; Килейнерь+N+Prop:Килейнерь PROP_KAL ; Кимайка+N+Prop:Кимайка PROP_KUDO ; @@ -433,7 +420,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Кислой+N+Prop:Кислой N_PEJ ; Киуш+N+Prop:Киуш PROP_TENGUSH ; Кичаля+N+Prop:Кичаля PROP_KUDO ; -Клава+N+Prop:Клава PROP_KUDO ; Клавдя+N+Prop:Клавдя PROP_KUDO ; Клематин+N+Prop:Клематин PROP_TYL ; Книда+N+Prop:Книда PROP_KUDO ; @@ -448,7 +434,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Коразин+N+Prop:Коразин PROP_TYL ; Коран+N+Prop:Коран PROP_KAL ; Коринт+N+Prop:Коринт PROP_KIT ; -Коринф+N+Prop:Коринф PROP_TEV ; Корнет+N+Prop:Корнет PROP_KIT ; Коршок+N+Prop:Коршок PROP_LAV ; Коряйгужо+N+Prop:Коряйгужо PROP_KUDO ; @@ -460,7 +445,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Крата+N+Prop:Крата PROP_KUDO ; Кристос+N+Prop+Sem/Mal:Кристос PROP_OSH ; Кронид+N+Prop:Кронид PROP_TYL ; -Кроник+N+Prop:Кроник PROP_TEV ; Кудадейской+N+Prop:Кудадейской N_PEJ ; Кудей+N+Prop:Кудей PROP_PEJ ; Кужодон+N+Prop:Кужодон PROP_KAL ; @@ -475,7 +459,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Кусака+N+Prop:Кусака PROP_KUDO "dog's name" ; Кусталов+N+Prop:Кусталов PROP_LAV ; Куторка+N+Prop:Куторка PROP_KUDO ; -Кучай+N+Prop:Кучай PROP_PEJ ; Куштаз+N+Prop:Куштаз PROP_OZKS ; Кырля+N+Prop:Кырля PROP_KUDO ; Лавро+N+Prop:Лавро PROP_KUDO ; @@ -582,7 +565,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Минька+N+Prop:Минька PROP_KUDO ; Мисак+N+Prop+Sem/Mal:Мисак PROP_KAL ; Мисей+N+Prop:Мисей N_PEJ ; -Митек+N+Prop:Митек PROP_TEV ; Митилина+N+Prop:Митилина PROP_KUDO ; Митине+N+Prop:Митине PROP_VELE ; Митря+N+Prop:Митря PROP_KUDO ; @@ -610,18 +592,15 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Наво+N+Prop:Наво PROP_KUDO ; Надё+N+Prop:Надё PROP_KUDO ; Назорей+N+Prop:Назорей PROP_PEJ ; -Наин+N+Prop:Наин PROP_TYL ; Найда+N+Prop:Найда PROP_KUDO ; Нако+N+Prop:Нако PROP_KUDO ; Налитова+N+Prop:Налитова PROP_KUDO ; Наполеон+N+Prop:Наполеон PROP_KAL ; Нарчук+N+Prop:Нарчук PROP_LAV ; Настуша+N+Prop:Настуша PROP_KUDO ; -Ната+N+Prop:Ната PROP_KUDO ; Натанаил+N+Prop:Натанаил PROP_TYL ; Нафанаил+N+Prop:Нафанаил PROP_TYL ; Недвигина+N+Prop+Sem/Plc:Недвигина PROP_KUDO "surname" ; -Нельгина+N+Prop:Нельгина PROP_KUDO ; Ненько+N+Prop:Ненько PROP_KUDO ; Нептун+N+Prop:Нептун PROP_KAL ; Нерон+N+Prop+Sem/Mal:Нерон PROP_KAL ; @@ -635,7 +614,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Новодевичей+N+Prop:Новодевичей PROP_PEJ ; Ноеми+N+Prop:Ноеми PROP_VELE ; Норков+N+Prop:Норков PROP_LAV ; -Ночка+N+Prop:Ночка PROP_KUDO ; Нуваля+N+Prop:Нуваля PROP_KUDO ; Нужаев+N+Prop:Нужаев PROP_KAL ; Нурмаля+N+Prop:Нурмаля PROP_KUDO ; @@ -649,7 +627,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Окро+N+Prop:Окро PROP_KUDO ; Оксён+N+Prop:Оксён PROP_KAL ; Олдыким+N+Prop:Олдыким PROP_TEV ; -Оленино+N+Prop:Оленино PROP_KUDO ; Оленинской+N+Prop:Оленинской N_PEJ ; Олёнушка+N+Prop:Олёнушка PROP_KUDO ; Олодя+N+Prop:Олодя PROP_KUDO ; @@ -661,7 +638,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Онохрей+N+Prop:Онохрей PROP_PEJ ; Онька+N+Prop:Онька PROP_KUDO ; Оптикэнерго+N+Prop:Оптикэнерго PROP_KUDO ; -Опухлики+N+Prop:Опухлики PROP_KUDO ; Орань+N+Prop:Орань PROP_KEL1 ; Ордат+N+Prop:Ордат PROP_ART ; Оркина+N+Prop:Оркина PROP_KUDO ; @@ -690,7 +666,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Паланя+N+Prop:Паланя PROP_KUDO ; Палаша+N+Prop:Палаша PROP_KUDO ; Палу+N+Prop:Палу PROP_KUDO ; -Палько+Sem/Mal+N+Prop:Палько PROP_KUDO ; Палю+N+Prop:Палю PROP_KUDO ; Памир+N+Prop:Памир PROP_TYL ; Памфилия+N+Prop:Памфилия PROP_KUDO ; @@ -703,11 +678,9 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Парьхон+N+Prop:Парьхон PROP_KAL ; Пасха+N+Prop:Пасха PROP_KUDO ; Паул+N+Prop+Sem/Mal:Паул PROP_KAL ; -Паулюс+N+Prop:Паулюс PROP_OZKS ; Пашурка+N+Prop:Пашурка PROP_KUDO ; Паюрка+N+Prop:Паюрка PROP_KUDO ; Пепа+N+Prop:Пепа PROP_KUDO ; -Пер+N+Prop:Пер PROP_TYL ; Перн+N+Prop:Перн PROP_TYL ; Перской+N+Prop:Перской PROP_PEJ ; Петенька+N+Prop:Петенька PROP_KUDO ; @@ -736,7 +709,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Поляновской+N+Prop:Поляновской PROP_PEJ ; Поляп+N+Prop:Поляп PROP_LAV ; Поляшке+N+Prop:Поляшке PROP_VELE ; -Понтий+N+Prop:Понтий PROP_PEJ ; Порват+N+Prop:Порват PROP_ART ; Поркий+N+Prop:Поркий PROP_PEJ ; Порфишка+N+Prop:Порфишка PROP_KUDO ; @@ -744,7 +716,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Посполит+N+Prop:Посполит PROP_KIT ; Посполита+N+Prop:Посполита PROP_KUDO ; Потекаев+N+Prop:Потекаев PROP_TEV ; -Похьянмаа+N+Prop:Похьянмаа PROP_KUDO ; Пракся+N+Prop:Пракся PROP_KUDO ; Прасё+N+Prop:Прасё PROP_KUDO ; Преображенской+N+Prop:Преображенской PROP_PEJ ; @@ -793,7 +764,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Рузхиммаш+N+Prop:Рузхиммаш PROP_OSH ; Рула+N+Prop:Рула PROP_KUDO ; Руминия+N+Prop:Руминия PROP_KUDO ; -Руновский+N+Prop:Руновский PROP_PEJ ; Руновской+N+Prop:Руновской PROP_PEJ ; Русей+N+Prop:Русей N_PEJ ; Руфь+N+Prop:Руфь PROP_OZIM1 ; @@ -802,33 +772,25 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Сабанцеле+N+Prop:Сабанцеле PROP_VELE ; Саваох+N+Prop:Саваох PROP_LAV ; Савватей+N+Prop:Савватей PROP_PEJ ; -Савка+N+Prop:Савка PROP_KUDO ; Савла+N+Prop+Sem/Mal:Савла PROP_KUDO ; Саврас+N+Prop:Саврас PROP_OZKS ; Садва+N+Prop:Садва PROP_KUDO ; Садукея+N+Prop:Садукея PROP_KUDO ; Сайнеле+N+Prop:Сайнеле PROP_VELE ; Салавох+N+Prop:Салавох PROP_LAV ; -Саломия+N+Prop:Саломия PROP_KUDO ; -Самар+N+Prop:Самар PROP_KAL ; -Самарка+N+Prop:Самарка PROP_KUDO ; Самарян+N+Prop:Самарян PROP_KAL ; -Самос+N+Prop:Самос PROP_OZKS ; Самотраки+N+Prop:Самотраки PROP_VELE ; Сан-Марино+N+Prop:Сан-Марино PROP_KUDO ; Санаксар+N+Prop:Санаксар PROP_KAL ; Санька+N+Prop:Санька PROP_KUDO ; Сарансккабель-Оптика+N+Prop:Сарансккабель-Оптика PROP_KUDO ; Сарансккабель+N+Prop:Сарансккабель PROP_KEL1 ; -Сарлей+N+Prop:Сарлей PROP_PEJ ; Сарманов+N+Prop:Сарманов PROP_LAV ; Сарон+N+Prop:Сарон PROP_KAL ; -Сауш+N+Prop:Сауш PROP_TENGUSH ; Сашок+N+Prop:Сашок PROP_LAV ; Сёдо+N+Prop:Сёдо PROP_KUDO ; Сеелька+N+Prop:Сеелька PROP_KUDO ; Сёка+N+Prop:Сёка PROP_KUDO ; -Селевкия+N+Prop:Селевкия PROP_KUDO ; Селим+N+Prop:Селим PROP_TEV ; Сёматя+N+Prop:Сёматя PROP_KUDO ; Сент-Приест+N+Prop:Сент-Приест PROP_KIT ; @@ -841,8 +803,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Сет+N+Prop:Сет PROP_KIT ; Сигон+N+Prop:Сигон PROP_KAL ; Сидон+N+Prop:Сидон PROP_KAL ; -Сикем+N+Prop:Сикем PROP_TEV ; -Силоам+N+Prop:Силоам PROP_LAV ; Силуан+N+Prop:Силуан PROP_KAL ; Симбирь+N+Prop:Симбирь PROP_KEL1 ; Симей+N+Prop:Симей PROP_PEJ ; @@ -851,7 +811,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Симон-Петра+N+Prop:Симон-Петра PROP_KUDO ; Синай+N+Prop:Синай PROP_PEJ ; Сиников+N+Prop:Сиников PROP_LAV ; -Сион+N+Prop:Сион PROP_KAL ; Сиракуза+N+Prop:Сиракуза PROP_KUDO ; Сирофиникия+N+Prop:Сирофиникия PROP_KUDO ; Сирт+N+Prop:Сирт PROP_KIT ; @@ -892,14 +851,13 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Сюпай+N+Prop:Сюпай PROP_PEJ ; Сяркун+N+Prop:Сяркун PROP_KAL ; Табита+N+Prop:Табита PROP_KUDO ; -Талина+N+Prop:Талина PROP_KUDO ; Талита+N+Prop:Талита PROP_KUDO ; Таратура+N+Prop:Таратура PROP_KUDO ; Тарзан+N+Prop:Тарзан PROP_KAL ; Тарсов+N+Prop:Тарсов PROP_LAV ; Тася+N+Prop:Тася PROP_KUDO ; Татё+N+Prop:Татё PROP_KUDO ; -Татю+N+Prop:Татю PROP_KUDO ; +Татю+N+Prop:Татю PROP_KUDO_FEM ; Татяна+N+Prop:Татяна PROP_KUDO ; Тенгуш+N+Prop:Тенгуш PROP_TENGUSH ; Теньгушевской+N+Prop:Теньгушевской PROP_PEJ ; @@ -914,7 +872,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Тиберий+N+Prop:Тиберий PROP_PEJ ; Тивон+N+Prop:Тивон PROP_KAL ; Тикик+N+Prop:Тикик PROP_TEV ; -Тимон+N+Prop:Тимон PROP_KAL ; Тимотей+N+Prop+Sem/Mal:Тимотей PROP_PEJ ; Тингай+N+Prop:Тингай PROP_PEJ ; Тира+N+Prop:Тира PROP_KUDO ; @@ -930,11 +887,8 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Тося+N+Prop:Тося PROP_KUDO ; Тотмаков+N+Prop:Тотмаков PROP_LAV ; Тото+N+Prop:Тото PROP_KUDO ; -Троада+N+Prop:Троада PROP_KUDO ; -Трондин+N+Prop:Трондин PROP_TYL ; Трошанизэ+N+Prop:Трошани PROP_NIZE ; Тукчин+N+Prop:Тукчин PROP_TYL ; -Тула+N+Prop:Тула PROP_KUDO ; Тургак+N+Prop:Тургак PROP_LAV ; Тюматя+N+Prop:Тюматя PROP_KUDO ; Тюмошка+N+Prop:Тюмошка PROP_KUDO ; @@ -948,7 +902,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Урей+N+Prop:Урей PROP_PEJ ; Урклей+N+Prop:Урклей PROP_PEJ ; Урозбуе+N+Prop:Урозбуе PROP_VELE ; -Урхо+N+Prop:Урхо PROP_KUDO ; Усманка+N+Prop:Усманка PROP_KUDO ; Устя+N+Prop:Устя PROP_KUDO ; Утсйоки+N+Prop:Утсйоки PROP_VELE ; @@ -966,7 +919,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Фёкла+N+Prop:Фёкла PROP_KUDO ; Фена+N+Prop:Фена PROP_KUDO ; Феодор+N+Prop:Феодор PROP_KAL ; -Ферапонт+N+Prop:Ферапонт PROP_ART ; Фессалоника+N+Prop:Фессалоника PROP_KUDO ; Фест+N+Prop:Фест PROP_KIT ; Фетинья+N+Prop:Фетинья PROP_KUDO ; @@ -977,18 +929,13 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Финнмастор+N+Prop+Sem/Plc:Финнмастор PROP_KAL ; Фойникс+N+Prop:Фойникс PROP_OZKS ; Франтишек+N+Prop:Франтишек PROP_TEV ; -Фрола+N+Prop:Фрола PROP_KUDO ; Хапова+N+Prop:Хапова PROP_KUDO ; Хашим+N+Prop:Хашим PROP_TEV ; Хвалынский+N+Prop:Хвалынский PROP_PEJ ; -Хенрик+N+Prop:Хенрик PROP_TEV ; Хилеон+N+Prop:Хилеон PROP_KAL ; Ховра+N+Prop+Sem/Fem:Ховра PROP_KUDO ; -Холмберг+N+Prop:Холмберг PROP_TEV ; Хома+N+Prop+Sem/Mal:Хома PROP_KUDO ; -Хоразин+N+Prop:Хоразин PROP_TYL ; Христоз+N+Prop:Христоз PROP_OZKS ; -Хрола+N+Prop:Хрола PROP_KUDO ; Хрыста+N+Prop:Хрыста PROP_KUDO ; Царьград+N+Prop:Царьград PROP_KAL ; Цемстрой+N+Prop+Sem/Plc:Цемстрой PROP_PEJ ; @@ -1024,8 +971,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Шамиль+N+Prop:Шамиль PROP_KEL1 ; Шведмастор+N+Prop+Sem/Plc:Шведмастор PROP_KAL ; Шевелери+N+Prop:Шевелери PROP_VELE ; -Шерер+N+Prop:Шерер PROP_TYL ; -Шерлов+N+Prop:Шерлов PROP_LAV ; Шилка+N+Prop:Шилка PROP_KUDO ; Ширипин+N+Prop:Ширипин PROP_TYL ; Шлотя+N+Prop:Шлотя PROP_KUDO ; @@ -1036,7 +981,6 @@ test+N+Prop:test PROP_KAL "(eng) /(fin) /(rus) " ; Шугур+N+Prop:Шугур PROP_KAL ; Шуйской+N+Prop:Шуйской PROP_PEJ ; Шулярьге+N+Prop:Шулярьге PROP_VELE ; -Шура+N+Prop:Шура PROP_KUDO ; Шуряй+N+Prop:Шуряй PROP_PEJ ; Эвфрат+N+Prop:Эвфрат PROP_ART ; Эдик+N+Prop:Эдик PROP_TEV ;