Skip to content

Latest commit

 

History

History
193 lines (136 loc) · 18 KB

README.en.md

File metadata and controls

193 lines (136 loc) · 18 KB

[EN] Does the Russian language need the letter «ё»?

ru en DeepWiki

Short answer — yes.

Introduction

To answer this question, let's first open the rules of Russian orthography and read:

The use of the letter ё can be consistent or selective.

Consistent use of the letter ё is mandatory in the following types of printed texts:

  • in texts with consistently marked stress signs;

  • in books addressed to younger children;

  • in educational texts for younger schoolchildren and for foreigners learning Russian.

Note 1.

Consistent use of ё is adopted for the illustrative part of these rules.

Note 2.

At the author's or editor's discretion, any book may be printed consistently with the letter ё.

Note 3.

In dictionaries, words with the letter ё are placed in the general alphabet with words containing the letter е, for example: еле, елейный, ёлка, еловый, елозить, ёлочка, ёлочный, ель; веселеть, веселить(ся), весёлость, весёлый, веселье.

In ordinary printed texts the letter ё is used selectively. It is recommended to use it in the following cases.

  1. To prevent incorrect identification of a word, e.g.: всё, нёбо, лётом, совершённый (as opposed to все, небо, летом, совершенный), including to indicate the place of stress in a word, e.g.: вёдро, узнаём (as opposed to ведро, узнаем).

  2. To indicate the correct pronunciation of a word — either rare, insufficiently well-known, or commonly mispronounced, e.g.: гёзы, сёрфинг, флёр, твёрже, щёлочка; including to indicate the correct stress, e.g.: побасёнка, приведённый, унесённый, осуждённый, новорождённый, филёр.

  3. In proper names — surnames, geographic names, e.g.: Конёнков, Неёлова, Катрин Денёв, Шрёдингер, Дежнёв, Кошелёв, Чебышёв, Вёшенская, Олёкма.

Study

Homographs are words that are written the same way but are pronounced and/or have different meanings depending on the stress. In Russian, homographs often arise due to the optional use of the letter «ё».

Source: Homograph - Wikipedia.

In Russian there are homographs that differ only by the presence or absence of the letter «ё». This can lead to a change in the meaning of a word. In such cases, the letter «ё» acts like a diacritical mark, indicating stress and therefore a difference in meaning.

The purpose of the further research was to identify possible homographs involving the letter «ё» where replacing the letter with «е», whether intentionally or accidentally, changes the meaning of the word — or even the meaning of the whole sentence.

Important: homographs and homonyms are different things.

Homonyms — words and other language units that are the same in spelling and sound but different in meaning.

Source: Homonym - Wikipedia.

Algorithm

In the previous iteration of the project there was a suggestion to sort the final table by word popularity. To make that possible for the algorithm that finds pairs, a database containing word occurrence frequencies was used: Baksalyar/mc.hertzbeat.ru-Frequency-Dictionaries — 480,092 words.

Next a list was formed of words that occurred both with the letter «ё» and with the letter «е» and it was sorted by the sum of frequencies. This produced a table with 4,929 unique pairs.

Unfortunately, the table contained a huge number of pairs where the word with the letter «е» was simply a typo.

It was then necessary to filter this table so that only rows remained where both words exist. For this the list of Russian lemmas and their derived forms by Andrey Usachev was ideal; he in turn used materials from A. A. Zaliznyak's morphological dictionary — 86,839 lemmas and 1,558,781 derived word forms.

After filtering, the list contained only 198 word pairs; the first 10 pairs are shown below, and the full version is in /output/result.md.

Index Word with 'ё' Lemmas and derived forms Word with 'е' Lemmas and derived forms Combined Frequency
1 чём что: чего́, че́м, чему́, что́, чём чем чем: че́м / что: чего́, че́м, чему́, что́, чём 48094
2 лёт лёт: ле́ту, лёт, лёта, лётам, лётами, лётах, лёте, лётов, лётом, лёту, лёты лет лета: ле́т, ле́та, ле́там, ле́тами, ле́тах / лето: ле́т, ле́та, ле́там, ле́тами, ле́тах, ле́те, ле́то, ле́том, ле́ту 40662
3 всём весь: ве́сь, все́, всего́, все́й, все́м, все́ми, всему́, все́х, все́ю, всю́, вся́, всём всем весь: ве́сь, все́, всего́, все́й, все́м, все́ми, всему́, все́х, все́ю, всю́, вся́, всём 11847
4 своё свой: сва́я, сво́го, сво́е, своего́, свое́й, своему́, свое́ю, свои́, свои́м, свои́ми, свои́х, сво́й, сво́м, сво́му, сво́ю, своя́, своё, своём, сву́ю, свы́е, свы́м, свы́ми, свы́х свое свой: сва́я, сво́го, сво́е, своего́, свое́й, своему́, свое́ю, свои́, свои́м, свои́ми, свои́х, сво́й, сво́м, сво́му, сво́ю, своя́, своё, своём, сву́ю, свы́е, свы́м, свы́ми, свы́х 9592
5 нём он: его́, е́й, ему́, е́ю, её, и́м, и́ми, и́х, него́, не́й, нему́, не́ю, неё, ни́м, ни́ми, ни́х, нём, о́н, она́, они́, оно́ нем немой: не́м, нема́, нема́я, неме́е, неме́й, немо́, немо́го, немо́е, немо́й, немо́м, немо́му, немо́ю, нему́ю, немы́, немы́е, немы́м, немы́ми, немы́х, понеме́е, понеме́й 9170
6 объём объём: объём, объёма, объёмам, объёмами, объёмах, объёме, объёмов, объёмом, объёму, объёмы объем объесть: объе́вшая, объе́вшего, объе́вшее, объе́вшей, объе́вшем, объе́вшему, объе́вшею, объе́вшие, объе́вший, объе́вшим, объе́вшими, объе́вших, объе́вшую, объе́ден, объе́дена, объе́денная, объе́денного, объе́денное, объе́денной, объе́денном, объе́денному, объе́денною, объе́денную, объе́денные, объе́денный, объе́денным, объе́денными, объе́денных, объе́дено, объе́дены, объеди́м, объеди́те, объедя́т, объе́л, объе́ла, объе́ли, объе́ло, объе́м, объе́ст, объе́сть, объе́шь, объе́шьте 6933
7 звёзды звезда: звезда́, звезде́, звездо́й, звездо́ю, звезду́, звезды́, звёзд, звёздам, звёздами, звёздах, звёзды звезды звезда: звезда́, звезде́, звездо́й, звездо́ю, звезду́, звезды́, звёзд, звёздам, звёздами, звёздах, звёзды 3133
8 днём день: де́нь, дне́, дне́й, дни́, дню́, дня́, дня́м, дня́ми, дня́х, днём днем днем: днем 2343
9 полёт полёт: полёт, полёта, полётам, полётами, полётах, полёте, полётов, полётом, полёту, полёты полет полоть: по́лем, по́лемся, по́лет, по́лете, по́летесь, по́лется, по́лешь, по́лешься, поли́, поли́сь, поли́те, поли́тесь, поло́вшая, поло́вшего, поло́вшее, поло́вшей, поло́вшем, поло́вшему, поло́вшею, поло́вшие, поло́вший, поло́вшим, поло́вшими, поло́вших, поло́вшую, поло́л, поло́ла, поло́лась, поло́ли, поло́лись, поло́ло, поло́лось, поло́лся, по́лот, по́лота, по́лотая, полоте́й, по́лоти, по́лото, по́лотого, по́лотое, по́лотой, по́лотом, по́лотому, по́лотою, по́лотую, по́лоты, по́лотые, по́лотый, по́лотым, по́лотыми, по́лотых, по́лоть, по́лотью, полотя́м, полотя́ми, полотя́х, по́лю, полю́сь, по́лют, по́лются, по́лющая, по́лющаяся, по́лющего, по́лющегося, по́лющее, по́лющееся, по́лющей, по́лющейся, по́лющем, по́лющемся, по́лющему, по́лющемуся, по́лющею, по́лющеюся, по́лющие, по́лющиеся, по́лющий, по́лющийся, по́лющим, по́лющими, по́лющимися, по́лющимся, по́лющих, по́лющихся, по́лющую, по́лющуюся, по́ля 2187
10 счёта счёт: счета́, сче́там, сче́тами, сче́тах, сче́тов, сче́ты, счёт, счёта, счёте, счётом, счёту счета счёт: счета́, сче́там, сче́тами, сче́тах, сче́тов, сче́ты, счёт, счёта, счёте, счётом, счёту 1676

It is worth noting that the list can be filtered further: remove words with a single lemma — i.e., where the typo only changes a derived form of the word.

Conclusion

With free (non-mandatory) use of the letter «ё» there is a small chance of changing the meaning of a sentence, so the orthography changes of 1956 that allow voluntary use of this letter are objectively incorrect.

Yes, they look similar in writing, but that is where their similarity ends. Phonetically they sound different, and a person may misinterpret the meaning of your text.

Example sentences

You can use LLMs where LLMs are truly good — composing text. For this I used the model ChatGPT-5:

«У нас всё в порядке.»
«У нас все в порядке.»
— with ё: «всё» = "everything" (the whole, all together) — "всё в порядке" = "everything (things/affairs) is in order."
— with е: "все в порядке" = "everyone is fine" — a different meaning (whole ≠ people).

«Чтобы рассмешить публику, актёр надел маску и в шутку изображал, будто он — осёл, привлекая внимание к своей нелепой походке.»
«Чтобы рассмешить публику, актёр надел маску и в шутку изображал, будто он — осел, привлекая внимание к своей нелепой походке.»
— with ё: осёл = the animal (donkey).
— with е: осел (without ё) can be read as the past tense of «осесть» — "sat down/settled" (depending on context) — meaning: "he pretended that he sat down" — a completely different action.

«При обследовании полости рта врач аккуратно осмотрел нёбо, отметив участки с изменённым цветом.»
«При обследовании полости рта врач аккуратно осмотрел небо, отметив участки с изменённым цветом.»
— with ё: in the first variant the word clearly refers to the palate (in the mouth).
— with е: the intended meaning suddenly shifts to the celestial sky.

Another excellent example where without contextual semantic analysis it is impossible to determine whether the letter «ё» should be placed in the last word of the following sentence from A. Tolstoy's novel Peter I:

«Вот, скажут, такого господина нам бог послал, при таком-то передохнём…».
«Вот, скажут, такого господина нам бог послал, при таком-то передохнем…».
— with ё: «передохнём» (from "отдохнём") — "we will all rest."
— with е: «передохнем» (from "передохнуть") — "we will all die."

Yoficators and de-yoficators

After finishing the project I discovered a rabbit hole in the form of yoficators...

Yoficator — a program or a text-editor module that replaces the letter «е» with «ё» in Russian-language texts according to Russian language rules where it should be used.

De-yoficator — a program or a text-editor module that replaces the letter «ё» with «е» in Russian-language texts according to Russian language rules where it should be used.

Source: Yoficator - Wikipedia.

All yoficators have their own lists of disputed words where, without semantic context analysis, it is impossible to decide whether to correct «е» to «ё» — literally the same problem as this project. Even GitHub repository names are very similar. After studying the word lists from open-source repositories it is hard to say who has the most complete list. They differ almost everywhere and deeper analysis is required.

Useful resources and open-source yoficators

Technical information

To run the script from the terminal:

# Install the UV package manager
curl -LsSf https://astral.sh/uv/install.sh | sh
# powershell -ExecutionPolicy ByPass -c "irm https://astral.sh/uv/install.ps1 | iex" on Windows

# Create virtual environment and install dependencies
uv sync

# Activate virtual environment
. .venv/bin/activate
# .venv\Scripts\activate on Windows

# Install pre-commit hooks
uv run pre-commit install

# Run pre-commit
uv run pre-commit run --all-files

# Ruff
uv run ruff format
uv run ruff check --fix

# Run the script
uv run python -m src.yo_pairs --validate both

# Possible arguments:
# --output: path to save the result
# --validate {none,first,second,both}: whether to filter the list obtained after the first step
# --no-download: do not download word lists

This program is licensed under the MIT License. Please read the License file to know about the usage terms and conditions.


«День за днём горим огнём,
Не вздохнём, не охнем,
Если не передохнём,
Значит, передохнем...»

— Valentin Beresto