Translation to Russian

[pdumin]

Hi there 👋

Let's translate the course to Russian so that the whole community can benefit from this resource 🌎!

Below are the chapters and files that need translating - let us know here if you'd like to translate any and we'll add your name to the list. Once you're finished, open a pull request and tag this issue by including #issue-number in the description, where issue-number is the number of this issue.

🙋 If you'd like others to help you with the translation, you can also post in our forums or tag @_lewtun on Twitter to gain some visibility.

Chapters

0 - Setup

• [x] 1.mdx pdumin

1 - Transformer models

• [x] 1.mdx pdumin
• [x] 2.mdx pdumin
• [x] 3.mdx pdumin
• [x] 4.mdx pdumin
• [x] 5.mdx pdumin
• [x] 6.mdx pdumin
• [x] 7.mdx pdumin
• [x] 8.mdx pdumin
• [x] 9.mdx pdumin
• [x] 10.mdx pdumin

2 - Using 🤗 Transformers

• [x] 1.mdx blademoon
• [x] 2.mdxblademoon
• [x] 3.mdxblademoon
• [x] 4.mdxblademoon
• [x] 5.mdxblademoon
• [x] 6.mdxblademoon
• [x] 7.mdxblademoon
• [x] 8.mdxblademoon

3 - Fine-tuning a pretrained model

• [x] 1.mdx pdumin
• [x] 2.mdxpdumin
• [x] 3.mdxpdumin
• [x] 3_tf.mdxpdumin
• [x] 4.mdxpdumin
• [x] 5.mdxpdumin
• [x] 6.mdxpdumin

4 - Sharing models and tokenizers

• [x] 1.mdxpdumin
• [x] 2.mdxpdumin
• [x] 3.mdxpdumin
• [x] 4.mdxpdumin
• [x] 5.mdxpdumin
• [x] 6.mdxpdumin

5 - The 🤗 Datasets library

• [x] 1.mdxpdumin
• [x] 2.mdxpdumin
• [x] 3.mdxpdumin
• [x] 4.mdxpdumin
• [x] 5.mdxpdumin
• [x] 6.mdxpdumin
• [x] 7.mdxpdumin
• [x] 8.mdxpdumin

6 - The 🤗 Tokenizers library

• [x] 1.mdxpdumin
• [x] 2.mdxpdumin
• [x] 3.mdxpdumin
• [x] 3b.mdxpdumin
• [x] 4.mdxpdumin
• [x] 5.mdxpdumin
• [x] 6.mdxblademoon
• [x] 7.mdxblademoon
• [x] 8.mdxblademoon
• [x] 9.mdxblademoon
• [x] 10.mdxblademoon

7 - Main NLP tasks

• [x] 1.mdxblademoon
• [x] 2.mdxblademoon
• [x] 3.mdxblademoon
• [x] 4.mdxblademoon
• [x] 5.mdxblademoon
• [x] 6.mdxblademoon
• [x] 7.mdxblademoon
• [x] 8.mdxblademoon
• [x] 9.mdxblademoon

8 - How to ask for help

• [x] 1.mdx
• [x] 2.mdx
• [x] 3.mdx
• [x] 4.mdx
• [x] 4_tf.mdx
• [x] 5.mdx
• [x] 6.mdx
• [x] 7.mdx

9 – Building and sharing demos

• [x] 1.mdxblademoon
• [x] 2.mdxblademoon
• [x] 3.mdxblademoon
• [x] 4.mdxblademoon
• [x] 5.mdxblademoon
• [x] 6.mdxblademoon
• [x] 7.mdxblademoon
• [x] 8.mdxblademoon
• [x] 9.mdxblademoon

Events

• [x] 1.mdxblademoon
• [x] 2.mdxblademoon
• [x] 3.mdxblademoon

Subtitles

• [x] 00_welcome-to-the-hugging-face-course.srt
• [x] 01_the-pipeline-function.srt
• [x] 02_the-carbon-footprint-of-transformers.srt
• [x] 03_what-is-transfer-learning.srt
• [x] 04_the-transformer-architecture.srt
• [x] 05_transformer-models-encoders.srt
• [x] 06 transformer-models-decoders.srt
• [x] 07_transformer-models-encoder-decoders.srt
• [ ] 08_what-happens-inside-the-pipeline-function-(pytorch).srt
• [ ] 09_what-happens-inside-the-pipeline-function-(tensorflow).srt
• [ ] 10_instantiate-a-transformers-model-(pytorch).srt
• [ ] 11_instantiate-a-transformers-model-(tensorflow).srt

[lewtun]

I've now deployed the Russian version and you can access it here 🥳 : https://huggingface.co/course/ru/chapter1/1

(We plan to add a button to the dropdown so this can be accessed directly from the English version)

[pdumin]

It's great! Thank you!

[svv73]

I would like to help translating chapter 2. Now translate section 1.

[pdumin]

I would like to help translating chapter 2. Now translate section 1.

The first chapter is already translated: https://github.com/huggingface/course/pull/98

[pdumin]

I'll start translating Chapter 3: Fine-tuning a pretrained model soon.

[lewtun]

I'll start translating Chapter 3: Fine-tuning a pretrained model soon.

Amazing 🚀 !

[alex-badin]

Hi everyone! wanna join the ru translation. @svv73 , I can finish chapter 2, or please advise if you will.

[svv73]

Hi everyone! wanna join the ru translation. @svv73 , I can finish chapter 2, or please advise if you will.

Hi. @alex-badin, i have finished section 2, chapters 2. I plan to finish the rest in the near future. Also made some edits to section 1.

[ilnarkz]

I can participate too, I'll take chapter 8.

[ilnarkz]

You have an error. events/1.mdx does not open. You need to change to https://github.com/huggingface/course/blob/main/chapters/en/events/1.mdx

[blademoon]

Good afternoon. I translate and prepare subtitles for the video course.

[pdumin]

Good afternoon. I translate and prepare subtitles for the video course.

Hey! If its possible, please translate chapter 8. I will do the rest.

[blademoon]

Hey! If its possible, please translate chapter 8. I will do the rest.

I translate everything sequentially. This is important in order to keep a coherent and unified style. I plan to do subtitles for all the videos in the course.

[pdumin]

Hey! If its possible, please translate chapter 8. I will do the rest.

I translate everything sequentially. This is important in order to keep a coherent and unified style. I plan to do subtitles for all the videos in the course.

Okay, then I will finish translating the course itself and be able to follow a single notation in my texts. Thanks!

[501Good]

Hi! I would like to contribute to the translation. Is chapter 7 free to take on? Otherwise, I can proofread the translated chapters since I've noticed occasional typos and grammar errors, together with some phrases that would benefit from rephrasing.

[blademoon]

@pdumin Hi, do you translate the word "batch" as "пакет" or as "батч"?

[blademoon]

@501Good Good afternoon. Are you talking about subtitles? I translate subtitles. We agreed that in order to maintain a consistent and unified style, everyone translates one thing at a time.

[blademoon]

@pdumin Perhaps we should make a table with established translations of some terms so that we don't have discrepancies. The idea is that this would greatly improve the quality of the translation.

[501Good]

@501Good Good afternoon. Are you talking about subtitles? I translate subtitles. We agreed that in order to maintain a consistent and unified style, everyone translates one thing at a time.

Hi @blademoon! I was talking about the chapters.

[blademoon]

@501Good ))) Chapters where? The video is also divided into chapters) Look at this.

[501Good]

@501Good ))) Chapters where? The video is also divided into chapters) Look at this.

The text version of the course: https://github.com/huggingface/course/tree/main/chapters/ru.

[blademoon]

The text version of the course: https://github.com/huggingface/course/tree/main/chapters/ru.

You'd better ask @pdumin about this. I translate subtitles for videos.

[pdumin]

@blademoon The idea with the correspondence table is great and really userful.

@501Good I translated most of the text course. Now in the process of translating the sixth chapter. You can take chapters 7 and 8, the rest is already done. Also, any help in checking broken links and any typos will be useful to us. Please let me know what you are going to do.

[501Good]

@pdumin I have started with proofreading. I will go through chapters 0-5 then, and after, take chapters 7 and 8 for translation if no one takes them by then. Like this, I will also be more familiar with the language that you used so that my translations can fit better. I have also noticed that the English text has been updated in some places (e.g. new people in Chapter 1, Lesson 1), so I will add missing parts as well.

[blademoon]

@pdumin Need to push through the creation of the folder "course/subtitles/ru" and the subtitle files for chapter 1 of the video course. I did. But I need the folder "../ru/" to add chapter 2. How do I do this?

[blademoon]

@blademoon The idea with the correspondence table is great and really userful.

Can you create a document on Google Disk or are there alternative sites?

[501Good]

@blademoon The idea with the correspondence table is great and really userful.

Can you create a document on Google Disk or are there alternative sites?

This repo recommends creating a TRANSLATING.txt file in the chapters directory for the language (see here for German as an example). For the glossary, we can follow the example here.

[pdumin]

@pdumin Need to push through the creation of the folder "course/subtitles/ru" and the subtitle files for chapter 1 of the video course. I did. But I need the folder "../ru/" to add chapter 2. How do I do this?

You can just make a copy of en folder and replace content in corresponding files. It works for text course.

@501Good It will be nice if you create this file and drop a link to it here. Please mention usernames here so we can commit the changes. Also, if you find typos and errors, make commits immediately, in which case we will be able to keep the translation up to date.

Thanks everyone for the help.

[blademoon]

You can just make a copy of en folder and replace content in corresponding files. It works for text course.

@pdumin I create this. As i undestand this is correct way to create file and folder for russian subtitles. I must delet this and do like you say?

[pdumin]

You can just make a copy of en folder and replace content in corresponding files. It works for text course.

@pdumin I create this. As i undestand this is correct way to create file and folder for russian subtitles. I must delet this and do like you say?

No, I think you did everything right. Anyway, the hugginface members will be able to comment if there are any errors.

[blademoon]

No, I think you did everything right. Anyway, the hugginface members will be able to comment if there are any errors.

OK. But the folder still hasn't appeared... With the first chapter of the video course.

[pdumin]

@blademoon This takes some time and verification, usually can take several days.

[blademoon]

@pdumin OK. I have finished translating the subtitles for chapter 2 of the video course. I will make the STR files today. I decided it's probably better to translate "batch" as "батч".

[blademoon]

@pdumin @501Good https://github.com/huggingface/course/pull/489

[501Good]

@pdumin Several sections are missing from chapter 2, do you mind if I take over their translation and proofread existing sections in chapter 2?

[pdumin]

@501Good These sections were supposed to be translated by other users, but apparently not translated. If you want, you can supplement their results.

I'm sorry, I didn't follow this.

[blademoon]

@501Good @pdumin Mask Filling | предсказание замаскированного токена - точно речь не про "заполнение маски"?

Model Hub | Model Hub - хаб моделей

| Padding | padding / выравнивание - здесь речь идёт про дополнение предложений, может лучше переводит как "дополнение/заполнение"? Токен заполнения, Токен дополнения... Это как Truncate - усечение/обрезка/подрезка...

Summarization | автоматическое реферирование - здесь спорный момент! Вообще это "резюмирование текста", то есть составление кракого варианта. Но на практике я чаще встречал перевод образованием неологизма - "суммаризация текста".

Может лучше так? Как считаете?

И вопрос, в этой ветке можно на русском писать? С другими все понятно, там люди разных национальностей, но здесь то мы все на одном языке говорим)

[501Good]

@blademoon

• Mask Filling | Тоже изначально думал про "заполнение маски", но звучит немного непонятно, если честно, поэтому выбрал описательный оборот. Хотя и английский вариант mask filling тоже кажется не совсем очевидным. Если "заполнение маски" часто применяется в русскоязычной среде, тогда лучше применять его, хотя я встречал и "предсказание замаскированного токена" или "восстановление маскированного токена". Возможно, лучше тогда делать уточнение, типа "заполнение маски (пропуска)" или "заполнение маски-пропуска"?
• Model Hub | Это часть экосистемы Hugging Face, то есть скорее имя собственное.
• Padding | Не будет ли в таком случае "заполнение" вызывать путаницу с "заполнением маски"? Мне кажется, что "выравнивание" больше подходит здесь по смыслу, так как padding используется, чтобы сделать все последовательности в батче одинаковой длины. Тогда padding как существительное будет "токен выравнивания".
• Summarization | Согласен, "резюмирование" или "суммаризация" звучат лучше, чем "реферирование". Тут я ориентировался на русскую страницу Википедии.

[pdumin]

@blademoon

• Mask Filling | Мне хорошим вариантом кажется «восстановление (предсказание) маскированного токена», такой вариант я встречал чаще, но готов к любому из предложенных.
• Model Hub оставил бы Model Hub. В целом, если все же стремиться к русскому, то «репозиторий моделей» Hugging Face.
• Padding | Мне крайне непривычно слышать «выравнивание», «padding» / «пэддинг» есть и в свертках, и там его вроде бы так и называют. Но вновь, если кто-то уверен, что это недопустимо – готов на более приемлемый для вас вариант.
• Саммаризация, кажется, уже плотно вошло в лексикон. И рефрерирование, и резюмирование кажутся мне косноязычными, я бы оставил «саммаризация».

[blademoon]

@pdumin @501Good

• Model Hub | Есть у меня предположение, что здесь просто наши англоязычные коллеги просто написали оба слова с большой буквы. Потому, что особого смысла превращать "хаб моделей" в название (имя собственное) не вижу смысла. Он все равно останется хабом моделей.
• Padding | padding | Вот тут есть проблема, когда это имя атрибута/параметра/опции - то это никак не переведится. А вот в тексте где идёт описание процесса, можно получить "падинг на падинге сидит и падингом погоняет"...
• Summarization | Согласен с вами, давайте просто оставим "суммаризация".

Вообще, в субтитрах написание некоторых слов с большой буквы у меня порой много вопросов вызывает. Есть подозрение что это особенности процесса транскрибации с помощью нейронной сети. Ведь получить нормальное предложение c пунктуацией (насколько я знаю) можно только с помощью Whisper. Но у него есть особенность. Он порою может ошибиться с расстановкой заглавных букв. Таким образом "model hub Hugging Face" может легко стать "Mode Hub Hugging Face". Но логический, в этом нет никакого смысла.

[blademoon]

@501Good @pdumin Насчёт Mask Filling тоже, а не являются ли заглавные буквы результатом транскрибации?

[blademoon]

@501Good @pdumin Субтитры все буду переделывать. Неверный подход выбрал. Нужно все же оставить разбивку на короткие строки а не предложения целиком, в некоторых местах предложения получаются слишком длинные (занимают пол экрана).

[blademoon]

@501Good Good afternoon. Can you post here a direct link to the translation glossary file we agreed on? So that you can find it quickly.

[501Good]

Hi @blademoon! I keep the updated glossary here.

[blademoon]

@501Good @pdumin pad sentence / дополнение предложения, а вот Padding действительно нет смысла переводить. Это в большинстве своем имя собственное. Вообще переводиться "набивка/добивка", но звучит конечно как в мебельном цеху))) В общем, предлагаю "дополнение" как вариант не противоречащий и не вступающий в конфликт с вашими замечаниями. К тому же он по смыслу подходит и для сверточных сетей. Конечно за исключением когда это собственное.

[blademoon]

@pdumin Можешь добавить в список задач и субтитры по частям? Я делаю.

[blademoon]

@501Good

Encoder - кодировщик/кодер (Словарь иностранных слов. Комлев Н.Г., 2006) Decoder - декодировщик/декодер (Словарь иностранных слов. Комлев Н.Г., 2006)

Там, кстати есть немало слов которые являются неологизмами. То есть как раз никак не переводиться, так как заимствование (неологизм). Наверное лучше сначала проверять нет ли нашего спорного слова там, а потом уже переводить его. Время сэкономим, меньше голову ломать))))

[501Good]

@501Good

Encoder - кодировщик/кодер (Словарь иностранных слов. Комлев Н.Г., 2006) Decoder - декодировщик/декодер (Словарь иностранных слов. Комлев Н.Г., 2006)

Там, кстати есть немало слов которые являются неологизмами. То есть как раз никак не переводиться, так как заимствование (неологизм). Наверное лучше сначала проверять нет ли нашего спорного слова там, а потом уже переводить его. Время сэкономим, меньше голову ломать))))

Я не думаю, что здесь есть какой-то однозначно правильный вариант. Да, возможно в этом словаре есть вхождения "кодер" и "декодер", но "кодировщик" и "декодировщик" также используются, например, тут. Если посмотреть на конспекты из ИТМО, то тут "кодировщик" и "энкодер" применяются взаимозаменяемо. А тут автор использует исключительно "энкодер" и "декодер". Даже есть посмотреть на определение слова "кодировщик", то можно увидеть "приспособление (в т.ч. компьютерная пограмма) для кодирования информации", что вполне подходит в нашем случае.

Поэтому, мне кажется, что в нашем случае нужно просто определиться, будем ли мы использовать "кодировщик" и "декодировщик" или "энкодер" (но уж никак не просто "кодер") и "декодер", или же будем использовать оба варианта взаимозаменияемо. Также, мне кажется, что тот же "autoencoder" звучит намного лучше как "автокодировщик", чем "автоэнкодер".

[blademoon]

self-supervised learning - Самообучение под наблюдением

[blademoon]

Corrected the translation and timestamps for the first part of the video course. Исправил перевод и временные метки к первой части видеокурса.