robots.txt — текстовый файл, в котором прописываются правила, определяющие каким директориям сайта, а также типам файлов разрешено либо запрещено индексироваться в поисковых системах.
Мы используем cookie для корректной работы сайта, сохранения настроек и аналитики. Нажимая «Принять», вы соглашаетесь с использованием cookie в соответствии с Политикой конфиденциальности.