Зверніть увагу: розділ відображається, якщо увімкнено додаток «SEO-налаштування». Детальніше дивіться документ «Додаток SEO-налаштування».

Карта сайту

На карті сайту представлений повний перелік розділів, груп товарних позицій та всіх сторінок, наявних на сайті. Карта сайту (sitemap) генерується автоматично і доступна за адресою: https://{домен_вашого_сайту}/sitemap.xml.

Редагування robots.txt

Файл «robots.txt» — це текстовий файл, який знаходиться в кореневій директорії сайту компанії. У нього записуються спеціальні інструкції (вказівки) для пошукових роботів. Ці інструкції можуть забороняти до індексації деякі розділи або сторінки на сайті.

Всі пошукові роботи при заході на сайт в першу чергу шукають файл robots.txt.

Файл «robots.txt» — ідентичний для всіх сайтів, створених на платформі маркетплейса, і вже знаходиться в кореневій директорії вашого сайту. Для поліпшення індексації пошуковими системами, в файлі «robots.txt» заблоковані тільки дублюються сторінки, наприклад, список одних і тих же товарів у вигляді галереї і у вигляді списку:

• http://company.com/product_list — дозволена;
• http://company.com/product_list?view_as=list — заборонена.

За замовчуванням, в файлі «robots.txt» вашого сайту закриті від індексації не інформаційні сторінки, такі як сторінка додавання товару в кошик, замовлення товару, створення відкликання, всі сторінки особистого кабінету і так далі. Відкриття для індексації таких сторінок тільки зашкодить вашому сайту, так як на них немає корисної інформації ні для клієнтів, ні для пошукових систем.

Всі інші сторінки дозволені до індексації.

Для компаній, що підключили зовнішній домен виду «Company.com», є можливість вносити зміни в файл «robots.txt». Більш детально про підключення зовнішнього домену в документі «Доменне им'я компанії».

Для редагування файлу натисніть Редагувати в блоці «Robots.txt», внесіть зміни в поле «Редагування robots.txt» і збережіть їх.

Увага! Редагування «robots.txt» може призвести до неправильної індексації вашого сайту пошуковими системами. Перед внесенням змін до файл проконсультуйтеся попередньо у SEO-фахівця.

Редагування файлу «robots.txt»

Для повернення до початкових установок файлу «robots.txt» натисніть на кнопку Повернути стандартні налаштування та збережіть зміни.

Основні помилки при редагуванні файлу:

• Перейменування або видалення інструкцій:
• User-Agent: YadirectBot
  Disallow:
  • User-Agent: YandexDirect
    Disallow:
• У директиві Host абревіатура протоколу передачі гіпертексту вказана з використанням http:// та закриває слешем /
  • Host: http://company.com/ - не вірно
  • Host: company.com - вірно
• Видалення інструкції «Host: company.com»
• Використання інструкції Allow не завжди коректно сприймається пошуковими системами і може погіршити індексацію вашого сайту.
• Видалення інструкції «Sitemap: http://company.com/sitemap.xml»

Примітка. Карта сайту «sitemap.xml» генерується та оновлюється системою маркетплейса автоматично.

Нижче представлений приклад файлу «robots.txt», що знаходиться в кореневій директорії сайту компанії на маркетплейсі:

Більш детальна інструкція по формуванню файлу «robots.txt» з сайтів пошукових систем: Блокування та видалення сторінок з індексу за допомогою файлу robots.txt