Карта сайту, якої не було: чому новий домен місяцями не потрапляє в пошук
Ми чекали індексації тиждень і думали, що справа у віці домену. Виявилося, карта сайту не була відправлена. А без неї новий домен знайти майже нічим.
Коли новий сайт не з’являється в пошуку, перша думка завжди одна. Домен молодий, треба чекати.
Думка правильна. Рівно настільки, наскільки ви впевнені, що зробили решту.
Ми не зробили.
Як пошуковик взагалі знаходить новий домен
Способів два.
Перший: посилання. Робот ходить по вебу, бачить чуже посилання на вас і йде за ним. Для домену, якому тиждень, цей спосіб мертвий. На вас ще ніхто не послався, бо про вас ніхто не знає.
Другий: карта сайту. Файл зі списком адрес, який ви віддаєте пошуковику самі.
Для нового домену це не «один із двох варіантів». Це єдиний.
Що ми знайшли у себе
Відкрили Search Console, розділ карт сайту.
Порожньо.
Файл при цьому існував. Він генерувався при кожній збірці, лежав за своєю адресою і нормально віддавався на запит. Просто його ніхто нікуди не надіслав.
Різниця між «карта є» і «карту відправлено» виглядає формальністю. Вона не формальність. Пошуковик не піде шукати ваш файл навмання. Про нього треба сказати: рядком у robots.txt або відправкою через консоль.
Ми зробили файл. І не сказали про нього нікому.
Скільки це коштувало
Чесно: точно порахувати не можна. Ми не знаємо, що сталося б інакше.
Але поведінка після відправки говорить сама за себе. Ми надіслали карту через API і подивилися консоль через хвилину. Час останнього зчитування вже стояв. Google забрав файл негайно.
До цього він за ним не приходив жодного разу.
Три хвилини на самоперевірку
Крок 1. Відкрийте вашсайт/robots.txt. Шукайте рядок зі словом Sitemap:. Немає такого рядка? Карту автоматично не знайдуть.
Крок 2. Відкрийте адресу з цього рядка. Має відкритися XML зі списком сторінок. Якщо 404, справа не в пошуковику.
Файл називають по-різному. Astro та більшість систем роблять sitemap-index.xml, хтось обходиться sitemap.xml. Перевірте обидва варіанти.
Крок 3. Search Console, розділ «Файли Sitemap». Порожньо? Вставте адресу і надішліть. Це займає секунд двадцять.
Крок 4. Наступного дня подивіться колонку «Останнє зчитування». Дата з’явилася, значить забрали. Порожньо через тиждень, значить із самим файлом щось не так.
Чотири способи зіпсувати карту
Адреси з перенаправленням. У карті стоїть site.com, сервер відповідає 301 і веде на www.site.com. Кожна адреса стає зайвим переходом. На сайті з десятьма сторінками це дрібниця. На магазині з тисячею це помітно з’їдає бюджет обходу.
Адреси, закриті в robots.txt. Карта каже «обійди», robots каже «не ходи». Пошуковик слухає robots, а вам пише помилку в звіті.
Адреси, яких немає. У нас у карті виявилося три сторінки, що віддавали 404. Вони лежали там усе життя сайту. Ніхто жодного разу не подивився.
Карта, зібрана руками одного разу. Через півроку в ній не буде половини сторінок, і ви про це не дізнаєтесь.
Чого відправлена карта не зробить
Вона не зробить вас видимими. Вона зробить вас знайденими.
Це різні речі. Далі все одно потрібні зовнішні посилання, нормальний контент і час. Карта лише прибирає перешкоду на самому початку.
Але без неї новому домену просто нема з чого починати. Дві хвилини роботи. Найдешевша дія в усьому переліку технічного SEO.
Перевірити свій сайт разом із рештою вісімнадцяти пунктів можна тут: експрес-аудит.