Довго я терпів (насправді, звісно ж, просто було лінь) і ось узяв себе в руки.
Досвід відправки на індексацію кількох сотень тисяч сторінок за тиждень – поїхали.
Працюючи з величезною кількістю сторінок (мова про білий у всіх сенсах проєкт), у мене була одна скалка, що нудить у дупі, – як надсилати на переіндексацію багато урлів, без проблем, реєстрацій і за багато грошей…
Вивчаючи всіх цих гуру західного SEO увірував у те, що варіантів з відправлення урлів кілька, але вони прям сильно заморочені, та незрозуміло, як на ці способи відреагує гугл.
Був варіант платного відправлення на переіндексацію, але з моїм об’ємом дешевше найняти фрілансера, який дзвонитиме в гугл за кожним урлом і проситиме відправити його на індексацію.
У всій цій каші з варіантів, я натрапив на спосіб, який вимагає невеликої підготовки (приблизно 3 дні в моєму випадку) – Google Indexing API.
Упевнений, багато хто чув, деякі застосовують, а деякі, ймовірно, навіть використовують його безпосередньо (тільки код – тільки хардкор). Але оскільки у мене лапки і код я писати не вмію – звик користуватися готовими рішеннями. Працював я з двома скриптами (написані і на node, і на python), обидва скрипти у мене є.
Скрипт На node – це варіант для тих, у кого невеликий обсяг урлів, оскільки він дуже простий, і не підтримує переворот ключів АПІ від Гугл Клауд Консоль. З ним я дуже швидко награвся.
Пітон у моєму випадку найкращий варіант, оскільки він дає змогу запускати індексацію один раз на добу (скріпт вміє автоматично перебирати ключі), тоді як node необхідно щоразу перепідключати.
Тепер найскладніше – на що ж витрачено час для підготовки? Реєстрація акаунтів і генерація ключів.
Трохи передісторії – у Гугла є Гугл Клауд Консоль (використовують її розробники софту і подібні до нього хлопці), ось у цьому Клауді є можливість отримати ключ для відправки УРЛів на індексацію, але є ліміти – ліміт на відправлення через АПІ не більш як 200 урлів на добу для одного проєкту. Проєкт – це складова частина акаунта. В одному акаунті не може бути більше 12 проєктів.
Акаунт реєструється на електронну пошту – тепер ще раз, порядок дій:
- Реєструємо акаунт (унікальна адреса електронної пошти)
- Створюємо 12 проєктів і отримуємо 12 ключів або 2400 урлів на відправлення.
- Далі повторюємо стільки разів, скільки ви хочете. Я поки дійшов до 31к урлів і поки зупинився.
Важливе уточнення – кожному ключу, який ми отримаємо під час реєстрації проєкту, необхідно давати доступ власника сайту – інакше це не працює. Страшно, згоден, але іншого варіанту немає.
І щодо безпеки – Я відправляю в Гугл по 31к урлів другий місяць, ніяких санкцій помічено не було. Але я перед тим як почати, поспілкувався з хлопцями, які пропонують індексацію 100к урлів на добу за бабки, – ті запевнили, що 100к – це прям іграшки, порівняно з тим, як деякі працюють.
Але в будь-якому разі, вирішувати то вам!
