Дорвеї можуть завдати серйозної шкоди вашому сайту через розмиття унікальності текстів.
Конкретний приклад: стаття ранжувалася в Google, потім текст по шматках розтягнули дорвеї.
Підсумок: стаття майже повністю втратила трафік. За текстом в лапках на перших місцях в Google стояли дорвеї, а сама стаття потрапила в додаткові результати. Причому, ви про це можете навіть не підозрювати, оскільки частина дорів відмирає/баниться з часом. В даному конкретному випадку, падіння трафіку довелося на найвищий сезон (листопад, грудень), коли ця стаття приносить максимальний дохід в році.
В цьому випадку допоміг тільки повний перепис статті. А це, зазвичай, недешеве задоволення.
Нижче варіанти захисту від дореїв:
- закриття сайт від індексації Bing. Левова частка популярних доргенів побудована на парсингу Bing і невеликим трафіком з цього пошуковика можна знехтувати.
- Додавання сайту на CloudFlare. CloudFlare дозволить відсікти частину ботів.Також там можна відсікти всі нецільові країни, наприклад Росія, Україна, Білорусь, Китай, Індонезія, Філіппіни (якщо ви робите сайт під бурж).
- вилов діапазонів IP адрес для vps / dedic з яких йде парсинг, додавання цих діапазонів у Firewall.
