Как определить поисковых роботов с помощью PHP

google-bot

В прошлой статье «Как выдать роботу Google страницы, которые он еще не видел?«, я попытался обрисовать ситуацию, когда нам нужно запомнить где бывал робот и выдать ему контент который он еще не видел. В принципе алгоритм простой, но он очень сильно заполняет базу данных. Кроме того как по мне, получилось достаточно не мало кода, некоторый … Read more