Undsoft.com

Поисковые роботы, какими умными алгоритмами они не были наделены, все равно — обычные программы. Которые к тому же должны кравлить целую тучу разных сайтов. Неудивительно, что об изменениях на вашем сайте робот может узнать через неделю после самих изменений. В случае с Гуглботом это особенно актуально для страниц с низким PageRank.

У вас есть не так много средств, чтобы управлять тем, как часто робот просматривает сайт. Да, есть HTTP-заголовок  Expires, но от него не так много пользы. Довольно часто приходится просто сидеть и ждать, пока поисковый робот почтит вас своим вниманием и переиндексирует именно эту страницу.

К счастью, появилась технология, с помощью которой вебмастер может самостоятельно указывать поисковой системе, какие страницы изменились, какие — нет, какие страницы и как часто следует индексировать. Тыкать поисковый бот носом, так сказать. Эта технология называется Sitemaps. Узнать, что это такое.

Некоторые особенности организации протокола HTTP позволяют вам получить массу полезной информации о посетителях вашего сайта. Самое главное — вы можете узнать, откуда и по каким ключевым словам конечный пользователь пришел к вам на сайт. Чтобы собирать подобную информацию вам потребуется или определенный собственный скрипт или сторонние сервисы. Ниже — два удобных сервиса статистики, которыми я сам пользуюсь.

Если вы читали предыдущий пост «Воровство постов с блога и почему это плохо», то должны знать, что человек скопировавший у меня пост на варез-портал имел глупость (или лень) вставить прямую картинку с моего сайта. Это и называется хотлинкингом (hotlinking) и с этим можно бороться. Узнать, что такое хотлинкинг...

Я задумал новый интернет проект. Интересно, что из этого получится. Stay tuned!