Давайте сперва определим, что такое "бан"? Обычно под этим словом подразумевают одну из следующих вещей:

• Ваш сайт потерял свои позиции в Google по вашим ключевым словам или вовсе был исключен из индекса
• Ваш IP адрес был заблокирован и вы не можете обращаться с запросами к Google какое-то время

Очевидно, оба варианта являются нежелательными. Первый вариант может произойти, если ваш сайт не удовлетворяет Google webmaster guidelines. Второй же вариант бана происходит, если с вашего IP адрема поступает значительное число запросов в единицу времени. К счастью, вы легко можете избежать бана как первого, так и второго типов, следуя приведенным ниже простым правилам. Для начала разберемся с баном веб-сайта:

1. Сделайте ваш сайт доступным. Всегда используйте надежный хостинг-провайдер с высоким временем uptime (минимум 99.5%) и малым временем отклика. Если поисковый робот приходит на ваш сайт и не может его открыть, сайт может потерять свои позиции.
2. Обеспечьте уникальный, релевантный контент. Контент вашего сайта должен быть свежим, уникальным и релевантным его тематике. Также важно, чтобы содержимое сайта было интересно посетителям. Готовьте материалы вашего сайта для людей, а не для поисковых роботов. Если ваш материал дублирует контент уже имеющегося в индексе сайта, ваш сайт может потерять в своих позициях или быть исключенным из индекса Google.
3. Не используйте спам для продвижения сайта. Никогда не используйте дорвеи, скрытый текст, автоматически сегенерированные страницы с ключевыми словами, клоакинг или любые другие спам-технологии. Помните, мы все пользуемся Google для поиска. Не нужно выбрасывать тонны мусора в его индекс.
4. Будьте аккуратны в ссылках. Не каждая входящая ссылка хороша. Внимательно выбирайте сайты, которые будут на вас ссылаться (конечно, если у вас есть такая возможность). Не участвуйте в т.н. "фермах ссылок". Старайтесь получать ссылки с сайтов, близких по тематике к вашему. Не размещайте спамные ссылки в коментариях форумов, блогов или гостевых книг. Исходящие ссылки тоже важны. Обращайте особое внимание на сайты, на которые вы будете ставить ссылку. Не ссылайтесь на сайты с плохой репутацией или на сайты, использующие спамовые технологии продвижения. Такая исходящая ссылка может дорого обойтись вашему сайту.
5. Обеспечьте хорошую структуру сайта для поисковых роботов. Вы должны обеспечить поисковым роботам способ проиндексировать ваш сайт, пройдясь по всем ссылкам. Создайте карту сайта, если вы используете ссылки на JavaScript или Flash, то обязательно продублируйте их обычными текстовыми ссылками. Убедитесь, что ваш сервер корректно обрабатывает ошибкт, такие как 403, 404, перенаправления и т.д. Проверьте ваш сайт на предмет битых ссылок и ошибок в коде HTML с помощью какой-либо утилиты проверки HTML кода.
6. Избегайте доменов с плохой историей. Не используйте доменные имена, побывавшие в черных списках, для вашего сайта.

Как избежать бана IP адреса?

7. Не используйте неавторизованный софт для проверки позиций. Google запрещает использование программ, посылающих автоматизированные запросы. На самом деле, единственный способ избежать бана на 100% - это не проверять позицию вашего сайта вообще. Если для вас это решение неприемлемо, читайте дальше.
8. Используйте Google API. Если вам действительно нужно проверять позицию сайта, то старайтесь выбирать те продукты, которые поддерживают работу через Google Web API. Google API это единственный легитимный способ посылать автоматизированные запросы в Гугл.
9. Ограничьте объем запросов. Если точности, предоставляемой Google API, вам недостаточно и для вас критичным является использование прямого метода поиска, то попытайтесь минимизировать количество запросов. Не проверяйте первые 1000 результатов, ограничьтесь 30-50-ю. Это позволит оценить общее положение вашего сайта и даст адекватную картину, в то же время не загружая Google.
10. Используйте Google для его основной функции. Используйте Google только для поиска и ваш IP адрес никогда не будет заблокирован.

Обсудить на форуме (англ.) | Digg it

См. также:

Почему важно использовать Google API?
Проверка позиций в Google без риска быть наказанным.