REP (Robots Exclusion Protocol – Протокол Исключений для Роботов) обеспечивает контроль над деятельностью поисковых ботов на уровне всего сайта (файл robots.txt), на уровне отдельных страниц (META-тег или тег X-Robots) и на уровне элементов HTML-кода. Таким образом, можно контролировать и процесс изучения ботами вашего сайта, и его отображение на страницах с результатами поиска (SERPах). Ниже привожу таблицу с перечнем часто встречающихся задач (пользовательских сценариев), способов их решения (директив) и поисковых систем, которые их поддерживают.

Многие, пожалуй, хотели бы получать SMS-уведомления о доставке новых сообщений на адрес электронной почты. Например, владельцы сайтов. То есть, отправил посетитель сайта сообщение через контактную веб-форму, а вебмастер получает не просто e-mail, а еще и SMS. Так ведь гораздо оперативнее можно откликаться на пожелания своих клиентов - например, если у вас служба такси или доставки пиццы. Или системные администраторы - они тоже могли бы уведомлять себя смсками о состоянии серверов. Сидишь, к примеру, с барышней, наблюдаешь закат, и тут в кармане - пииииииип!