Ваш помощник
на пути к успеху
7 (495) 545-49-21
8 (800) 500-30-29
Заказ интернет-магазинов,
служба поддержки
режим работы: 09:00 - 18:00 (мск)
Блог Shop2YOU > Продвижение > Пусть robots.txt и поисковик дружат!

Пусть robots.txt и поисковик дружат!

16 сентября 2015

Начнем с азов

Роботы, которые ходят по страничкам сайта и индексируют их содержимое, — очень трудолюбивые. Они внимательно индексируют всё, что находят, чтобы даже крупица информации не потерялась и ее можно было отыскать через поисковик. Но на сайте, особенно в интернет-магазине, не вся информация должна быть общедоступной. К ней относятся пароли и данные пользователей из личных кабинетов, сведения о заказах и тому подобное. Чтобы робот прошел мимо такой страницы, следует повесить на нее ярлычок «запрещено к просмотру». Реестр, где хранятся «запрещенные» страницы, — это файл robots.txt. Обычно его используют оптимизаторы — для склейки зеркал, переадресации и других тонких настроек. А технический специалист должен закрыть в этом файлике все системные страницы с личной информацией пользователей. Если этого не сделать, можно стать причиной скандала и потерять репутацию.

SMS для всех

Именно из-за отсутствия настроек в файле robots.txt пострадал сайт http://www.prm.ru, за что был оштрафован ФАС. Штраф небольшой, 30 тыс. рублей (для 2011 года), но урон репутации сайта — в десятки раз больше. Все смски, которые можно было отправить через сайт на телефон любого мобильного оператора Пермской области, оказались проиндексированы Яндексом и попали в публичный доступ.



Второй подобный прецедент связан уже с сайтом Мегафона и опять — с сервисом онлайн-отправки сообщений. Этот случай подтолкнул многих хакеров искать другие подобные сайты. В самом деле, ничего взламывать не нужно — все данные в открытом доступе, ищутся через Яндекс.

Игрушки для всех

Если вы продаете книги, и весь интернет однажды утром узнает, что Максимилиан Миронов, живущий там-то и там-то, заказал у вас 3 тома «Войны и мира», ничего страшного, в сущности, не произойдет. Мы узнаем только то, что этот милейший дедушка интересуется русской литературой. А если вы продаете игрушки для взрослых? И все странички с именами, адресами и содержанием заказов окажутся проиндексированы Яндексом по вашей вине?

Именно это и произошло почти сразу после того, как Мегафон «слил» личную переписку абонентов. Опять-таки — из-за файла robots.txt. Справиться с поиском компромата через Яндекс может даже пятиклассник — никаких особых знаний не нужно, закон не нарушается, потому что никто никого не взламывает.

Проще простого

Защитить интернет-магазин и своих покупателей очень просто. Инструкции Яндекса понятны даже тем, кто не является программистом или верстальщиком. Проверить и поправить файл robots.txt — дело 2 минут. Представьте, во сколько тысяч рублей вам могут обойтись эти 2 минуты, если вы не позаботитесь об элементарной веб-безопасности.


Откройте магазин сейчас
1 месяц бесплатно
Понравился пост? Поделитесь ссылкой на эту страницу в социальных сетях: