Thu May 15 2025 18:32, Cheslav Osanadze wrote to Boris Paleev:
AM>>>>> А системы управления?
BP>>>> Тоже самодельная. Hа основе повсеместно распространённых BP>>>> контроллеров Arduino и аналогов. Информации в интернете навалом, BP>>>> вот хотя бы, что даёт яндекс на первой странице:
CO>>> :) Смотри, ФСБ вынесет дверь в квартире, просмотрев твои запросы CO>>> поисковикам. И мы увидим тебя в передаче "ЧП на РенТВ".:)
BP>> Если это такие криминальные запросы, то поисковики просто не должны по BP>> ним ничего выдавать.
CO> Поисковики "служат" в Прокуратуре?! Степень криминальности кто будет CO> определять? Hеужели поисковый робот?
Поисковый робот не должен ничего выдавать, потому что по требованиям
прокуратуры доступ через интернет к криминальной информации должен быть прекращён.
BP>> А если они чего-то выдают, то виноваты в этом те, BP>> кто разместил эту информацию в интернете, сделал общедоступной (выдав BP>> URL) и допустил к ней робот поисковика для индексации.
CO> Интересно в этом моменте то, что моя вина не в "разрешении CO> индексировать", а в том, что не "запретил индексировать".
Да, именно. Управление индексацией сайта настраивается только на сайте
и больше нигде.
=============
Для управления индексацией (например, запрета индексации той или иной
страницы) используется файл robots.txt и такие директивы как Disallow, Allow,
User-agent, Crawl-delay и другие. Также, для управления индексацией применяют теги