Про успехи Яндекса в индексировании всего на свете
filed in Curriculum vitae on Июл.26, 2011
В обсуждении этих случаев так часто упоминается robots.txt, что создается впечатление, будто бы его правильная настройка решает проблему. При этом неверная настройка этого файла — это ответ на вопрос, почему приватные данные попали в Яндекс (или Гугл), а не почему они вообще публично доступны. Они публично доступны потому что их сделали публично доступными, ведь robots.txt — это просто объявление, пожелание, ну уж никак не панацея. И представитель Яндекса в своем ликбезе честно про это пишет (только увы, тоже в самом конце и не акцентируя внимания, а мне кажется, что это куда важнее):
Конечно, злоумышленники, желающие украсть важный файл, не обратят внимание на содержимое robots.txt, но все крупные поисковые системы в обязательном порядке выполняют директивы этого файла.
26 июля, 2011 on 19:50
Это как-то настолько понятно, прямо даже не знаю, что и сказать. Поменяю ка я себе юзерагента в хроме уже что ли.
Я регулярно возвращаюсь к мысли ввести экзамены на доступ к компьютерам. Несколько категорий, самая простая разрешает использовать примитивные телефоны без возможности подключения к интернетам, самая сложная разрешает в интернет прямо таки уже писать.
Если не забыть легализовать взятки, и за умеренную плату выдавать разрешение на использование любой техники, в том числе и подключённой к интернету, с обязательным «_VIP» в конце никнейма, то можно будет заморозить добычу нефти и формировать за счёт этих поступлений весь бюджет.
Ответить
localGhost, 27 июля, 2011 в 10:43
А ты уже видел, что английское исследование подтвердило, что интернет-зависимость сродни наркотической? ;) Прям боюсь в поход идти :)
Ответить
BioLogIn, 27 июля, 2011 в 10:44
«Британские ученые» еще не то тебе подтвердят, боюсь )
Ответить
localGhost, 27 июля, 2011 в 11:12
Ну там вроде конкретное вменяемое исследование, тысяча испытуемых и все такое :)
Ответить
27 июля, 2011 on 10:59
А вот, например, Гугль «украл»-таки важные документы. А сделали бы robots.txt — не «украл» бы.
Ответить
localGhost, 27 июля, 2011 в 11:12
Ну там непонятно, насколько они действительно секретные. Зато если правда секретные — то защита в виде robots.txt была бы слабым утешением :)
Ответить
Q, 27 июля, 2011 в 14:48
Если не лень — можно поинтересоваться так:
Ответить