(no subject)
Feb. 23rd, 2017 08:59 amЖил-был некий сайт несколько лет. А потом помер. Домен отошел неизвестно к кому, если вообще отошел, и неизвестно куда указывает, допустим, на пул доменов. А потом заходишь ты в интернет-архив, чтобы глянуть на старый сайт, а там говорят "его архивация отключена из-за robots.txt". И действительно, сайт не работает, но robots.txt на его домене исправно выдает "Disallow: /". По сути, это в корне подрывает идею архивации: перехватил домен - уничтожил архив.