SEO

В связи с кончиной Yahoo в плане возникшей проблемы быстрой оценки количества бэков у сайта - некоторое решение даёт сервис Solomono. Не буду обсуждать качество его в плане "заменителя" (на безрыбье и Апорт - поисковик рак - рыба), просто приведу код использования его в SeoQuake:

Как найти дубли страниц на сайте и убрать их из индекса (запретив найденное в robotx.txt) - частый вопрос, которым задаются после того, как понимают, что наличие дублей ведёт к штрафным санкциям от поисковиков - от понижения в выдаче (в качестве "наказания за не оригинальность") до совсем "суровых" вещей, например,  АГС от Яндекса.

Оператор site показывает лишь надводную часть индекса Google. А знать расширенный индекс тоже важно. Для этого используется связка из операторов allinurl и site:

allinurl:noindex.by site:noindex.by

Индексация Google и вопрос о дополнительном индексе (Supplemental Index) уже не один год (с момента официального отказа от его показа в выдаче Google) является предметом дискуссий, схожих с поиском снежного человека. Имея некоторую склонность к цифромании я уже не один год веду наблюдения за всеми такими спорно-недоказанными темами и хочу поделиться некоторыми мыслями, данными и мыслями о данных.