Для запрета индексации части страницы существует тег noindex. Тег noindex воспринимается только поисковыми роботами Яндекса и Рамблера, другие поисковики и в том числе Гугл его игнорируют.
Рано или поздно оптимизаторы сталкиваются с проблемой дублей страниц сайтов или желанием отключить индексацию определенных папок, разделов или динамических ссылок с какой-нибудь переменной. Так вот все поисковые роботы при посещении сайта, в первую очередь, ищут файл robots.txt. Это текстовый файл, находящийся в корневой директории сайта, в нем записываются специальные инструкции для поисковых роботов. Рассмотрим наиболее востребованные примеры robot.txt, а также как правильно отключать индексацию ненужных страниц в joomla.
На сайте компании Cognitive Technologies была опубликованановостьо продаже (предоставление права использования за вознаграждение) компании «Яндекс» Программного Комплекса, включающего в себя возможности синтаксического анализа текста.
Синтаксический анализатор позволяет определить, какими синтаксическими отношениями связаны слова предложения. Это может звучать неожиданно, но для понимания текста эта информация гораздо важнее, чем значение отдельных слов. Потеря знаков препинания в классической фразе «казнить нельзя помиловать» приводит именно к потере однозначности синтаксических связей.
Использование синтаксического анализатора для больших корпусов текста позволяет определять и изучать статистические закономерности языка (встречаемость слов и конструкций). Такого рода закономерности могут быть использованы, в частности, при разрешении неоднозначностей (например «ключ упал на пол» и «в камнях забил ключ»), возникающих во время синтаксического разбора, а также при построении статистических моделей языка для распознавания слитной речи. Стоит отметить, что возможность разрешения неоднозначностей является одной из важнейших характеристик, отличающих лингвистические технологии разработанные Cognitive Technologies.
Синтаксический анализатор также позволяет проводить сравнение текстов на основе встречаемости в них различных слов и конструкций и разрабатывать методы понимания текстов, извлечения данных из текстов, а также другие приложения.
На основе данного программного комплекса компанией Cognitive Technologies создан ряд интеллектуальных программных продуктов, например системы определения авторства и стиля документа. По взаимному соглашению сторон, все подробности сделки, включая ее стоимость, являются конфиденциальной информацией и не подлежат разглашению.
Не так давно Google запустил beta версию персонализированного социального поиска: Social Search. За основу выдачи, при таком поиске, берётся контент из социальных связей пользователя. Более подробно, о чем идет речь, можно посмотреть в видео. Dim lights
Группа пролетарского гнева компании Яндекс сообщила сегодня о введении нового алгоритма - АГС-30.
«В интернете стало появляться все больше сайтов, предназначенных исключительно для манипулирования алгоритмами поисковых систем. Такие сайты не содержат полезной информации, не представляют интереса для пользователей и могут ухудшить качество поиска Яндекса. Во второй половине 2009 года количество исключаемых из индекса некачественных сайтов стало расти, и мы решили официально объявить о существовании алгоритма АГС-17, предназначенного для их фильтрации в результатах поиска.
Про социальные закладки написано так много, что смысла повторяться нет. Отмечу лишь, что ссылки с социальных закладок прекрасно индексируются Яндексом и Гуглом. Ими можно поднять тИЦ и PR сайта. В рунете социальных закладок около 50-60. С точки зрения SEO, cмысла постить во все закладки нет, для продвижения достаточно выбрать штук 10-15 самых популярных. Список социальных закладок от 20.11.2009:
