Гиперссылки и noindex, nofollow

И когда только гиперссылки успели стать виртуальной валютой? Сколько лет во всех учебниках по разработке сайтов учат начинающих сайтостроителей тому, что гиперссылка служит для связи гипертекстовых документов, т.е. - является инструментом, обеспечивающим весь механизм сетевых взаимодействий. Нет ссылки - нет связи между документами, нет сети, очень просто, и ценность этого механизма способен оценить каждый, кто хотя бы единожды пробовал собрать комплекс материалов по печатным изданиям в обычной оффлайновой библиотеке (”документ”->”в котором цитата”->”первоисточник цитаты документ2″ - идём опять в библиотеку, по карточкам-прообразам индексированного поиска ищем метки на документ2 (где его взять), в котором обнаруживаем ещё одну цитату и указание откуда она и т.д. - кошмар, в общем).

Да, гиперссылка рулит, однако власть её проявиляется в полной мере только в системе, где достаточно исходного материала для установления связей между его частями, т.е. документов, которые должны быть связаны. Миленько, но чем больше документов в системе, тем сложнее осуществлять между ними навигацию - ожидаемо, и, следовательно, нужен дополнительная надстройка для фильтрации, сортировки - возникла необходимость в поисковом механизме, и более того, механизме, доступном для пользования всем. Пока что тоже всё логично и волшебно. В какой-то момент времени произошло грандиозное событие - благодаря документу, опубликованному в сети и найденному в поиске посторонним непричастным пользователем, поставщик информации заработал свой первый бакс - тут-то всё и началось, стерильный смысл гиперссылки искажался на глазах, система рушилась, девица становилась женщиной яблоко было надкушено.

Прошло совсем немного времени - и вот уже в сети только и разговоров о продажных сслыках и мордах, с которых эти ссылки ставятся, и никто уже не говорит о ссылке, как о части механизма для навигации “между..”, а только для рекламы “чего”, и за хорошую ссылку с хорошей морды можно и денег получить, и услугу заказать, в самом деле - виртуальная валюта! Интернет-Маркетинг, теперь так востребованный Интернет-Бизнесом, создаёт свои системы для реализации целей Интернет-Бизнеса, и смысл базовых механизмов сети (и основ для обеспечения работы этих механизмов) подменяется на глазах, и вот уже поисковым движкам приходится сражаться за собственную значимость (а значимость - она в чём? в качественном исполнении своего исходного предназначения, т.е. фильтрации и сортировки результатов поиска по документам, уже проиндексированным предварительно).

Какое уж там качество, если сомнительная характеристика “рекомендаций” для каждого отдельно взятого документа может быть подделана, накручена - “Ах, на этот документ ссылаются 500 раз - вот какой это для всех важный документ, а находится он на сайте, где лежат не менее важдые для всех документы, на которые тоже ссылаются, т.е. рекомендуют в не меньшем объёме, а значит в целом сайт ах какой всеми рекомендованный! В топ его в результатах поиска!”

В то же время разработчики поисковых механизмов, изрядно раздосованные жалобами на то, что нифига нельзя найти, в выдаче в “разрекомендованных и авторитетных” хорошо если сплошные страницы с коммерческими предложениями, а то и более гнилой мусор, и если будет хуже - кто же этими сервисами-то поисковыми пользоваться будет? Они же перестанут “выполнять свою миссию”, а допустить этого нельзя. Так и получается, что вся история развития поисковых механизмов заключается в двух глобальных направлениях - проиндексировать (получить доступ к и обеспечить механизм доступа для пользователей) наибольшее количество документов + отсортировать их по степени настоящей авторитетности. А настоящая авторитетность - это загадка ещё та, даже живой и не глупый человек далеко не всегда оценит верно важность того или иного документа-сайта, что уж там говорить про алгоритмы и механизмы - они ведь не всегда инопланетянами пишутся, теми же людьми и создаются. Вот и обращаются к простым смертным разработчикам-маркетологам-владельцам всего существующего интернет-хлама с просьбами о содействии - типа помогайте чем можете, чтобы те гиперссылки, которые указывают на документы, которые не должны попадать в индекс поиска (и после отдаваться в результатах) - те гиперссылки закрывать самостоятельно от поискового спайдера, дабы и не повадно было. Есть же, в конце концов, тег noindex, есть же для некоторых особо одарённых атрибут nofollow - давайте ребята, не гоните, прочь дерьмо из общей базы!

Да уж, какая там семантика нафиг, а мы тут коммунизм блин намечтали, романтики. Мало того, что единого стандарта, хоть как-то соответствующего спецификации для веб-документов, никто как всегда не придерживается, так надо бы ещё логику запутать.

Хорошо, допустим, к примеру ссылка - рекламная. Кто сказал, что она ведёт на некачественный документ, который, в свою очередь, рекламирует некачественный товар или запрещённую услугу? Сейчас в интернет из оффлайна бизнес приходит в сумашедших объёмах, и разумеется, пиарит себя как может, и в большинстве случаев в этом нет ничего ущербного. Кроме того, злостные гребуны денег, поднимающих бабло на порнухе и мошенничестве, всё равно наплюют с высокой колокольни на “просьбы” что-то там в какой-то там тег заворачивать, а рекламирующие свой бизнес владельцы качественных интернет-площадок получается заворачиваются в два направления на выбор: или подстраиваться под “белую” раскрутку, сочиняя безумный контент для корпоративных блогов или информационных разделов - килотонны гипертекста, из которых хотя-бы процент полезной информации принесёт сколько-то там платежеспособных посетителей, участвуя в каких-то акциях типа спонсоры, или - фигня-война, проплаченные ссылки, значит нафиг из индексов-результатов, под одну гребёнку с теми самыми спамерами-фишерами.

А между прочим рекламная ссылка при этом истинное, исходное предназначение выполняет, как её не назови. Она связывает документ-источник с документом-целью. Её-то зачем в ноиндекс? Её надо индексировать, и количество рекламных ссылок - учитывать, и свой коэффициент авторитетности целевому документу присваивать. Да и для псевдорекламных ссылок смешная логика какая-то, вот такой себе владелец сайта, публикуя, к примеру, цитату со ссылкой на первоисточник объявляет: “ первоисточник есть, ссылку на него я нашёл и публикую для читателей, но в поисковый индекс - запрещаю!” О как. Создатель веб-документа продолжает как и раньше влиять на результаты поиска, только как бы наоборот и как бы санкционированно.

А уж санкции за неиспользование noindex в данном случае - зло иррациональное.  Имхо разработчики-владельцы ведущих поисковых систем просто обязаны собраться на великий исторический саммит, где разработать для веб-стандартов новый тег - “реклама”-”/реклама” - и отправить заявку в w3c.org, и всячески способствовать тому, чтобы её там рассмотрели и приняли, и провести серию семинаров во всех странах для создателей сайтов, на которых рассказать о новом теге, важности его применения и… санкциях за его неиспользование. Вот это будет семантика! Сразу захочется в advanced search включение дополнительного фильтра - с учётом рекламных ссылок (всего, что обнаруживается в этих фантазийных тегах “реклама”-”/реклама”) - и без учёта соответственно. Т.е. филе проиндексируются, ссылки учтутся, качество маркетинговых компаний проверить будет можно, и при этом качество поиска спасут, а значит и востребованность именно такого поиска, авторитетность поисковика - тоже.

И что ведь во всём этом самое печальное. Не будет цирка. Не нужен поисковикам семантический веб, не выгодно ибо. Нужно поощрять недокументированные возможности и нецелевое использование того, что есть, а вы там сами крутитесь как хотите, всё равно во всём сами же и виновны. А ведь могли бы, причём только они и могли бы, двоих достаточно, да и прочая такая привлекательная семантика могла бы потихоньку входить в моду - только бы поисковики предоставили свои механизмы поиска и навигации.