Что происходит
Руководство одного из старейших сетевых ИТ-изданий CNET, существующего уже 28 лет и выпустившего десятки тысяч статей, приняло решение удалить огромное количество старых материалов в погоне за повышением рейтинга своего сайта в поисковой выдаче Google.
- Как сообщает Ars Technica, редакция начала зачистку с небольших партий статей, но уже к концу июля темпы возросли. За последние недели с сайта удалили тысячи материалов.
- В CNET подтвердили, что издание отбраковывает старые публикации, однако отказались сообщить, сколько статей уже пропало с сайта и сколько планируют удалить в перспективе.
- Удаление контента, особенно когда речь идет о больших объемах и сайтах, существующих так долго, как CNET, может серьезно исказить историю Интернета, отмечают эксперты.
Детали
В служебной записке руководство CNET пояснило сотрудникам, что, удаляя или обновляя нерелевантные URL-адреса, оно рассчитывает «отправить сигнал Google о том, что CNET свеж, актуален и достоин того, чтобы находиться выше конкурентов в поисковой выдаче». Однако в письме не уточняется, с чего менеджеры взяли, что эта схема — рабочая.
- «Наши команды анализируют множество видов данных, чтобы обнаружить на CNET страницы, которые в настоящее время не удовлетворяют потребности нашей аудитории… В идеальном мире мы бы оставили весь контент на сайте навсегда. Но, к сожалению, современный интернет наказывает нас за это», — написал директор CNET по маркетингу и коммуникациям Тейлор Канада.
- Уточняется также, что отбракованные аналитиками статьи все же не удаляют безвозвратно: CNET отправляет их копии в Internet Archive.
Но при этом
В Google заявили, что решение CNET — большая ошибка.
- «Вы удаляете «старый» контент со своего сайта, потому что считаете, что Google он не нравится? Но это не так. Старый контент все еще может быть полезен. У поисковика нет никаких «маркеров свежести» для отсеивания сайтов», — указано в сообщении, опубликованном в аккаунте Google SearchLiaison в X (бывший Twitter*).
- Издание Search Engine Land напомнило, что в далеком 2011 году представители Google действительно озвучивали мысль о том, что удаление «страниц низкого качества» может потенциально повысить рейтинг сайта. Но журналисты отметили, что конкретно старые статьи не упоминались.
- Сомнительная инициатива CNET может серьезно усугубить проблему «гниения» или «вымирания» ссылок — link rot. В результате этого процесса URL-адреса прекращают направлять пользователей на первоначальный источник: отображается «ошибка 404» либо открывается другой веб-сайт.
Контекст
«Вымирание» ссылок прогрессирует, например, из-за закрытия веб-сайтов или миграции серверов. Благодаря неподтвержденной, но очень популярной среди администраторов теории об «обновлении» сайтов, к этому списку добавилось и удаление «устаревших» материалов.
- В 2021 году исследователи из Гарвардской школы права проверили 550 тыс. статей The New York Times, содержащих более 2,2 млн внешних веб-ссылок. Специалисты выяснили, что четверть из них не работает. «Гниль» затронула 6% ссылок в статьях 2018 года, а в статьях 1998-го этот показатель достиг уже 72%.
- В 2022 году аналитики Ahrefs проанализировали более 2 млн сайтов и выяснили, что с января 2013 года на них «сгнили» 66,5% ссылок, еще 6,45% выдали временные ошибки.
- Из-за «гниения» ссылок пользователи уже безвозвратно потеряли доступ ко многим материалам, которые не были «сданы на хранение». Наиболее популярный бесплатный онлайн-архив — это Wayback Machine некоммерческой библиотеки Internet Archive. С помощью поисковых роботов Wayback Machine архивирует сайты в их «историческом» виде, без искажений.
- «С незапамятных времен защита исторического контента требовала изготовления множества копий, это не изменилось с появлением Интернета. Будем надеяться, что, несмотря на «гниение ссылок», будущие историки смогут собрать воедино точную историю нашей хрупкой цифровой эпохи», — отмечает репортер Ars Technica Бендж Эдвардс.
- Эксперты подчеркивают, что link rot может не только исказить представление потомков, но и прямо сейчас нанести серьезный ущерб: на «гниющих» ссылках выросла целая подпольная индустрия, предлагающая клиентам поиск «мертвых» ссылок в крупных интернет-изданиях и перепродажу доменов, на которые они ведут для рекламы товаров и привлечения клиентов в проекты, в том числе мошеннические.
Соцсеть заблокирована на территории РФ в связи с распространением недостоверной общедоступной информации.