Читайте статьи о платном доступе, маскирующемся под Googlebot
- Категория: Интернет
Интернет переживает переломный момент. Продолжающийся рост блокировки рекламы положил конец модели дохода, которая полагается исключительно на рекламные доллары для управления веб-сайтами и предприятиями.
Новостные сайты, в частности, начали экспериментировать со способами диверсификации источников дохода, и один известный вариант, который предлагает такие сайты, как The Wall Street Journal, Financial Times, The New York Times, времена , или The Washington Post внедрили или протестировали систему платного доступа.
Существуют разные типы платного доступа, но их объединяет то, что они блокируют доступ к контенту; это может произойти непосредственно при открытии первой статьи, после того, как определенное количество статей было прочитано на сайте, или в виде системы отрывков, которая отображает первый абзац для читателя и под этой регистрационной информацией, чтобы прочитать остальные.
Paywall не всегда может требовать, чтобы пользователи платили деньги за доступ. Некоторые сайты могут требовать от пользователей регистрации для использования сайта, но не взимают плату с пользователей после того, как они зарегистрировались.
Это может иметь смысл с точки зрения бизнеса и может быть более прибыльным, чем борьба с пользователями, которые используют блокировщики рекламы, но у этого есть обратная сторона как для платного сайта, так и для заблокированного пользователя.
Сайты теряют высокий процент посетителей, если внедряют систему платного доступа. Неясно, насколько высок этот процент на самом деле, и он, вероятно, варьируется от сайта к сайту, но он, вероятно, намного выше, чем процент посетителей, которые подписываются на сайт после того, как им предложили подписаться для чтения нужной статьи.
Для пользователей может быть очень неприятно перейти по ссылке на интересную по звучанию статью, просто чтобы заблокировать ее чтение после загрузки ресурса; для многих это пустая трата времени, особенно если до регистрации или подписки не предоставляется никакого контента.
Замаскируйте свой браузер
Не секрет, что новостные сайты предоставляют доступ к агрегаторам новостей и поисковым системам. Например, если вы проверите Новости Google или Поиск, вы найдете статьи с сайтов с платным доступом, перечисленными там.
В прошлом новостные сайты разрешали доступ посетителям, приходящим из крупных агрегаторов новостей, таких как Reddit, Digg или Slashdot, но в настоящее время такая практика кажется практически мертвой. Некоторые могут все еще разрешить это, но это метод проб и ошибок, и обходной путь может быть закрыт в любое время.
Другой трюк - вставить заголовок статьи в поисковую систему для непосредственного чтения кешированной истории, похоже, больше не работает должным образом, а также статьи на сайтах с платным доступом обычно больше не кешируются.
Совет: ознакомьтесь со следующей надстройкой, которую вы можете использовать для обхода платного доступа:
Пользовательский агент и реферер
Вам, вероятно, интересно, как сайты блокируют или разрешают доступ к содержимому сайта. С годами методы совершенствовались, и теперь уже недостаточно просто изменить реферер браузера на https://www.google.com/, чтобы получить полный доступ к содержанию сайта.
Вместо этого сайты используют различные проверки, которые включают в себя пользовательский агент, реферер и файлы cookie, а иногда и более того, для определения законности доступа.
Главная Информация
Вероятно, лучший способ замаскировать браузер - сделать его похожим на Googlebot.
- Реферер: https://www.google.com/
- Пользовательский агент: Mozilla / 5.0 (совместимый; Googlebot / 2.1; + http: //www.google.com/bot.html
Обратите внимание, что эта опция больше не работает на некоторых сайтах. Возможно, лучше попытаться замаскироваться под Twitter или других социальных сетей.
Fire Fox
Пользователям Firefox для этого нужны две надстройки браузера: первая, RefControl, для изменения значения реферера при посещении новостных сайтов, вторая, Переключатель пользовательского агента , чтобы изменить пользовательский агент браузера.
Обновить : RefControl больше не доступен. Ты можешь попробуй это альтернатива вместо этого. Конец
- Загрузите и установите оба расширения в веб-браузер Firefox.
- Нажмите на клавишу Alt и выберите Инструменты> Параметры RefControl.
- Нажмите «Добавить сайт», введите имя домена под сайтом, выберите настраиваемое действие и введите https://www.google.com/ в качестве источника перехода.
- Повторите это для всех новостных сайтов, к которым вы хотите получить доступ (некоторые могут не работать, даже если вы внесете изменения, так что имейте это в виду).
- Когда вы закончите, закройте окно конфигурации.
- Снова нажмите клавишу Alt и выберите в меню Инструменты> Пользовательский агент по умолчанию> Редактировать пользовательские агенты.
- Выберите «Создать»> «Пользовательский агент» и замените строку в поле «Пользовательский агент» на Mozilla / 5.0 (совместимый; Googlebot / 2.1; + http: //www.google.com/bot.html). Назовите его Googlebot.
- Выйти из меню.
- Прежде чем получить доступ к этим сайтам, нажмите Alt и выберите User Agent по умолчанию> Googlebot.
Это все, что нужно сделать. К сожалению, для Firefox нет расширения, которое автоматически изменяет пользовательский агент в зависимости от посещаемых вами сайтов.
Гугл Хром
Пользователи Google Chrome могут устанавливать такие расширения, как Переключатель пользовательского агента и Referer Control которые доступны для браузера, чтобы сделать то же самое.
Однако есть еще одна возможность - создать собственное расширение, которое автоматизирует процесс в браузере.
Инструкции представлены на Elaineou , По сути, все, что требуется, - это создать новый каталог на локальном компьютере, создать в нем два файла background.js и manifest.json, а также скопировать и вставить в файлы код, найденный на сайте.
Вам нужно включить «режим разработчика» на chrome: // extensions /, а затем выбрать «загрузить распакованное расширение», чтобы выбрать папку, в которой вы создали два файла, чтобы загрузить расширение в Chrome.
Вы можете изменить список поддерживаемых сайтов, чтобы добавить новые.