Читайте статті за платними стінами, маскуючись як Googlebot
- Категорія: Інтернет
Інтернет є переломним. Постійний підйом рекламних блокувань поклав край дохідній моделі, яка покладається виключно на рекламні долари для роботи веб-сайтів та підприємств.
Особливо сайти з новинами почали експериментувати із способами диверсифікації джерел доходу, і одним із відомих варіантів є сайти, такі як The Wall Street Journal, Financial Times, New York Times, часи або Вашингтон Пост впровадив або протестував систему оплати.
Існують різні типи оплати праці, але всі вони мають спільне, що вони блокують доступ до вмісту; це може статися безпосередньо при відкритті першої статті, після того, як на сайті прочитано певну кількість статей, або як система уривків, яка відображає перший абзац читачеві та нижче цієї реєстраційної інформації, щоб прочитати решту.
Виплатні стіни не завжди вимагають від користувачів платити гроші за доступ. Деякі сайти можуть вимагати, щоб користувачі зареєструвалися, щоб користуватися ним, але не заряджатимуть користувачів після їх реєстрації.
З точки зору бізнесу це може мати сенс і може бути вигідніше, ніж боротися з ним із користувачами, які керують адблокерами, але в цьому є і мінус як для веб-сайту, що платить, так і для заблокованого користувача.
Сайти втрачають високий відсоток відвідувачів, якщо впроваджують систему оплати. Незрозуміло, наскільки насправді високий відсоток, і він, ймовірно, варіюється від сайту до сайту, але він, ймовірно, набагато перевищує відсоток відвідувачів, які підписалися на сайт після того, як їм було запропоновано вибір підписатися на прочитання потрібної статті.
Користувачам може бути дуже неприємно переходити за посиланням на цікаву озвучувану статтю, щоб її не можна було прочитати після завантаження ресурсу; це марна трата часу для багатьох, особливо якщо до реєстрації чи підписки не надається вміст.
Замаскуйте браузер
Не секрет, що сайти новин дозволяють отримати доступ до агрегаторів новин та пошукових систем. Якщо ви перевірите, наприклад, Новини Google або Пошук, ви знайдете статті із веб-сайтів із платними стінами, переліченими там.
У минулому веб-сайти новин дозволяли відвідувачам відвідувати основні агрегатори новин, такі як Reddit, Digg або Slashdot, але ця практика здається такою ж доброю, як і мертві в наш час. Деякі з них все-таки можуть це дозволити, але це спроба та помилка, і рішення може бути вимкнено в будь-який час.
Ще одна хитрість - вставити заголовок статті в пошукову систему, щоб безпосередньо читати кешоване історію на ній, здається, вже не працює належним чином, так як статті на сайтах із платними стінами зазвичай більше не кешуються.
Порада: ознайомтеся з наступним доповненням, яке ви можете використовувати для обходу платних стін:
Користувач-агент та референт
Напевно, вам цікаво, як сайти блокують або дозволяють отримати доступ до вмісту сайту. Методи вдосконалювалися з роками, і вже недостатньо просто змінити референс браузера на https://www.google.com/, щоб отримати повний доступ до вмісту сайту.
Натомість веб-сайти використовують різні перевірки, які включають користувальницький агент, референс та файли cookie, а іноді навіть більше того, щоб визначити легітимність доступу.
Загальна інформація
Мабуть, найкращий спосіб замаскувати браузер - це зробити так, щоб він здавався Googlebot.
- Довідник: https://www.google.com/
- Користувач-агент: Mozilla / 5.0 (сумісний; Googlebot / 2.1; + http: //www.google.com/bot.html
Зауважте, що ця опція більше не працює на сайтах май. Можливо, краще спробувати і маскуватися, як вони надходять із Twitter або інших сайтів соціальних медіа.
Firefox
Для цього користувачам Firefox потрібні два додатки для браузера: перший, RefControl, щоб змінити значення перенаправлення під час відвідування новинних сайтів, другий, Агент користувача Switcher , щоб змінити агент користувача браузера.
Оновлення : RefControl більше не доступний. Ви можете спробуйте це замість цього. Кінець
- Завантажте та встановіть обидва розширення у веб-браузері Firefox.
- Торкніться клавіші Alt та виберіть Інструменти> Параметри RefControl.
- Клацніть на 'Додати сайт', введіть ім'я домену під веб-сайтом, виберіть спеціальну дію та введіть https://www.google.com/ як реферала.
- Повторіть це для всіх новинних сайтів, до яких ви хочете отримати доступ (деякі можуть не працювати, навіть якщо ви внесете зміни, тому пам’ятайте про це).
- Закінчивши, закрийте вікно конфігурації.
- Ще раз торкніться клавіші Alt та виберіть у меню Інструменти> Агент користувача за замовчуванням> Редагувати агенти користувача.
- Виберіть New> User Agent та замініть рядок у полі User Agent на Mozilla / 5.0 (сумісний; Googlebot / 2.1; + http: //www.google.com/bot.html). Назвіть це Googlebot.
- Вийдіть з меню.
- Перш ніж отримати доступ до цих сайтів, натисніть Alt і виберіть Агент користувача за замовчуванням> Googlebot.
Це все, що там є. Трохи прикро, що для Firefox не існує розширення, яке автоматично змінює агент користувача на основі відвідуваних вами сайтів.
Гугл хром
Користувачі Google Chrome можуть встановлювати такі розширення Агент користувача Switcher і Контроль рефера які доступні для веб-переглядача.
Однак є й інша можливість, а це створити спеціальне розширення, яке автоматизує процес у браузері.
Інструкції надані на Елейню . Все, що потрібно, - це створити новий каталог на локальному комп'ютері, створити два файли background.js та manifest.json всередині нього, а також скопіювати та вставити код, знайдений на сайті, у файли.
Вам потрібно ввімкнути 'режим розробника' на chrome: // extensions /, а потім вибрати 'load unpacked extension', щоб вибрати папку, у яку ви створили два файли, щоб завантажити розширення в Chrome.
Ви можете змінити список веб-сайтів, які він підтримує, щоб додати нові.