Čítajte články za výplatami pomocou maskovania ako Googlebot

Internet je v zlomovom bode. Pokračujúci nárast blokovania reklám ukončil model výnosov, ktorý sa pri prevádzkovaní webových stránok a firiem spolieha výlučne na reklamné doláre.

Najmä spravodajské weby začali experimentovať so spôsobmi diverzifikácie zdrojov príjmu a jednou z významných možností, ktoré implementovali weby ako The Wall Street Journal, Financial Times, New York Times alebo Washington Post, je systém paywall.

Existujú rôzne typy výplatných kariet, ale všetky majú spoločné to, že blokujú prístup k obsahu buď priamo, alebo po prečítaní určitého počtu článkov na webe.

Návštevníci sú potom požiadaní, aby sa prihlásili na odber stránok a pokračovali v čítaní článkov o nich.

Môže to mať zmysel z obchodného hľadiska a môže byť lukratívnejšie ako bojovať s používateľmi, ktorí používajú adblockery, ale má nevýhodu tak pre platené stránky, ako aj pre blokovaných používateľov.

Webové stránky strácajú vysoké percento návštevníkov, ak implementujú systém platobných kariet. Nie je jasné, aké vysoké percento je v skutočnosti a pravdepodobne sa líši v závislosti od lokality, ale je pravdepodobné, že je oveľa vyššie ako percento návštevníkov, ktorí sa prihlásia na odber stránok po tom, čo im bola ponúknutá možnosť prihlásiť sa na čítanie požadovaného článku.

Maskujte svoj prehliadač

Nie je žiadnym tajomstvom, že spravodajské stránky umožňujú prístup k agregátorom správ a vyhľadávacím nástrojom. Ak napríklad začiarknete políčko Správy Google alebo Vyhľadávanie, nájdete články z webov s údajmi o platbách.

V minulosti spravodajské weby umožňovali prístup návštevníkom prichádzajúcim z hlavných spravodajských agregátorov, ako sú Reddit, Digg alebo Slashdot, ale táto prax sa v súčasnosti javí rovnako dobre ako mŕtvych.

Zdá sa, že ďalší trik, ktorým je vloženie názvu článku do vyhľadávacieho nástroja na priame prečítanie príbehu uloženého v pamäti, nefunguje správne, ako aj články na stránkach s platbami sa už spravidla neukladajú do vyrovnávacej pamäte.

Aktualizácia : The Wall Street Journal oznámila, že sa pripojí otvor opísaný nižšie. Články za platobnou bránou stránok si však môžete prečítať pomocou nasledujúcej metódy:

  1. Keď ste na stránke článku s odrezaným článkom, stlačte kláves F12 a žiadosť o prihlásenie na odber, aby ste si ju mohli v plnom rozsahu prečítať.
  2. Otvorte kartu konzoly.
  3. Prilepte javascript: window.location = "// m.facebook.com/l.php?u="+encodeURIComponent(window.location.href);
  4. Stlačte Enter.

Stránka by sa mala načítať znova a článok by sa mal načítať v plnom rozsahu. Môžete tiež uverejniť odkaz na článok na Facebooku, napríklad v novom príspevku, ktorý vidíte iba vy. Kliknutím na uverejnený odkaz by sa mal článok načítať celý na webe The Wall Street Journal.

User-Agent a Referrer

Pravdepodobne ste zvedaví, ako stránky blokujú alebo umožňujú prístup k obsahu stránok. Postupy sa v priebehu rokov zlepšili a nestačí jednoducho zmeniť sprostredkovateľa prehľadávača na //www.google.com/, aby ste získali plný prístup k obsahu stránok.

Na určenie legitimity prístupu namiesto toho weby používajú rôzne kontroly, ktoré zahŕňajú user-agent, sprostredkovateľa a súbory cookie, a niekedy aj viac.

Všeobecné informácie

Pravdepodobne najlepším spôsobom maskovania prehliadača je, aby sa javil ako Googlebot.

  • Sprostredkovateľ: //www.google.com/
  • User-Agent: Mozilla / 5.0 (kompatibilný; Googlebot / 2.1; + // www.google.com/bot.html

Firefox

Používatelia prehliadača Firefox na to potrebujú dva doplnky prehliadača: prvý, RefControl, na zmenu hodnoty sprostredkovateľa pri návšteve spravodajských serverov, druhý, User Agent Switcher, na zmenu užívateľského agenta prehliadača.

  1. Stiahnite a nainštalujte obe rozšírenia do webového prehľadávača Firefox.
  2. Klepnite na kláves Alt a vyberte položku Nástroje> Možnosti opätovného ovládania.
  3. Kliknite na možnosť „pridať web“, do poľa zadajte názov domény, vyberte vlastnú akciu a ako sprostredkovateľa zadajte //www.google.com/.
  4. Tento postup opakujte pre všetky spravodajské weby, ku ktorým chcete získať prístup (niektoré nemusia fungovať, aj keď vykonáte zmeny, nezabudnite na to).
  5. Po dokončení zatvorte konfiguračné okno.
  6. Znova klepnite na kláves Alt a v ponuke vyberte Nástroje> Predvolený používateľský agent> Upraviť agenta používateľa.
  7. Vyberte Nový> User Agent a reťazec v poli User Agent nahraďte Mozilla / 5.0 (kompatibilný; Googlebot / 2.1; + // www.google.com/bot.html). Pomenujte ho Googlebot.
  8. Opustenie ponuky.
  9. Pred prístupom na tieto stránky klepnite na Alt a vyberte Predvolený užívateľský agent> Googlebot.

To je všetko, čo k tomu patrí. Je trochu nešťastné, že pre prehliadač Firefox neexistuje žiadne rozšírenie, ktoré automaticky zmení agenta používateľa na základe navštívených stránok.

Google Chrome

Používatelia prehliadača Google Chrome môžu nainštalovať rozšírenia, ako sú prepínač agentov používateľov a kontrola sprostredkovateľov, ktoré sú k dispozícii pre prehliadač, aby urobili to isté.

Existuje však aj iná možnosť, a to vytvorenie vlastného rozšírenia, ktoré automatizuje proces v prehliadači.

Pokyny sú uvedené na Elaineou. V zásade stačí len vytvoriť nový adresár na lokálnom počítači, vytvoriť v ňom dva súbory background.js a manifest.json a skopírovať a vložiť kód, ktorý sa nachádza na webe, do súborov.

Musíte povoliť „vývojový režim“ na prehliadači chrome: // extensions / a potom môžete vybrať možnosť „Načítať nezbalené rozšírenie“ a vybrať priečinok, v ktorom ste tieto dva súbory vytvorili, na načítanie prípony do prehliadača Chrome.

Zoznam webových stránok, ktoré podporuje, môžete upraviť tak, aby sa pridali nové.