STRP v realnem času, strganje z Zenserp - pregled

Google ima dolgo zgodovino, da razvijalcem SEO-jev resnično težko delajo, da poskušajo javno dostopne podatke strgati s svojih strani z rezultati iskanja. Pravzaprav je strganje SERP uradno v nasprotju s pogoji storitve podjetja Big G. Vendar praksa ne krši zakona o računalniških prevarah in zlorabah (CFAA), zato so Googlovi neposredni pravni postopki za zmanjšanje prakse padli. V tem članku bomo govorili o zelo razširljivih realnočasovnih SERP-jih, ki se strgajo z Zenserpom. Začnimo!

Torej, čeprav strganje v praksi dejansko ni nezakonito ali nikomur ne škoduje, se morajo razvijalci še vedno spoprijeti z zaporami. To je zasnoval Google, da ovira njihovo zbiranje podatkov. Pogosti glavoboli vključujejo Captchas in blokiranje IP. Vendar so bila v preteklosti že poslana pisma o prenehanju in odpovedi, ta taktika je vedno bolj redka.

Kaj pa, če vam sploh ni bilo treba reševati teh nadlog, da bi dobili dragocene podatke? Vstopite v Zenserp, osnovno ponudbo avstrijske SaaS Industries.

Zenserp na kratko | SERP-ji Strganje z Zenserpom

Zenserp API je sanjsko orodje za razvijalce SEO, ki iščejo rešitev na ključ za odpravo pogostih ovir za strganje. Uporaba in integracija je preprosto preprosta, zahvaljujoč uporabniško usmerjenemu razvojnemu ciklu SaaS Industries in široki jezikovni združljivosti (Browser, Curl, Python, Node.js, PHP). Še več, njihov požrešen apetit po povratnih informacijah potrošnikov in zahtevah po funkcijah je aprila 2019 privedel do velike posodobitve API-ja, ki vključuje obsežno paleto podatkovnih vrst, vključno z Googlovimi slikami, videoposnetki, zemljevidi, novicami, nakupovanjem in tudi trendi.

V kombinaciji s konkurenčnimi cenami in vrhunskimi storitvami za stranke. Resnično imate vsestransko rešitev za svoje strgajoče SERP težave v Zenserpu.

Kako začeti z Zenserpom

Torej, kako je dejansko uporabljati Zenserp? Spodaj opisujemo postopek začetka uporabe Zenserpa. Nato se poglobimo v njihovo dokumentacijo API, da si podrobneje ogledamo robustno funkcionalnost Zenserpa.

Pregled nadzorne plošče | SERP-ji Strganje z Zenserpom

Recimo, da samo pokukate, kaj sploh je Zenserp, boste na njihovi domači strani kliknili svetlo zeleni gumb Prijavite se brezplačno. Ko ustvarite in preverite svoj račun, kliknite Prijava za dostop do nadzorne plošče.

Stran, na katero pristanete, prikazuje pregled najpomembnejših informacij o uporabi, vključno s ključem API, mesečno kvoto zahtev in uporabo API-ja skozi čas. Poleg tega dokumentacija o morebitnih neuspelih zahtevah. Obstaja tudi priročen razdelek Request Builder, ki nove uporabnike Zenserpa usmerja k številnim uporabnim virom. Večino tega bomo obravnavali v razdelku Dokumentacija v tem pregledu, zato se držite tega.

Oglejmo si na hitro vse možnosti stranske vrstice:

• Armaturna plošča - Tu ste že! To je preprosto hitra povezava, s katero se lahko kadar koli vrnete na stran s pregledom.
• Igrišče - Ta stran ima ustrezno poimenovanje in ponuja popolnoma vizualni (tj. Kodiranje ni potrebno) in interaktivni vmesnik, s katerim se lahko poigravate z različnimi končnimi točkami Zenserpa. Tu lahko ustvarite nekaj vzorčnih odgovorov in jih uporabite za konfiguriranje zahteve za API. Ne zanašajte se na to 100-odstotno, saj obstajajo vogalni primeri, ki presegajo zmožnosti tega orodja. Kljub temu nam je všeč, kako imate možnost, da svoje eksperimentiranje izvozite v kodo (Browser, Curl, Python, Node.js, PHP), ko najdete nekaj, kar resnično deluje.
• Dokumentacija - Podrobno opisuje drobost API-ja Zenserp. To poglobljeno pokrivamo spodaj.
• Profil / varnost - Osnovna konfiguracija računa, vključno z avatarjem, kontaktnimi podatki in upravljanjem gesel. Nič modnega.
• Obračun - Vsebuje tri možnosti, kjer lahko nadgradite / znižate / prekličete svojo naročnino, upravljate svoj način plačila in ID za DDV ter brezplačno polje, kjer lahko zahtevate vključitev besedila na račune Zenserp za lažje računovodstvo.

Vse to je precej običajna cena za kateri koli API, vendar cenimo, kako preprosto je vse postavljeno. Kar vidite, je tisto, kar dobite, in Zenserp ne poskuša zakopati nastavitev naročnine v nejasnih kotih vašega profila.

Dokumentacija o API-ju Zenserp | SERP-ji Strganje z Zenserpom

Z osnovami, ki se jim izogibamo, lahko zdaj preidemo na dobre stvari: Zenserpova dokumentacija. Tu boste natančno videli, za kaj je zmožen API in kako ga uporabiti. Čeprav popolna implementacija API-ja v vašo aplikacijo presega obseg tega pregleda, se bomo na kratko dotaknili vsake končne točke, nekaterih ključnih parametrov in podali nekaj primerov odzivov.

Osnovna funkcionalnost

Začetek strani z dokumentacijo je primerno imenovan Uvod, ki podrobno opisuje vaše najosnovnejše funkcije API, ki lahko komunicirajo z vsemi drugimi končnimi točkami. Oglejmo si:

opomba 5 sprint koren

• Preverjanje pristnosti - To vam pokaže, kako za preverjanje pristnosti uporabljate svoj ključ API. V glavi je primer uporabe, ki ji sledita primera zahtev GET in POST. Preprosto grah.
• stanje - Omogoča zahtevo števila preostalih zahtev glede na vaše naročnine. Zakaj bi se navsezadnje trudili, da bi se prijavili na svojo nadzorno ploščo Zenserp, če pa vam lahko samo aplikacija sporoči neposredno?
• serija - Če dodate to končno točko, lahko v enem paketu izvedete do 1.000 iskanj. Imate možnost, da zahtevate vse pakete hkrati, posebej glede na ID serije, ali po potrebi oddate novo serijo ali združite obstoječe.
• Kode napak - Zenserp ima tudi možnost vrniti napake, ko se pojavijo. Vključno s 403 prepovedano, ko ste dosegli mesečno omejitev ali uporabili napačen ključ API, 404, ko niso bili najdeni rezultati, ali 500. Kadar pride do napake strežnika. Ne pozabite, da se neuspele zahteve pojavijo tudi na vaši nadzorni plošči.

Končna točka / iskanje | SERP-ji Strganje z Zenserpom

Osnovna funkcionalnost Zenserpa je tu. Z dodajanjem / iskanjem vaše zahteve za API. Prejeli boste obsežno paleto podatkov o vsem, za kar si mislite, da boste zbirali SERPS. Vaša poizvedba bo vrnila široko paleto rezultatov, vključno z:

• Rezultati organskega iskanja - Poizvedovanje po organskih SERP-jih vrne vse vrste podatkov, vključno z uvrstitvijo predmeta, naslovom, prikazanim in ciljnim URL-jem, več vrst pregledov, ali je povezava povezava Google AMP, nizi, ki predstavljajo opis strani, in dodatek Local 3-Pack ki vsebuje podatke o podjetju.
• Plačani rezultati - Dobili boste tudi popoln pregled plačanih rezultatov. Vrnjeni podatki vključujejo plačan položaj (zgoraj, desno ali spodaj), naslov, URL za sledenje programa AdWords, drobtine, vidni URL, kot je prikazan v Googlu, opis strani ter morebitne plačljive umestitve izdelkov (vključno s položajem, naslovom, povezanimi slikami, URL in seveda cena).
• Polje za odgovore / predstavljeni delček / glavna zgodba - Čisto zlato za kateri koli SEO. Preprosto si oglejte, kaj je najbolje, če želite pridobiti te zaželene točke na SERP-jih, nato pa sestavite strategijo za ponovitev teh rezultatov.
• Sorodna iskanja / ste mislili - Zenserp izboljša raziskave vaših ključnih besed tako, da v vašo poizvedbo vrne dragocene podatke o vseh povezanih iskanjih. Prav tako lahko predvidevate, kako se Google odziva na pogoste napake, ki jih uporabniki naredijo pri iskanju vaše poizvedbe.

Tu je skrajšana različica primera, ki je prikazan v Zenserp dokumentacijo, za poizvedbo pa Pied Piper. Ogledate si lahko različne vrste rezultatov, ki se prikažejo zaporedoma: vnos na Wikipediji (1), vprašanja v zvezi s poizvedbo (2), spletno mesto z natančno ujemajočim se imenom domene (3), priljubljen članek o izvoru Pied Piper (4) in nekaj sorodnih videoposnetkov na to temo (5). Videli boste tudi nekatere sorodne iskalne fraze in skupno število vrnjenih rezultatov.

Primer

{ 'query':{ 'apikey':'YOUR-API-KEY', 'q':'Pied Piper', 'url':'https://google.com/search?q=Pied+Piper&hl=en&gl=us&sourceid=chrome&ie=UTF-8' }, 'organic':[ { 'position':1, 'title':'Pied Piper of Hamelin - Wikipedia', 'url':'https://en.wikipedia.org/wiki/Pied_Piper_of_Hamelin', 'destination':'https://en.wikipedia.org › wiki › Pied_Piper_of_Hamelin', 'description':'The Pied Piper of Hamelin is the titular character of a legend from the town of Hamelin (Hameln), Lower Saxony, Germany. The legend dates back to the Middle ...', 'isAmp':false }, { 'position':2, 'questions':[ { 'question':'What is the meaning of the Pied Piper?' }, { 'question':'What is the story of the Pied Piper?' }, { 'question':'Is the pied piper a fairy tale?' }, { 'question':'Is Pied Piper a real company?' } ] }, { 'position':3, 'title':'Pied Piper', 'url':'http://www.piedpiper.com/', 'destination':'www.piedpiper.com', 'description':'The old Pied Piper flute player logo was referencing a fairytale character and in no way was meant to suggest a sexual act involving either the mouth or ear of ...', 'isAmp':false }, { 'position':4, 'title':'The Disturbing True Story of the Pied Piper of Hamelin ...', 'url':'https://www.ancient-origins.net/myths-legends/disturbing-true-story-pied-piper-hamelin-001969', 'destination':'https://www.ancient-origins.net › myths-legends › disturbing-true-story-pie...', 'description':'Aug 14, 2014 - Many are familiar with the story of the Pied Piper of Hamelin. Few realise however, that the story is based on real events, which evolved over ...', 'isAmp':false }, { 'position':5, 'videos':[ { 'title':'Pied Piper', 'url':'https://www.youtube.com/watch?v=VEZ_Ui6d9AM', 'parsed':{ 'source':'YouTube', 'date':'May 2, 2018', 'channel':'BTS - Topic' } }, { 'title':'The True History of The Pied Piper of Hamelin | Fairy Tales ...', 'url':'https://www.youtube.com/watch?v=obIAwAAcAAg', 'parsed':{ 'source':'YouTube', 'date':'Aug 4, 2017', 'channel':'Jen Campbell' } }, { 'title':'The Pied Piper: a modern day fairy tale', 'url':'https://www.wvi.org/child-health-now/video/pied-piper-modern-day-fairy-tale', 'parsed':{ 'source':'World Vision International', 'date':'Aug 22, 2013', 'channel':'WVIAdvocacy' } } ] } ], 'related_searches':[ { 'title':'pied piper instrument', 'url':'https://google.com/search?hl=en&gl=us&q=pied+piper+instrument&sa=X&ved=2ahUKEwj-vPeI3oXnAhVJJBoKHQ6iDYkQ1QIoAHoECBMQAQ' }, { 'title':'pied piper poem', 'url':'https://google.com/search?hl=en&gl=us&q=pied+piper+poem&sa=X&ved=2ahUKEwj-vPeI3oXnAhVJJBoKHQ6iDYkQ1QIoAXoECBMQAg' }, { 'title':'moral lesson of pied piper story', 'url':'https://google.com/search?hl=en&gl=us&q=moral+lesson+of+pied+piper+story&sa=X&ved=2ahUKEwj-vPeI3oXnAhVJJBoKHQ6iDYkQ1QIoAnoECBMQAw' }, { 'title':'the pied piper of hamelin summary', 'url':'https://google.com/search?hl=en&gl=us&q=the+pied+piper+of+hamelin+summary&sa=X&ved=2ahUKEwj-vPeI3oXnAhVJJBoKHQ6iDYkQ1QIoA3oECBMQBA' }, { 'title':'pied piper of hamelin story pdf', 'url':'https://google.com/search?hl=en&gl=us&q=pied+piper+of+hamelin+story+pdf&sa=X&ved=2ahUKEwj-vPeI3oXnAhVJJBoKHQ6iDYkQ1QIoBHoECBMQBQ' }, ], 'number_of_results':34800000 }

Izboljšanje zahteve glede na vrsto iskanja | SERP-ji Strganje z Zenserpom

Poleg privzete zahteve za SERP lahko svojo iskalno poizvedbo Google natančneje določite tudi glede na vrsto iskanja (Slika, Video, Zemljevidi, Nakupovanje, Novice, Nakupovanje itd.). Preprosto nastavite Tudi (ki se ujema) s katero koli od naslednjih možnosti:

• ish - Vrne rezultate Google Iskanja slik. Ta zahteva vrne veliko podatkov, vključno s položajem, sličicami, URL-ji virov, naslovi in ​​še več. (Za povratno iskanje slik boste zagnali slika_url namesto tbm = ish )
• ob - Vrne rezultate Google Video Search. Prejeli boste informacije, kot so izvorna domena, URL videoposnetka, naslov, opis ter vse razširitve ali sličice.
• lcl - Še ena zlata rudnina podatkov SEO lcl parameter vrne rezultate iskanja v Google Zemljevidih. Videli boste ime podjetja / lokacije, URL-je spletnih mest, ne glede na to, ali je rezultat plačan ali ne, morebitne zvezdice ali mnenja ter ključne informacije, kot so naslov, telefonske številke, delovni čas, pomembne cene in celo vrsta podjetja. Za ta podjetja lahko tudi zahtevate navodila.
• to - Ali želite biti na tekočem z aktualnimi dogodki in razvojem v vaši panogi? Dodajte to parameter v poizvedbo za vrnitev rezultatov iskanja v Google News v realnem času. Oglejte si imena člankov, njihove povezave, datume, objavljene (in razčlenjene po vašem API-ju), založnika, kratek opis članka in vse sličice, ki so na voljo.
• trgovina - Dostopajte do rezultatov Google Shopping Search z trgovina parameter. Oglejmo si nekaj vzorčnih rezultatov (močno okrnjenih zaradi berljivosti) za grelnike vode v Atlanti, GA:

Nakupovanje EndPoint

Poleg jedra /Iskanje končno točko, vsebuje tudi Zenserp API / nakupovanje . To vam omogoča razčlenitev strani z Googlovimi nakupovalnimi izdelki. Dodali boste product_id parameter za vaš / nakupovanje poizvedbo z možnostjo določitve želene iskalne geolokacije ( lokacijo ), koda države ( gI ) in / ali jezik spletnega vmesnika ( hl ). Spremenite lahko tudi različico regije Iskanja Google, s katero želite uporabljati search_engine .

Končna točka trenda | SERP-ji Strganje z Zenserpom

Zahteve za Google Trende se pošljejo z dodajanjem / trendi na vašo zahtevo (čeprav Zenserpova dokumentacija nepravilno navaja, da bi morali uporabljati / nakupovanje ). Rezultati vaših trendov temeljijo na ključna beseda [] parameter, kjer kot argument v [] vnesete ključno besedno zvezo. Zenserpova dokumentacija vsebuje priročen opomnik o tem, katere operaterje Trends uporablja (+ za ali, - za izključitev, prostor za in ter citate za natančno ujemanje), kar bo pomembno pri vaši poizvedbi.

Nadalje lahko določite časovni pas ( tz ), ID kategorije ( mačka ), časovni okvir za vaše rezultate (urni, dnevni, mesečni, letni v številnih podrazdelkih). The tip Googlove znamke za iskanje (na primer slike, leti, YouTube, Finance itd.). The geo lokacija ali Googlova lokacijska koda ( gI ) in celo resolucija znotraj te regije (v bistvu določite, ali iščete po vsej državi, po mestu, regiji itd.)

Recimo, da ste želeli videti, kako je Kanye West trendiral v zadnjem mesecu. Zahtevo bi podali tako:

https://app.zenserp.com/api/v1/trends?apikey=YOUR-API-KEY&keyword%5B%5D=kanye%20west&timeframe=today%201-m

Uspešnost | SERP-ji Strganje z Zenserpom

Kako smo končali s pregledom funkcij, kako dejansko deluje Zenserp? Navsezadnje so vsi ti lepi podatki neuporabni, če do njih dejansko ne morete dostopati zaradi Googlovega programskega prizadevanja za zbiranje podatkov.

Po naših izkušnjah je Zenserp svoje naloge opravljal brez kolcanja, ne glede na to, kaj smo iskali in kam po svetu smo ciljali svoja vprašanja. Tu je skrivno orožje neverjetno svetovno proxy omrežje Zenserp, ki vaše zahteve preusmeri tja, kamor morajo iti, medtem ko vaš naslov IP spremeni. Čeprav Zenserp ne objavlja dejanskih številk njihovega strežniškega omrežja, se je izkazal za dovolj močnega, da nikoli ni odkril niti ene napake, ko smo podali testne zahteve.

Pod pokrovom API-ja Zenserp je tudi izpopolnjen reševalec Captcha. Še enkrat nimamo podrobnosti o tem, kako so to naredili. Toda delo je opravilo in dosledno tudi.

Cenitev

Zenserpova infrastruktura zadostuje za zadovoljevanje kakršnega koli obsega delovanja. Ponujajo širok razpon cen naročnin, tako da plačate le tisto, kar potrebujete. Ne glede na stopnjo, ki jo izberete, lahko plačate nizko mesečno naročnino ali ujamete 20% popust na letni načrt.

Poleg standardnih stopenj Zenserp ponuja velike načrte. To je zaklenjeno v mesečno shemo plačil. Vsaka stopnja vključuje vse premium funkcije SREDNJO VELIKIH načrtov. In prilagodite svojo mesečno kvoto glede na to, koliko plačate:

• PREMIUM - 599,99 USD in 250.000 zahtevkov na mesec
• PROFESIONALNO - 1.399,99 USD in 750.000 zahtev na mesec
• PODJETJE - 1.599,99 USD in 1.000.000 zahtev na mesec

SERP-ji Strganje z Zenserpom

SaaS Industries je s svojim Zenserp API-jem ponudil neverjetno ponudbo. Zaradi svoje robustne infrastrukture je prilagodljiv in zelo prilagodljiv. Kljub temu pa je preprosto vgraditi v vašo aplikacijo po zaslugi enostavne parametrične logike in široke združljivosti s kodnim jezikom.

Naše testiranje je dalo dosledne rezultate, ne da bi kdaj prišlo do napake. Čeprav sumimo, da storitev ni neobčutljiva za napake v obsegu, ki jih zahtevajo velika podjetja. Ne glede na to, katero vrsto zahteve smo vložili, so bili rezultati vedno pravočasni in pomembni. Izjemno koristno je, da lahko prošnjo za SERP izboljšate glede na vrsto iskanja, zato je jasno, da Zenserp ponuja neprecenljivo, a cenovno ugodno orodje za vse razvijalce SEO.

Če smo imeli kakršno koli kritiko storitve, je, da bi dokumentacija lahko uporabila nekoliko bolj naraven jezik za razlago njene vsebine. Seveda izkušeni razvijalec ne bi smel imeti težav z razumevanjem ponudbe, zato to verjetno ni vprašanje. Tudi če je, vsi, razen najmanjših plačilnih stopenj, vključujejo vratarja in osebno podporo strankam, tako da boste vedno lahko popolnoma odgovorili na svoje potrebe.

Zaključek

No, to je bilo vse Ljudje! Upam, da vam je všeč ta članek SERPs Scraping with Zenserp in se vam zdi koristen. Pošljite nam svoje povratne informacije o tem. Tudi če imate dodatna vprašanja v zvezi s tem člankom. Nato nam to sporočite v spodnjem oddelku za komentarje. V kratkem se vam bomo oglasili.

Imej lep dan!

Glej tudi: Uporabniški priročnik za ogled predpomnilnika Chrome v operacijskem sistemu Windows 10