Reaalajas SERP-ide kraapimine Zenserpiga - ülevaade

Google'il on pikka aega olnud SEO arendajatele tõeliselt raske aeg, kui nad üritavad oma otsingutulemuste lehtedelt avalikult kättesaadavaid andmeid välja kraapida. Tõepoolest, SERP-i kraapimine on ametlikult vastuolus Big G-i teenusetingimustega. Kuid see tava ei riku arvutipettuste ja väärkasutuse seadust (CFAA) ning seega on Google'i otsesed õiguslikud toimingud selle tegevuse piiramiseks langenud. Selles artiklis räägime väga skaleeritavatest reaalajas SERP-idest, mis kraapivad Zenserpiga. Alustagem!

Ehkki kraapimine pole tegelikult ebaseaduslik ega kahjusta praktikas kellegi tundeid, peavad arendajad ikkagi teetõketega võitlema. Selle on Google välja töötanud, et takistada nende andmete kogumist. Levinud peavalude hulka kuuluvad Captchas ja IP-blokeerimine. Kuid varem on saadetud lõpetamiskirju, selline taktika on üha haruldasem.

Aga mis siis, kui te ei peaks nende väärtuslike andmete saamiseks üldse nende häiretega tegelema? Sisestage Austrias asuva SaaS Industriesi põhipakkumine Zenserp.

Zenserp lühidalt | SERPid kraapides Zenserpiga

Zenserpi API on unistuste tööriist SEO arendajatele, kes otsivad võtmed kätte lahendust tavaliste kraapimistõkete kõrvaldamiseks. Tänu SaaS Industriesi kasutajakesksele arendustsüklile ja laialdasele keelte ühilduvusele (brauser, Curl, Python, Node.js, PHP) on selle kasutamine ja integreerimine surm-lihtne. Veelgi enam, nende rohke isu tarbijate tagasiside ja funktsioonitaotluste järele on viinud 2019. aasta aprilli tohutu API-värskenduse, mis sisaldab ulatuslikku valikut andmetüüpe, sealhulgas Google'i pilte, videoid, kaarte, uudiseid, ostlemist ja ka trende.

Koos konkurentsivõimelise hinnakujunduse ja maailmatasemel klienditeenindusega. Teil on tõepoolest kõik-ühes lahendus teie SERP-i kraapivatele hädadele Zenserbis.

Zenserpiga alustamine

Mis tunne on Zenserpi tegelikult kasutada? Allpool käsitleme Zenserpiga alustamise protsessi. Seejärel tutvume nende API dokumentatsiooniga, et Zenserpi jõulist funktsionaalsust lähemalt uurida.

Armatuurlaua ülevaade | SERPid kraapides Zenserpiga

Oletame, et piilute lihtsalt selle kohta, mida Zenserp endast kujutab, klõpsates nende avalehel erkrohelist nuppu Registreeru tasuta paketti. Kui olete oma konto loonud ja kinnitanud, klõpsake juhtpaneelile juurdepääsemiseks nuppu Logi sisse.

Lehel, millele te jõuate, kuvatakse ülevaade teie kõige olulisemast kasutusteabest, sealhulgas teie API võti, igakuine taotluste kvoot, API kasutus aja jooksul. Lisaks võimalike nurjunud taotluste dokumentatsioon. Samuti on olemas jaotis Request Builder, mis suunab uusi Zenserpi kasutajaid paljude kasulike ressursside poole. Enamik sellest on see, mida käsitleme selle ülevaate jaotises Dokumentatsioon, nii et hoidke sellest kinni.

Vaatame kõiki külgriba võimalusi kiiresti:

• Armatuurlaud - Sa oled juba siin! See on lihtsalt kiire link, et igal ajal oma ülevaatlehele naasta.
• Mänguväljak - Sobiva nimega see leht pakub täielikult visuaalset (st kodeerimist vajavat) ja interaktiivset liidest, et saaksite Zenserpi erinevate lõpp-punktidega jamada. Siin saate genereerida mõned näidisvastused ja kasutada neid oma API-päringu konfigureerimiseks. Ärge lootke sellele sajaprotsendiliselt, kuna selle tööriista võimaluste piires on nurga juhtumeid. Sellest hoolimata meeldib meile, kuidas teil on võimalus oma katse koodiks eksportida (brauser, Curl, Python, Node.js, PHP), kui leiate midagi tõeliselt toimivat.
• Dokumentatsioon - üksikasjad Zenserpi API sisikonna kohta. Me käsitleme seda põhjalikult allpool.
• Profiil / turvalisus - Konto põhikonfiguratsioon, sealhulgas teie avatar, kontaktandmed ja paroolihaldus. Pole midagi uhket.
• Arveldamine - Koosneb kolmest võimalusest, kus saate oma liitumistaset uuendada / alandada / tühistada, hallata oma makseviisi ja käibemaksukohustuslase ID-d, pluss tasuta väli, kus saate raamatupidamise lihtsustamiseks taotleda teksti oma Zenserpi arvetele.

Kõik see on iga API jaoks üsna tavaline hind, kuid me hindame, kui lihtsalt kõik on paigutatud. Mida näete, see on see, mida saate, ja Zenserp ei püüa matta tellimuse seadeid teie profiili ebaselgetesse nurkadesse.

Zenserpi API dokumentatsioon SERPid kraapides Zenserpiga

Kui põhitõed on teelt kõrvale jäänud, võime nüüd jõuda heade asjadeni: Zenserpi dokumentatsiooni. Siin näete täpselt, milleks API on võimeline ja kuidas seda kasutada. Kuigi API täielik rakendamine teie rakenduses ei kuulu selle ülevaate raamesse, puudutame lühidalt iga lõpp-punkti, mõnda peamist parameetrit ja pakume näiteid vastustest.

Põhifunktsionaalsus

Dokumentatsioonilehe alustamine on tabavalt nimetatud jaotis Alustamine, mis kirjeldab üksikasjalikumalt teie kõige elementaarsemaid API-funktsioone, mis on võimelised kõigi teiste lõpp-punktidega suhtlema. Heidame pilgu:

aktiveeri / tärniga mängima

• Autentimine - See näitab teile, kuidas kasutada API-võtit autentimiseks. Päises on kasutamise näide, millele järgnevad GET ja POST päringute näited. Lihtne.
• staatus - võimaldab teil taotleda järelejäänud taotluste arvu vastavalt teie liitumispiirangutele. Lõppude lõpuks, miks peaksite oma Zenserpi juhtpaneelile sisse logima, kui saate lihtsalt lasta oma rakendusel teile otse öelda?
• partii - Selle lõpp-punkti lisamine võimaldab teil ühe partiina teha kuni 1000 otsingut. Teil on võimalus taotleda kõiki pakette korraga, täpsustades partii ID-d, või esitada uus partii või ühendada olemasolevad vastavalt vajadusele.
• Veakoodid - Zenserpil on ka võimalus vigade ilmnemisel neid tagasi anda. Sealhulgas 403 Keelatud, kui olete oma igakuise limiidi saavutanud või valet API-võtit kasutanud, 404, kui tulemusi pole leitud, või 500. Kui esineb serveri viga. Ärge unustage, et ebaõnnestunud taotlused ilmuvad ka teie juhtpaneelil.

/ Otsingu lõpp-punkt | SERPid kraapides Zenserpiga

Zenserpi põhifunktsioonid on siin. Lisades / otsides oma API taotlust. Te saate põhjaliku hulga andmeid põhiliselt kõigi asjade kohta, mille jaoks võite mõelda SERPS-ide kogumiseks. Teie päring annab laia valikut tulemusi, sealhulgas:

• Orgaanilised otsingutulemid - Orgaaniliste SERP-ide päring tagastab kõikvõimalikud andmed, sealhulgas üksuse järjestuse, selle pealkirja, nii kuvatud kui ka sihtkoha URL-i, mitut tüüpi arvustused, olenemata sellest, kas link on Google AMP link, lehe kirjeldust tähistavad stringid ja pluss Local 3-Pack mis sisaldab äriteavet.
• Tasulised tulemused - Samuti saate täieliku ülevaate tasulistest tulemustest. Tagastatav teave sisaldab tasulist positsiooni (üleval, paremal või all), pealkirja, AdWordsi jälgimise URL-i, riivsaiu, nähtavat URL-i, nagu see Google'is kuvatakse, lehe kirjeldust, pluss tasulisi tootepaigutusi (sh positsioon, pealkiri, seotud pildid, URL ja muidugi hind).
• Vastuste kast / esiletõstetud koodilõik / parim lugu - Puhas kuld igale SEO-le. Vaadake hõlpsasti, mis toimib kõige paremini nende ihaldatud kohtade saamiseks SERP-idel, seejärel koostage strateegia nende tulemuste kordamiseks.
• Seotud otsingud / mõtlesite - Zenserp täiustab teie märksõnade uurimist, tagastades teie päringule väärtuslikke andmeid kõigi seotud otsingute kohta. Samuti saate ennustada, kuidas Google reageerib levinud vigadele, mida kasutajad teie päringu otsimisel teevad.

Siin on jaotises kuvatud näite kärpitud versioon Zenserp dokumentatsioon, kus päringuks on Pied Piper. Näete erinevat tüüpi tulemusi, mis kuvatakse järjestuses: Vikipeedia kirje (1), päringuga seotud küsimused (2), täpse vastega domeeninimega veebisait (3), populaarne artikkel Pied Piperi päritolu kohta (4), lisaks mõned seotud videod sellel teemal (5). Näete ka mõningaid seotud otsingufraase koos tagastatud tulemuste koguarvuga.

Näide

{ 'query':{ 'apikey':'YOUR-API-KEY', 'q':'Pied Piper', 'url':'https://google.com/search?q=Pied+Piper&hl=en&gl=us&sourceid=chrome&ie=UTF-8' }, 'organic':[ { 'position':1, 'title':'Pied Piper of Hamelin - Wikipedia', 'url':'https://en.wikipedia.org/wiki/Pied_Piper_of_Hamelin', 'destination':'https://en.wikipedia.org › wiki › Pied_Piper_of_Hamelin', 'description':'The Pied Piper of Hamelin is the titular character of a legend from the town of Hamelin (Hameln), Lower Saxony, Germany. The legend dates back to the Middle ...', 'isAmp':false }, { 'position':2, 'questions':[ { 'question':'What is the meaning of the Pied Piper?' }, { 'question':'What is the story of the Pied Piper?' }, { 'question':'Is the pied piper a fairy tale?' }, { 'question':'Is Pied Piper a real company?' } ] }, { 'position':3, 'title':'Pied Piper', 'url':'http://www.piedpiper.com/', 'destination':'www.piedpiper.com', 'description':'The old Pied Piper flute player logo was referencing a fairytale character and in no way was meant to suggest a sexual act involving either the mouth or ear of ...', 'isAmp':false }, { 'position':4, 'title':'The Disturbing True Story of the Pied Piper of Hamelin ...', 'url':'https://www.ancient-origins.net/myths-legends/disturbing-true-story-pied-piper-hamelin-001969', 'destination':'https://www.ancient-origins.net › myths-legends › disturbing-true-story-pie...', 'description':'Aug 14, 2014 - Many are familiar with the story of the Pied Piper of Hamelin. Few realise however, that the story is based on real events, which evolved over ...', 'isAmp':false }, { 'position':5, 'videos':[ { 'title':'Pied Piper', 'url':'https://www.youtube.com/watch?v=VEZ_Ui6d9AM', 'parsed':{ 'source':'YouTube', 'date':'May 2, 2018', 'channel':'BTS - Topic' } }, { 'title':'The True History of The Pied Piper of Hamelin | Fairy Tales ...', 'url':'https://www.youtube.com/watch?v=obIAwAAcAAg', 'parsed':{ 'source':'YouTube', 'date':'Aug 4, 2017', 'channel':'Jen Campbell' } }, { 'title':'The Pied Piper: a modern day fairy tale', 'url':'https://www.wvi.org/child-health-now/video/pied-piper-modern-day-fairy-tale', 'parsed':{ 'source':'World Vision International', 'date':'Aug 22, 2013', 'channel':'WVIAdvocacy' } } ] } ], 'related_searches':[ { 'title':'pied piper instrument', 'url':'https://google.com/search?hl=en&gl=us&q=pied+piper+instrument&sa=X&ved=2ahUKEwj-vPeI3oXnAhVJJBoKHQ6iDYkQ1QIoAHoECBMQAQ' }, { 'title':'pied piper poem', 'url':'https://google.com/search?hl=en&gl=us&q=pied+piper+poem&sa=X&ved=2ahUKEwj-vPeI3oXnAhVJJBoKHQ6iDYkQ1QIoAXoECBMQAg' }, { 'title':'moral lesson of pied piper story', 'url':'https://google.com/search?hl=en&gl=us&q=moral+lesson+of+pied+piper+story&sa=X&ved=2ahUKEwj-vPeI3oXnAhVJJBoKHQ6iDYkQ1QIoAnoECBMQAw' }, { 'title':'the pied piper of hamelin summary', 'url':'https://google.com/search?hl=en&gl=us&q=the+pied+piper+of+hamelin+summary&sa=X&ved=2ahUKEwj-vPeI3oXnAhVJJBoKHQ6iDYkQ1QIoA3oECBMQBA' }, { 'title':'pied piper of hamelin story pdf', 'url':'https://google.com/search?hl=en&gl=us&q=pied+piper+of+hamelin+story+pdf&sa=X&ved=2ahUKEwj-vPeI3oXnAhVJJBoKHQ6iDYkQ1QIoBHoECBMQBQ' }, ], 'number_of_results':34800000 }

Taotluse täpsustamine otsingu tüübi järgi | SERPid kraapides Zenserpiga

Peale SERP-ide vaiketaotluse saate oma Google'i otsingupäringut täpsustada ka otsingu tüübi (pilt, video, kaardid, Shopping, uudised, Shopping jne) järgi. Lihtsalt määrake Ka (tuleb sobitada) parameeter mis tahes järgmistest valikutest:

• ish - tagastab Google'i pildiotsingu tulemused. See taotlus tagastab hulga andmeid, sealhulgas positsiooni, pisipilte, allika URL-e, pealkirju ja palju muud. (Pööratud pildiotsingu jaoks käivitate image_url parameetri asemel tbm = ish )
• kell - Tagastab Google'i videootsingu tulemused. Saate sellist teavet nagu lähte domeen, video URL, pealkiri, kirjeldus ning kõik laiendused või pisipildid.
• lcl - Teine SEO andmete kullakaevandus, lcl parameeter tagastab Google Mapsi otsingu tulemused. Näete ettevõtte / asukoha nime, veebisaidi URL-e, olenemata sellest, kas tulemus on tasuline või mitte, tähti või arvustusi, lisaks olulist teavet, näiteks aadressi, telefoninumbreid, töötunde, märkimisväärseid hindu ja isegi ettevõtte tüüpi. Samuti on teil võimalus taotleda juhiseid nendele ettevõtetele.
• seda - Kas peate olema kursis oma tööstuse praeguste sündmuste ja arengutega? Lisage seda reaalajas Google Newsi otsingu tulemuste tagastamiseks teie päringu parameeter. Vaadake artiklite nimesid, nende linke, avaldatud (ja teie API poolt sõelutud) kuupäevi, väljaandjat, artikli lühikirjeldust ja kõiki saadaolevaid pisipilte.
• pood - pääsete juurde teenuse Google Shopping otsingu tulemustele pood parameeter. Vaatame mõningaid proovitulemusi (loetavuse huvides tugevalt kärbitud) veesoojendite kohta Atlantas, GA:

Shopping EndPointi

Peale tuuma /otsing ka Zenserpi API / šoppamine . See võimaldab teil Google Shoppingu tootelehti sõeluda. Lisate toote_id parameeter teie / šoppamine päring koos võimalusega määrata soovitud geograafiline asukoht ( asukoht ), riigi kood ( gI ) ja / või veebiliidese keel ( hl ). Samuti saate muuta, millist Google'i otsingu piirkonna varianti soovite kasutada otsingumootor .

Trendi lõpp-punkt | SERPid kraapides Zenserpiga

Google Trendsi taotlused tehakse liitmisega / suundumused teie taotlusele (kuigi Zenserpi dokumentatsioon ütleb valesti, et peaksite seda kasutama / šoppamine ). Teie Trendsi tulemusi toetab märksõna [] parameeter, kus edastate argumendina [] märksõna fraasi. Zenserpi dokumentatsioonil on mugav meeldetuletus selle kohta, milliseid operaatoreid Trends kasutab (+ + või, - välistamiseks, täpse vaste jaoks mõeldud ruumi ja jutumärgid), mis on teie päringus oluline.

Ajavööndit ( tz ), kategooria ID ( kass ), ajaraam oma tulemuste jaoks (tunnis, päevas, kuus, aastas paljudes alajaotustes). The tüüp Google'i vara otsimiseks (nt pildid, lennud, YouTube, rahandus jne). The geo asukoht või Google'i asukohakood ( gI ) ja isegi resolutsioon selle piirkonna piires (sisuliselt määrates, kas otsite üleriigiliselt, ülelinnaliselt, piirkondlikult jne)

Oletame, et tahtsite näha, kuidas Kanye West on viimase kuu jooksul trendinud. Teete päringu nii:

https://app.zenserp.com/api/v1/trends?apikey=YOUR-API-KEY&keyword%5B%5D=kanye%20west&timeframe=today%201-m

Performance | SERPid kraapides Zenserpiga

Nüüd, kui funktsioonide ülevaade on lõpule jõudnud, kuidas Zenserp tegelikult toimib? Lõppude lõpuks on kõik need toredad andmed kasutud, kui te ei pääse neile tegelikult juurde Google'i kiviseina programmilise andmekogumise jõupingutuste tõttu.

Meie kogemuste kohaselt täitis Zenserp oma ülesandeid ilma luksumiseta, hoolimata sellest, mida otsisime ja kuhu me maailmas oma päringuid sihtisime. Salarelv on siin Zenserpi uskumatu ülemaailmne puhverserver, mis suunab teie taotlused sinna, kuhu nad peavad minema, muutes teie IP-aadressi sobivaks. Kuigi Zenserp ei avalikusta oma serverivõrgu tegelikke numbreid, osutus see küllalt jõuliseks, et testitaotluste esitamisel ei tekiks kunagi ühtegi viga.

Zenserpi API kapoti alla kuulub ka keeruline Captcha lahendaja. Taas pole meil üksikasju selle kohta, kuidas nad selle töö tegid. Kuid töö, mida ta tegi, ja ka järjekindlalt.

Hinnakujundus

Zenserpi infrastruktuur on piisav kõigi toimimisskaalade rahuldamiseks. Nad pakuvad laia valikut liitumishinnapunkte, nii et maksate ainult täpselt selle eest, mida vajate. Ükskõik millise taseme valite, võite maksta madalat kuutasu või võtta aastaplaanilt 20% allahindlust.

Lisaks standardsetele astmetele pakub Zenserp suure mahuga plaane. See on lukustatud igakuise maksega skeemi. Iga tasand sisaldab kõiki MEDIUM-VERY LARGE plaanide esmaklassilisi funktsioone. Ja skaleerib teie igakuise kvoodi vastavalt sellele, kui palju te maksate:

• PREMIUM - 599,99 dollarit ja 250 000 taotlust kuus
• PROFESSIONAL - 1 399,99 dollarit ja 750 000 taotlust kuus
• ETTEVÕTLUS - 1 599,99 dollarit ja 1 000 000 taotlust kuus

SERPid kraapides Zenserpiga

SaaS Industries on oma Zenserp API-ga pakkunud uskumatut pakkumist. Tänu tugevale infrastruktuurile on see kohandatav ja skaleeritav. Tänu lihtsale parameetrilisele loogikale ja kodeerimiskeele laia ühilduvusele on oma rakendusse integreerimine surm-lihtne.

Meie testimine andis püsivaid tulemusi, ilma et oleksime kunagi viga visanud. Kuigi me kahtlustame, et teenus ei ole vigastamatu suurettevõtete nõutavas ulatuses. Sõltumata sellest, millist tüüpi taotlust me esitasime, olid tulemused alati õigeaegsed ja sisukad. On äärmiselt kasulik, kui saate oma SERP-taotlusi otsingutüübi järgi täpsustada, ja sellisena on selge, et Zenserp pakub igale SEO arendajale hindamatut, kuid taskukohast tööriista.

Kui meil oleks teenuse suhtes mingisugust kriitikat, siis võib dokumentatsioon selle sisu selgitamiseks kasutada natukenegi loomulikumat keelt. Muidugi ei tohiks kogenud arendajal olla probleeme pakutava mõistmisega, seega pole see tõenäoliselt probleem. Isegi kui see nii on, hõlmavad kõik peale väikseimate maksete taseme uksehoidja teenust ja isikupärastatud kliendituge, nii et saate alati oma vajadustega suurepäraselt hakkama.

Järeldus

Hästi, see oli kõik inimesed! Ma loodan, et teile meeldivad see ZER-artikliga kraapivad SERP-id ja leiate, et see on teile kasulik. Andke meile selle kohta tagasisidet. Ka siis, kui teil on selle artikliga seotud täiendavaid päringuid. Seejärel andke meile sellest teada allpool olevast kommentaaride jaotisest. Pöördume teie poole varsti.

Head päeva!

Vaata ka: Kasutusjuhend Chrome'i vahemälu kuvamise kohta Windows 10-s