SERPs en temps real raspat amb Zenserp: revisió

Google té una llarga història de temps realment difícil per als desenvolupadors de SEO que intenten eliminar les dades disponibles públicament de les seves pàgines de resultats de cerca. De fet, el raspat SERP és oficialment contra les condicions del servei de Big G. Tanmateix, la pràctica no infringeix la Llei de frau i abús informàtic (CFAA) i, per tant, les accions legals directes de Google per restringir la pràctica han caigut de ple. En aquest article, parlarem de SERP en temps real altament escalable i raspallat amb Zenserp. Anem a començar!

Per tant, tot i que el rascat en realitat no és il·legal ni perjudica els sentiments de ningú a la pràctica, els desenvolupadors encara han de lluitar amb els obstacles. Google ho ha dissenyat per impedir la recopilació de dades. Els mals de cap habituals inclouen Captchas i bloqueig d’IP. No obstant això, en el passat s’han enviat cartes de cessament i cessació, aquesta tàctica és cada vegada més rara.

Però, i si no haguéssiu de fer front a aquestes molèsties per obtenir les vostres dades precioses? Introduïu Zenserp, una oferta bàsica de SaaS Industries amb seu a Àustria.

Zenserp en poques paraules | SERPs Raspa amb Zenserp

L'API Zenserp és una eina de somni per a desenvolupadors de SEO que busquen una solució clau en mà per eliminar els obstacles habituals de rascat. És senzill d’utilitzar i d’integrar gràcies al cicle de desenvolupament centrat en l’usuari de SaaS Industries i a la gran compatibilitat del llenguatge (navegador, Curl, Python, Node.js, PHP). A més, el seu apetit voraç per la retroalimentació dels consumidors i les sol·licituds de funcions ha portat a l’enorme actualització de l’API d’abril de 2019 per incloure una àmplia gamma de tipus de dades, incloses imatges de Google, vídeos, mapes, notícies, compres i també tendències.

Combinat amb preus competitius i servei al client de primer nivell. Realment teniu una solució tot-en-un per als vostres problemes de raspall SERP a Zenserp.

Introducció a Zenserp

Quin és l’ús real de Zenserp? A continuació, es descriu el procés per començar amb Zenserp. A continuació, ens endinsem en la documentació de la seva API per conèixer de prop la robusta funcionalitat de Zenserp.

Informació general del tauler | SERPs Raspa amb Zenserp

Suposem que només feu una ullada a què tracta Zenserp; feu clic al botó de color verd brillant Registra't per obtenir un pla gratuït a la pàgina d'inici. Quan hàgiu creat i verificat el compte, feu clic a Inicia la sessió per accedir al tauler.

A la pàgina on arribeu es mostra una visió general de la informació d’ús més important, inclosa la clau de l’API, la quota de sol·licitud mensual i l’ús de l’API al llarg del temps. A més, documentació de qualsevol petició fallida que es pugui haver produït. També hi ha una secció útil del Creador de sol·licituds que dirigeix ​​els nous usuaris de Zenserp cap a una gran quantitat de recursos útils. La major part d’això és un tema que tractarem a la secció Documentació d’aquesta revisió, així que no us hi deixeu d’estar.

Fem una ullada ràpida a totes les opcions de la barra lateral:

• panell - Ja sou aquí! Aquest és simplement un enllaç ràpid per tornar a la pàgina de visió general en qualsevol moment.
• Parc infantil - Amb el nom adequat, aquesta pàgina ofereix una interfície interactiva i totalment visual (és a dir, sense necessitat de codificació) perquè pugueu jugar amb els diversos punts finals de Zenserp. Aquí podeu generar algunes respostes de mostra i utilitzar-les per configurar la vostra sol·licitud d’API. No confieu en aquest 100%, ja que hi ha casos de cantonada més enllà de la capacitat d’aquesta eina. Tot i això, ens encanta com teniu l'opció d'exportar la vostra experimentació al codi (Navegador, Curl, Python, Node.js, PHP) quan trobeu alguna cosa que realment funcioni.
• Documentació - Detalla les vísceres de l'API Zenserp. A continuació, ho tractem en profunditat.
• Perfil / seguretat - Configuració bàsica del compte, inclòs el vostre avatar, informació de contacte i gestió de contrasenyes. Res de luxe.
• Facturació - Consta de tres opcions, on podeu actualitzar / rebaixar / cancel·lar el vostre nivell de subscripció, gestionar la forma de pagament i l’identificador d’IVA, a més d’un camp gratuït on podeu sol·licitar que s’inclogui text a les factures de Zenserp per facilitar la comptabilitat.

Tot això és una tarifa bastant estàndard per a qualsevol API, però agraïm el senzill disseny de tot. El que veieu és el que obteniu i Zenserp no intenta enterrar la configuració de la subscripció en racons obscurs del vostre perfil.

La documentació de l'API Zenserp | SERPs Raspa amb Zenserp

Amb els conceptes bàsics fora del camí, ara podem entrar en allò bo: la documentació de Zenserp. Aquí veureu exactament de què és capaç l’API i com s’utilitza. Tot i que la implementació completa de l'API a la vostra aplicació està fora de l'abast d'aquesta revisió, tocarem breument cada punt final, alguns paràmetres clau i proporcionarem alguns exemples de respostes.

Funcionalitat bàsica

Començar la pàgina de documentació és una secció Com començar, que detalla les funcions de l'API més bàsiques que poden interactuar amb la resta de punts finals. Fem una ullada:

activar / starz play

• Autenticació - Això us mostra com utilitzar la vostra clau API per a l'autenticació. Hi ha un exemple d’ús a la capçalera, seguit d’exemples de sol·licituds GET i POST. Peasy fàcil.
• estat - Us permet sol·licitar el nombre de sol·licituds restants segons els límits de subscripció. Al cap i a la fi, per què us molesteu a iniciar sessió al vostre tauler de control de Zenserp quan només podeu fer que la vostra aplicació us ho digui directament?
• lot - Si afegiu aquest punt final, podeu fer fins a 1.000 cerques en un sol lot. Teniu l'opció de sol·licitar tots els lots alhora, específics per identificador de lot, o bé enviar un lot nou o combinar-ne els existents si cal.
• Codis d'error - Zenserp també té la possibilitat de retornar errors a mesura que es produeixin. Inclou el 403 Prohibit quan hàgiu assolit el límit mensual o utilitzeu una clau d’API incorrecta, 404 quan no s’han trobat resultats o 500. Sempre que hi hagi un error de servidor. No oblideu que les sol·licituds fallides també apareixen al vostre tauler.

El punt final / search | SERPs Raspa amb Zenserp

La funcionalitat bàsica de Zenserp és aquí. Afegint / cerqueu a la vostra sol·licitud d'API. Rebrà una àmplia gamma de dades sobre bàsicament qualsevol cosa que pugui pensar per recollir SERPS. La vostra consulta retornarà una àmplia gamma de resultats, inclosos:

• Resultats de cerca orgànics - La consulta de SERPs orgànics retorna tot tipus de dades, inclòs el rànquing d’elements, el seu títol, tant l’URL mostrat com el de destinació, diversos tipus de ressenyes, si l’enllaç és un enllaç AMP de Google, cadenes que representen la descripció de la pàgina i més el paquet local de 3 que conté informació empresarial.
• Resultats de pagament - També obtindreu una visió general completa dels resultats de pagament. La informació que es retorna inclou la posició de pagament (superior, dreta o inferior), el títol, l'URL de seguiment d'AdWords, la ratlla, l'URL visible tal com apareix a Google, la descripció de la pàgina, a més de qualsevol ubicació de producte de pagament (inclosa la posició, el títol, les imatges associades, URL i, per descomptat, preu).
• Quadre de respostes / fragment destacat / història principal - Or pur per a qualsevol SEO. Vegeu fàcilment el que funciona millor per guanyar aquests cobejats llocs en SERPs i, a continuació, creeu una estratègia per reproduir aquests resultats.
• Cerques relacionades / volíeu dir? - Zenserp millora la investigació de paraules clau en enviar dades valuoses sobre totes les cerques relacionades a la vostra consulta. També podeu preveure com respon Google als errors habituals que cometen els usuaris en cercar la vostra consulta.

Aquí teniu una versió reduïda d’un exemple que apareix a Zenserp documentació, amb Pied Piper com a consulta. Podeu veure els diferents tipus de resultats que apareixen en ordre: l'entrada de Viquipèdia (1), preguntes relacionades amb la consulta (2), un lloc web amb un nom de domini de concordança exacta (3), un article popular sobre els orígens de Pied Piper. (4), a més d'alguns vídeos relacionats sobre el tema (5). També veureu algunes frases de cerca relacionades, a més del nombre total de resultats retornats.

Exemple

{ 'query':{ 'apikey':'YOUR-API-KEY', 'q':'Pied Piper', 'url':'https://google.com/search?q=Pied+Piper&hl=en&gl=us&sourceid=chrome&ie=UTF-8' }, 'organic':[ { 'position':1, 'title':'Pied Piper of Hamelin - Wikipedia', 'url':'https://en.wikipedia.org/wiki/Pied_Piper_of_Hamelin', 'destination':'https://en.wikipedia.org › wiki › Pied_Piper_of_Hamelin', 'description':'The Pied Piper of Hamelin is the titular character of a legend from the town of Hamelin (Hameln), Lower Saxony, Germany. The legend dates back to the Middle ...', 'isAmp':false }, { 'position':2, 'questions':[ { 'question':'What is the meaning of the Pied Piper?' }, { 'question':'What is the story of the Pied Piper?' }, { 'question':'Is the pied piper a fairy tale?' }, { 'question':'Is Pied Piper a real company?' } ] }, { 'position':3, 'title':'Pied Piper', 'url':'http://www.piedpiper.com/', 'destination':'www.piedpiper.com', 'description':'The old Pied Piper flute player logo was referencing a fairytale character and in no way was meant to suggest a sexual act involving either the mouth or ear of ...', 'isAmp':false }, { 'position':4, 'title':'The Disturbing True Story of the Pied Piper of Hamelin ...', 'url':'https://www.ancient-origins.net/myths-legends/disturbing-true-story-pied-piper-hamelin-001969', 'destination':'https://www.ancient-origins.net › myths-legends › disturbing-true-story-pie...', 'description':'Aug 14, 2014 - Many are familiar with the story of the Pied Piper of Hamelin. Few realise however, that the story is based on real events, which evolved over ...', 'isAmp':false }, { 'position':5, 'videos':[ { 'title':'Pied Piper', 'url':'https://www.youtube.com/watch?v=VEZ_Ui6d9AM', 'parsed':{ 'source':'YouTube', 'date':'May 2, 2018', 'channel':'BTS - Topic' } }, { 'title':'The True History of The Pied Piper of Hamelin | Fairy Tales ...', 'url':'https://www.youtube.com/watch?v=obIAwAAcAAg', 'parsed':{ 'source':'YouTube', 'date':'Aug 4, 2017', 'channel':'Jen Campbell' } }, { 'title':'The Pied Piper: a modern day fairy tale', 'url':'https://www.wvi.org/child-health-now/video/pied-piper-modern-day-fairy-tale', 'parsed':{ 'source':'World Vision International', 'date':'Aug 22, 2013', 'channel':'WVIAdvocacy' } } ] } ], 'related_searches':[ { 'title':'pied piper instrument', 'url':'https://google.com/search?hl=en&gl=us&q=pied+piper+instrument&sa=X&ved=2ahUKEwj-vPeI3oXnAhVJJBoKHQ6iDYkQ1QIoAHoECBMQAQ' }, { 'title':'pied piper poem', 'url':'https://google.com/search?hl=en&gl=us&q=pied+piper+poem&sa=X&ved=2ahUKEwj-vPeI3oXnAhVJJBoKHQ6iDYkQ1QIoAXoECBMQAg' }, { 'title':'moral lesson of pied piper story', 'url':'https://google.com/search?hl=en&gl=us&q=moral+lesson+of+pied+piper+story&sa=X&ved=2ahUKEwj-vPeI3oXnAhVJJBoKHQ6iDYkQ1QIoAnoECBMQAw' }, { 'title':'the pied piper of hamelin summary', 'url':'https://google.com/search?hl=en&gl=us&q=the+pied+piper+of+hamelin+summary&sa=X&ved=2ahUKEwj-vPeI3oXnAhVJJBoKHQ6iDYkQ1QIoA3oECBMQBA' }, { 'title':'pied piper of hamelin story pdf', 'url':'https://google.com/search?hl=en&gl=us&q=pied+piper+of+hamelin+story+pdf&sa=X&ved=2ahUKEwj-vPeI3oXnAhVJJBoKHQ6iDYkQ1QIoBHoECBMQBQ' }, ], 'number_of_results':34800000 }

Refinació de la vostra sol·licitud per tipus de cerca | SERPs Raspa amb Zenserp

Més enllà de la sol·licitud SERP predeterminada, també podeu restringir la vostra consulta de cerca de Google per tipus de cerca (imatge, vídeo, mapes, compres, notícies, compres, etc.). Simplement configureu el fitxer Massa (que s'ha de fer coincidir) amb qualsevol de les opcions següents:

• ish - Retorna els resultats de la cerca d'imatges de Google. Aquesta sol·licitud retorna una gran quantitat de dades que inclouen posició, miniatures, URL d'origen, títols i molt més. (Per a la cerca inversa d’imatges, executareu el fitxer imatge_url paràmetre en lloc de tbm = ish )
• a - Retorna els resultats de la cerca de Google Video. Rebrà informació com el domini d'origen, l'URL del vídeo, el títol, la descripció, a més de qualsevol extensió o miniatura.
• lcl - Una altra mina d'or de dades de SEO, el lcl el paràmetre retorna els resultats de la cerca de Google Maps. Veureu el nom de l’empresa o de la ubicació, els URL del lloc web, si el resultat es paga o no, estrelles o ressenyes, a més d’informació vital, com ara adreça, números de telèfon, horari d’operació, preus notables i fins i tot el tipus d’empresa. També teniu l'opció de sol·licitar indicacions per a aquestes empreses.
• això - Necessiteu estar al dia de l'actualitat i l'evolució de la vostra indústria? Afegiu el fitxer això paràmetre de la vostra consulta per obtenir resultats de la cerca de Google Notícies en temps real. Consulteu els noms dels articles, els seus enllaços, les dates de publicació (i analitzades per la vostra API), l'editor, una breu descripció de l'article i les miniatures disponibles.
• botiga - Accediu als resultats de la cerca de Google Shopping amb botiga paràmetre. Vegem alguns resultats de mostra (molt truncats per facilitar la llegibilitat) dels escalfadors d’aigua d’Atlanta, GA:

Shopping EndPoint

A més del nucli /cerca punt final, també compta amb l’API Zenserp /compres . Això us permet analitzar les pàgines de productes de Google Shopping. Afegireu el product_id paràmetre al vostre /compres consulta, amb l'opció d'especificar la geolocalització de la cerca desitjada ( ubicació ), codi del país ( gI ) i / o llenguatge de la interfície web ( hl ). També podeu canviar amb quina variant de regió de la Cerca de Google voleu utilitzar motor_cerca .

Trend Endpoint | SERPs Raspa amb Zenserp

Afegint les sol·licituds de Google Trends / tendències a la vostra sol·licitud (tot i que la documentació de Zenserp indica incorrectament que hauríeu d’utilitzar-la) /compres ). Els vostres resultats de Tendències estan impulsats per paraula clau [] paràmetre, on passeu la frase de paraula clau com a argument dins de []. La documentació de Zenserp té un recordatori pràctic sobre quins operadors utilitza Trends (+ per o, - per excloure, espai per a, i pressupostos per a una coincidència exacta), que serà fonamental per a la vostra consulta.

Podeu especificar més la zona horària ( tz ), identificador de categoria ( gat ), el període de temps per als vostres resultats (cada hora, diàriament, mensualment, anualment en moltes subdivisions). El tipus de la propietat de Google per cercar (com ara, imatges, vols, YouTube, finances, etc.). El geo ubicació o codi d'ubicació de Google ( gI ), i fins i tot el resolució dins d'aquesta regió (bàsicament, definir si cerqueu a tot el país, a tota la ciutat, a nivell regional, etc.)

Per tant, diguem que volíeu veure com ha estat tendència Kanye West durant el darrer mes. Feu la sol·licitud així:

https://app.zenserp.com/api/v1/trends?apikey=YOUR-API-KEY&keyword%5B%5D=kanye%20west&timeframe=today%201-m

Actuació | SERPs Raspa amb Zenserp

Ara que hem acabat amb la visió general de les funcions, com funciona Zenserp? Al cap i a la fi, totes aquestes bones dades no serveixen per a res si no podeu accedir-hi a causa dels esforços de recollida de dades programàtiques de Google.

Segons la nostra experiència, Zenserp va dur a terme les seves tasques sense cap problema, independentment del que hàgim cercat i d’on vam orientar les nostres consultes al món. L’arma secreta aquí és la increïble xarxa proxy mundial de Zenserp, que redirigeix ​​les vostres sol·licituds cap a on han d’anar mentre canvia la vostra adreça IP per adaptar-la. Tot i que Zenserp no fa públics els números reals de la seva xarxa de servidors, va resultar prou robust per no provocar mai cap error quan vam fer les nostres sol·licituds de prova.

També s’inclou sota el capó de l’API Zenserp un sofisticat solucionador Captcha. Una vegada més, no tenim detalls sobre com van fer funcionar aquest treball. Però va funcionar i, de manera constant, també.

Preus

La infraestructura de Zenserp és suficient per satisfer qualsevol escala d’operació. Ofereixen una àmplia gamma de preus de subscripció perquè només pagueu exactament el que necessiteu. Independentment del nivell que trieu, podeu pagar una quota mensual baixa o obtenir un descompte del 20% en un pla anual.

A més dels nivells estàndard, Zenserp ofereix plans d’alt volum. Això està bloquejat en un esquema de pagaments mensuals. Cada nivell inclou totes les funcions premium dels plans MEDI-MOLT GRANS. I escalar la quota mensual segons la quantitat que pagueu:

• PREMIUM: 599,99 dòlars i 250.000 sol·licituds al mes
• PROFESSIONAL: 1.399,99 dòlars i 750.000 sol·licituds al mes
• EMPRESA - 1.599,99 dòlars i 1.000.000 de sol·licituds al mes

SERPs Raspa amb Zenserp

SaaS Industries ha produït una oferta increïble amb la seva API Zenserp. És personalitzable i altament escalable gràcies a la seva robusta infraestructura. Tot i així, és senzill d’integrar a la vostra aplicació gràcies a una fàcil lògica paramètrica i una àmplia compatibilitat del llenguatge de codificació.

Les nostres proves van donar resultats constants sense provocar mai cap error. Tot i que sospitem que el servei no és invulnerable a errors en l’escala requerida per les grans empreses. Independentment del tipus de sol·licitud que fem, els resultats sempre van ser oportuns i significatius. És molt útil poder afinar la vostra sol·licitud de SERP per tipus de cerca i, per tant, és evident que Zenserp ofereix una eina inestimable i assequible per a qualsevol desenvolupador de SEO.

Si tinguéssim alguna crítica al servei, és que la documentació podria utilitzar un llenguatge més natural per explicar-ne el contingut. Per descomptat, un desenvolupador experimentat no hauria de tenir problemes per entendre què s’ofereix, de manera que és probable que no sigui un problema. Encara que ho sigui, tots els nivells de pagament menys els més petits inclouen incorporació de consergeria i atenció al client personalitzada, de manera que sempre podreu atendre les vostres necessitats perfectament.

Conclusió

Molt bé, tot va ser gent! Espero que us agradi aquest article de SERPs Scraping with Zenserp i que us sigui útil. Doneu-nos els vostres comentaris al respecte. També si teniu més preguntes relacionades amb aquest article. A continuació, feu-nos-ho saber a la secció de comentaris següent. En breu ens posarem en contacte amb vosaltres.

Que tinguis un bon dia!

Vegeu també: Guia de l'usuari On Veure la memòria cau de Chrome al Windows 10