Skip to content

Latest commit

 

History

History
167 lines (147 loc) · 5.24 KB

README.md

File metadata and controls

167 lines (147 loc) · 5.24 KB
Raw

WebScrap to Abctelefonos.es / WebScrap a AbcTelefonos.es

EN: It's a simple way to convert searchable querys to AbcTelefonos.es to JSON, for consume it from any website

ES: Es una simple herramienta que permite convertir los search query a AbcTelefonos.es en un JSON que puede ser consumido desde cualquier web

Getting Started | Comenzando 🚀

EN: just npm install to download the depedencies and node index.js to run it, make http request to localhost to test or just access to localhost/home/index.html for use the GUI

ES: tan solo npm install para descargar las dependencias y usa node index.js para correrlo, haz peticiones a localhost para ir probando o accede a locahost/home/index.html para hacer uso de la GUI. Para cambiar el puerto, hay que cambiar la variable de entorno PORT del entorno bash (PWS: $env:PORT = "puerto" ej $env:PORT = 81/ en cmd set PORT="puerto" ej: PORT=81 / en unix/linux terminal PORT="puerto" node index.js ej PORT:81 node index.js

Pre-requirements | Pre-requisitos 📋

EN: last test on node 14.18.2 and npm 6.14.15

ES: probado por ultima vez en node 14.18.2 y npm 6.14.15

Endpoints

  • Route: get:// :query | "Use the query url format of abctelefonos.es to make the petition | Ruta inicial get, usa el query_url de abctelefonos para hacer la peticion y obtener la conversion" Code
//query_url format: /search?q=Pepe&l=&t=comercio&country=all

fetch('http://localhost/search?q=Pepe&l=&t=comercio&country=all',
    {
        method: "GET",
        headers: new Headers(),
        mode: 'cors',
        cache: 'default', 
    }.then(response => response).then( async data =>{
        let resjson = await data.json();
        console.log(resjson)
    });

Reduced Result

js
{
    "results": [
        {
            "name": "Pepe",
            "phone": "(011) 4781-0259",
            "street": "Aguilar 2487",
            "locality": "Capital Federal",
            "country": "Argentina"
        },
        {
            "name": "Astraldi Luis E",
            "phone": "(011) 4781-9808",
            "street": "Aguilar 2589 05 A",
            "locality": "Capital Federal",
            "country": "Argentina"
        },
        {
            "name": "Pepe Piriz",
            "phone": "(03482) 42-4936",
            "street": "Calle 31 Jorge 143",
            "locality": "Reconquista, Santa Fe",
            "country": "Argentina"
        },
    ],
    "pages": [
        {
            "to": "Siguiente",
            "link": "/comercio/argentina/pepe/pag_2"
        },
        {
            "to": "Siguiente",
            "link": "/comercio/chile/pepe/pag_2"
        },
        {
            "to": "Siguiente",
            "link": "/comercio/espana/pepe/pag_2"
        },
        {
            "to": "Siguiente",
            "link": "/comercio/usa/pepe/pag_2"
        },
        {
            "to": "Siguiente",
            "link": "/comercio/mexico/pepe/pag_2"
        },
        {
            "to": "Siguiente",
            "link": "/comercio/venezuela/pepe/pag_2"
        }
    ]
}
  • Route: post://| "Pass throught post body the query_url in a 'to_page' identificator | Pasa por la cuerpo de la peticion post, la query url en un identificador 'to_page'"

Code

//query_url format: /search?q=Pepe&l=&t=comercio&country=all

let headersList = {
 "Accept": "*/*",
 "Content-Type": "application/json"
}

fetch("http://localhost/", { 
    method: "POST",
    body: "    {\n        \"to_page\": \"/comercio/venezuela/pepe/pag_2\"\n    }",
    headers: headersList
}).then(response => response).then( async data =>{
    let resjson = await data.json();
    console.log(resjson)
});

Reduced Result

js
{
    "results": [
        {
            "name": "Pepe Alvarez Emilio Antonio",
            "phone": "",
            "street": "",
            "locality": "",
            "country": ""
        },
        {
            "name": "Pepe Amarista Luis Carlos",
            "phone": "",
            "street": "",
            "locality": "",
            "country": ""
        },
        {
            "name": "Pepe Anaya Sandra Lisbeth",
            "phone": "",
            "street": "",
            "locality": "",
            "country": ""
        },
    ],
    "pages": [
        {
            "to": "Anterior",
            "link": "/comercio/venezuela/pepe/pag_1"
        },
        {
            "to": "Siguiente",
            "link": "/comercio/venezuela/pepe/pag_3"
        }
    ]
}

Route: get://home/index.html | "Access to the GUI Utility | Accede a la Utilidad con Interfaz Visual"

Builded with | Construido con 🛠️

Menciona las herramientas que utilizaste para crear tu proyecto

  • Express.js - Framework para el Back / Framework for the Back
  • Axios - Gestor de solicitudes HTTP / HTTP Request Manager
  • Scrape It - Libreria que facilita el Web Scrap / Library to facilitate the Web Scraping
  • Tabulator - Libreria para las tablas del index.html y su debida exportacion / Library for the tables and exporting the data

Made by | Autor ✒️

⌨️ Hecho con ❤️ por Renato Galindo Re595 😎😎