Mixnode

Mixnode

Mixnode es una plataforma rápida, flexible y escalable para extraer y analizar datos de la web.Mixnode le permite pensar en todos los recursos en la web como filas en una tabla de base de datos;una tabla de base de datos gigante con miles de millones de filas que puede consultar utilizando el lenguaje de consulta estructurado (SQL) estándar.Entonces, en lugar de ejecutar rastreadores / raspadores web, puede escribir consultas simples en un lenguaje ultra flexible para recuperar todo tipo de información interesante de la web.
mixnode

Categorias

Alternativas a Mixnode para Linux

grab-site

grab-site

grab-site es un rastreador para archivar sitios web en archivos WARC.Incluye un panel para monitorear múltiples rastreos y admite cambiar los patrones de ignorar URL durante el rastreo.