Lwp :: robotua LWP :: Robotua es una clase Perl para robots web de buen comportamiento.
Descargar ahora

Lwp :: robotua Clasificación y resumen

Lwp :: robotua Etiquetas

web Módulo perl Robots Robots web Clase perl Lwp

Lwp :: robotua Descripción

LWP :: Robotua es una clase Perl para robots web de buen comportamiento. LWP :: Robotua es una clase Perl para robots web de buen comportamiento.Synopsis Use LWP :: Robotua; My $ UA = LWP :: Robotua-> Nuevo ('My-Robot / 0.1', 'me@foo.com'); $ ua-> demora (10); # Sé muy bonito - max uno golpeado cada diez minutos! ... # luego solo lo use como un LWP normal :: UserAgent: My $ Respow = $ UA-> Obtenga ('http: //whatever.int / ...'); ... Esta clase implementa un agente de usuario que es adecuado para aplicaciones de robots. Los robots deben ser amables con los servidores que visitan. Deben consultar el archivo /ROBOTS.TXT para asegurarse de que son bienvenidos y no deben realizar solicitudes con demasiada frecuencia. Pero antes de considerar escribir un robot, eche un vistazo a http: //www.robotstxt.org. Cuando use un LWP :: Robotua Objeto como su agente de usuario, entonces realmente no tiene que pensar en estas cosas; Robots.txt Los archivos se consultan y obedecen automáticamente, el servidor no se consulta demasiado rápido, y así sucesivamente. Simplemente envíe las solicitudes que lo hace cuando está usando un objeto Normal LWP :: UserAgent (usando $ UA-> Obtenga (...), $ UA-> Head (...), $ UA-> Solicitud (... ), etc.), y este agente especial se asegurará de que sean agradables. Requisitos: · Perl

Lwp :: robotua Software relacionado