BrokerPaysBot recopila páginas y documentos públicos sobre programas de socios de brókers para el directorio BrokerPays.
- Agente de usuario (user agent):
BrokerPaysBot/1.0 (+https://brokerpays.com/bot/) - Frecuencia: aproximadamente una vez por semana por página; no más de una solicitud cada 2 segundos por dominio.
- Alcance: solo las páginas públicas incluidas en nuestro registro de fuentes. El bot no inicia sesión, no envía formularios ni resuelve captchas.
- robots.txt: se respeta. Para excluir páginas, agregue una regla para
BrokerPaysBot. - Contacto: [email protected] — para preguntas, correcciones o para sugerir la página de origen correcta para su programa.