Author Patrick Valibus 410 Gone
Recipients Patrick Valibus 410 Gone
Date 2020-06-22.20:35:43
SpamBayes Score -1.0
Marked as misclassified Yes
Message-id <1592858143.87.0.713102361399.issue36207@roundup.psfhosted.org>
In-reply-to
Content
Bonjour, nous n'avons pas réussi à le faire fonctionner. Nous l'avons utilisé dans le cadre d'un test seo car nous essayons e reproduire des alternatives à scrappy. Par exemple le robots devrait bine crawler la page de notre agence seo https://www.410-gone.fr/seo.html mais ne devrait pas accepter les pages finissant par /*.php$ et pourtant si malgré qu'elles soient bloquées en référencement dans notre robots.txt, merci.
History
Date User Action Args
2020-06-22 20:35:43Patrick Valibus 410 Gonesetrecipients: + Patrick Valibus 410 Gone
2020-06-22 20:35:43Patrick Valibus 410 Gonesetmessageid: <1592858143.87.0.713102361399.issue36207@roundup.psfhosted.org>
2020-06-22 20:35:43Patrick Valibus 410 Gonelinkissue36207 messages
2020-06-22 20:35:43Patrick Valibus 410 Gonecreate