User-Agent du Http Crawler

20 views
Skip to first unread message

vinles...@gmail.com

unread,
Jun 21, 2017, 3:53:00 PM6/21/17
to Constellio FR
je suis en train de tester le http crawl et je frappe un problème,,,, Constellio S'annonce comme étant un Navigateur chrome et non un crawler (User-agent) 

Donc le cms que je crawl ne le détecte pas comme un crawler... etant donne que je ne peux pas vraiment ajouter chrome a la liste des search engine...

Je n'ai pas trouver aucun moyen de paramétrer cette valeur.. 

Le seul moyen que j'ai trouver serait de pousser un object BrowserVersion lors de la creation du webclient:

BrowserVersion(NETSCAPE, applicationVersion, user-agent, browserVersionNumeric)
eg: BrowserVersion(NETSCAPE, "5.0 (Windows)","Constellio",52, "FF52", null);

Il semble que les deux process important soit:
et

Suis-je sur la bonne voie? est-ce que j'ai manquer un detail?


Vincent

vinles...@gmail.com

unread,
Jun 21, 2017, 3:56:57 PM6/21/17
to Constellio FR
 PS:J'ai utiliser Firefox comme base mais peux-etre que chrome serait un meilleur choix...
Reply all
Reply to author
Forward
0 new messages