Robot Crawle et Javascript

Salut depuis quelque temps beaucoup de personnes ont reçu la visite de ce robot http://semalt.com/ qui apparaît dans les stats Analytics et autres.
En fait ce que j'essaye de comprendre c'est la façon de procéder de ce robot comment fait-il pour exécuter le javascript des sites web qu'il visite ?

J'ai effectué quelque recherche mais je n'ai rien trouvé d’intéressant même Google ne le fait pas a ce que je sache, du coup a par ouvrir des milliards d'onglets dans un navigateur je ne voit pas trop comment est-ce qu'il parvient a réaliser ceci.

Merci d'avance.

Java Nashorn ou Rhino

A+JYT

d'un point de vue user, je te dirais que tu tombe sur un "bot" parmi des milliers de milliers de "bot"... du coup, tu décide de dire que ce "bot" à cet instant précis est plus fiable que un autre... mais sous quels critères? je penses que même cette sélection est déjà corrompu, parce que tu penses que cette sélection est bonne... bon tout le monde as pas les datas centers de la nasa je veux dire...

@sekaijin merci pour ta réponse mais par exemple pour Rihno l'objet Window n'existera pas est donc le code ne sera pas exécuter.

ce n'est qu'une question de contexte d'exécution il suffit de créer un objet nommé window qui porte les méthodes et attributs ad-hoc mais qui n'est pas une fenêtre.

en suite toute ou partie du code JS peut être parsé et analysé. de même pour le code HTML
il suffit ensuite de repéré tous les handlers d'événement
et de lancer l'événement correspondant sur l'objet en question le JS crois alors s'exécuter dans un navigateur
les appel à des url peuvent alors être intercepté et listé
pour ensuite être catalogué.

c'est de cette façon que fonctionne certain outil de dev JS pour compiler et tester des appli.
A+JYT

Merci pour ta réponse n'aurai tu pas par hasard petit lien sur la question ?